当前位置: 首页 > news >正文

东莞品牌设计公司济南做网站优化

东莞品牌设计公司,济南做网站优化,关键词优化软件,网站跟网页的区别是什么意思Python3 爬虫学习笔记第三章 —— 【Ajax 数据爬取】文章目录【3.1】Ajax 简介 【3.2】解析真实地址提取【3.1】Ajax 简介 Ajax — Asynchronous Javascript And XML#xff08;异步 JavaScript 和 XML#xff09;#xff0c;是指一种创建交互式网页应用的网页开发技术。可… Python3 爬虫学习笔记第三章 —— 【Ajax 数据爬取】 文章目录 【3.1】Ajax 简介 【3.2】解析真实地址提取【3.1】Ajax 简介 Ajax — Asynchronous Javascript And XML异步 JavaScript 和 XML是指一种创建交互式网页应用的网页开发技术。可以在不重新加载整个网页的情况下对网页的某部分进行更新。 【3.2】解析真实地址提取 以豆瓣电影动作片排行榜为例地址为https://movie.douban.com/typerank?type_name%E5%8A%A8%E4%BD%9Ctype5interval_id100:90action 首先使用常用方法来爬取电影信息 import requestsurl https://movie.douban.com/typerank?type_name%E5%8A%A8%E4%BD%9Ctype5interval_id100:90actionheaders {User-Agent: Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36 SE 2.X MetaSr 1.0} response requests.get(url, headersheaders)print(response.text)得到的数据里面我们并没有找到电影相关信息 再次分析页面发现鼠标下滑的时候页面不刷新URL 也不变但是会加载新数据那么此处就运用了 Ajax可以使用抓包工具或者浏览器控制台来捕获 Ajax 接口获取其真实地址XHR 是 Ajax 特殊的请求类型返回的是 json 数据利用浏览器控制台过滤 XHR随便点击一条请求可以看到其 Request URL也就是真实地址点击 Preview 就可以看到返回的 json 数据。 同样我们可以使用 Fiddler 抓包软件抓取 Ajax 接口 分析其真实地址为https://movie.douban.com/j/chart/top_list?type5interval_id100%3A90actionstart20limit20 多下滑几次只有 start 参数发生了改变观察变化可知每一次页面将多出20个电影信息start 为从第几个电影开始由此就不难进行数据抓取了 代码 import requestsurl https://movie.douban.com/j/chart/top_list?type5interval_id100%3A90actionpage int(input(请输入想要第几页的数据)) data {start: (page - 1)*20,limit: 20, } headers {User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86 Safari/537.36, } response requests.get(url, paramsdata, headersheaders) print(response.text)运行代码即可得到电影排行信息
http://wiki.neutronadmin.com/news/420353/

相关文章:

  • 免费帮忙做网站权威的网站建设
  • 邢台建设厅网站百度在线识图查图片
  • 泰州网站的建设开发一个app大概需要多少钱
  • 互联网网站备案表定制开发软件产品的税率
  • 具有品牌的上海网站建设装修网络布线
  • 乡镇网站建设中的问题镇江网站建设一般多少钱
  • 墨尔本网站建设湛江的网站
  • 婚纱网站开发的必要性网站会动的页面怎么做的
  • 网站开发项目运营经理岗位职责赣州市规划建设局网站改
  • 国家开放大学网站界面设计建设工程教育网网址
  • 做国际网站有用吗建设厅资质管理网站
  • 网站建设源码装修公司排名前十哪家口碑好
  • 网商网站怎么做加强网站内容建设创新
  • 中英文网站开发费用做网站有回扣拿吗
  • 方案设计基本步骤优化官方网站设计
  • 网站开发团队人员配置soho网站建设教程
  • dedecms 图片网站网站建设管理ppt模板
  • 学校网站建设机构怎样在建设部网站上查公司信息
  • 郑州seo建站房产获客软件
  • 网站如何做查询表单小程序公司代理
  • 好的网站或网页东莞ppt免费模板下载网站
  • 网站优化千牛帮盾思途旅游网站建设
  • wordpress 地方门户关键字优化工具
  • 做海报的网站推荐建设注册管理中心网站
  • 怎么自己建立公司网站无代码网站
  • 更新网站怎么弄服装网站设计策划
  • 网站在只有域名了简单的装x编程代码
  • 福州网站建设案例软件工程专业是干什么的
  • 网站后台模板制作流程深圳网络广告推广公司
  • 怎么用自己的电脑做网站上海到北京多少公里