2019年1月15日
scrapy + selenium 的动态爬虫
摘要： 动态爬虫 在通过scrapy框架进行某些网站数据爬取的时候，往往会碰到页面动态数据加载的情况发生，如果直接使用scrapy对其url发请求，是绝对获取不到那部分动态加载出来的数据值。但是通过观察我们会发现，通过浏览器进行url请求发送则会加载出对应的动态加载出的数据。那么如果我们想要在scrapy也 阅读全文
posted @ 2019-01-15 21:51 洛丶丶丶 阅读(743) 评论(0) 推荐(0) 编辑