Fork me on GitHub
2019年3月1日
scrapy+selenium+chromedriver解析动态渲染页面
摘要： 背景：动态页面是页面是通过js代码渲染出来的，无法直接使用scrapy爬虫，这是就需要先把js代码转为静态的html，再用scrapy爬虫就可以解决 解决办法：增加SeleniumMiddlewares中间件 代码： 阅读全文
posted @ 2019-03-01 14:46 猿起缘灭 阅读(2992) 评论(0) 推荐(0) 编辑