摘要: 在scrapy中使用selenium 在scrapy中需要获取动态加载的数据的时候,可以在下载中间件中使用selenium 编码步骤: 1. 在爬虫文件中导入webdrvier类 2. 在爬虫文件的爬虫类的构造方法中进行浏览器实例化的操作 3. 在爬虫类close方法中进行浏览器关闭的操作 4. 在 阅读全文
posted @ 2019-01-17 21:24 Wualin 阅读(677) 评论(0) 推荐(0) 编辑