摘要: 面对众多动态网站比如说淘宝等,一般情况下用selenium最好 那么如何集成selenium到scrapy中呢? 因为每一次request的请求都要经过中间件,所以写在中间件中最为合适 注意别忘了 将中间件写入到settings中! 是不是可以优化的空间了呢? 每一次请求都要打开一次Chrome,这 阅读全文
posted @ 2018-12-08 23:11 人生苦短use,what? 阅读(277) 评论(0) 推荐(0) 编辑