摘要: 目前网上有很多关于scrapy的文章,这里我主要介绍一下我在开发中遇到问题及一些技巧: 1,以登录状态去爬取(带cookie) -安装内容: brew install phantomjs (MAC上) pip install selenium -代码: ※特别提示:当需要爬取动态内容(js加载的内容 阅读全文
posted @ 2017-12-26 16:47 六点 阅读(447) 评论(0) 推荐(0) 编辑