2020年8月22日
scrapy抓取豆瓣网细化抓取到的信息（2）
该文被密码保护。 阅读全文
posted @ 2020-08-22 11:43 攻城狮小关 阅读(0) 评论(0) 推荐(0) 编辑
修改了USER_AGENT还是不能抓取到数据怎么办？
摘要： 1.首先检查自己的程序有没有错误，确保USER_AGENT是相对应网站的，复制粘贴无误 2.检查自己pycharm中setting.py文件中的USER_AGENT有没有打开 3.删除USER_AGENT前面的#即为打开 4.字体亮起即成功打开，现在运行scrapy crawl +文件名，就可以抓取 阅读全文
posted @ 2020-08-22 11:16 攻城狮小关 阅读(332) 评论(0) 推荐(0) 编辑