摘要: 1.MONGODB 2.MYSQL 提前建好表文件 阅读全文
posted @ 2019-02-15 20:46 404NooFound 阅读(303) 评论(0) 推荐(0) 编辑
摘要: 1.User-Agent scrapy默认的由UserAgentMiddleware设置为 "User-Agent": "Scrapy/1.5.1 (+https://scrapy.org)" 一、可以在setting中设置USER-AGENT设置 二、自定义随机user-agent 设置完成后在s 阅读全文
posted @ 2019-02-15 14:45 404NooFound 阅读(95) 评论(0) 推荐(0) 编辑