摘要: ''' 爬取去哪儿网所有城市自由行数据 爬取速度过快时会引发服务器返回错误 反反爬策略:设置cookies池和ip代理池以及延长爬虫休眠时间 ''' import requests import time from urllib.parse import quote from multiprocessing import Pool import pymongo import random de... 阅读全文
posted @ 2019-05-16 18:03 阿布_alone 阅读(619) 评论(0) 推荐(0) 编辑
TOP