2018年8月9日
爬虫-设置代理ip
摘要： 1.为什么要设置代理ip 在学习Python爬虫的时候，经常会遇见所要爬取的网站采取了反爬取技术导致爬取失败。高强度、高效率地爬取网页信息常常会给网站服务器带来巨大压力，所以同一个IP反复爬取同一个网页，就很可能被封，所以通过设置代理IP来避免被封，从而顺利爬取。 2.从那里获取免费的IP 西刺免费 阅读全文
posted @ 2018-08-09 21:38 找回失去的自我 阅读(272) 评论(0) 推荐(0) 编辑