摘要: 使用同一个IP去爬取同一个网站的网页,久了之后容易被屏蔽,这时候我们就需要代理服务器了,到这里http://www.xicidaili.com/ 我们可以查看到很多代理服务器地址。 在python的urllib库中,我们可以这样使用代理服务器访问我们需要访问的站点。 requests库使用代理 首先 阅读全文
posted @ 2018-03-20 14:53 awake006 阅读(414) 评论(0) 推荐(0) 编辑