2016年3月14日

爬虫-IP被封解决办法

摘要: 方法1. 之前由于公司项目需要,采集过google地图数据,还有一些大型网站数据。 经验如下:1.IP必须需要,比如ADSL。如果有条件,其实可以跟机房多申请外网IP。2.在有外网IP的机器上,部署代理服务器。3.你的程序,使用轮训替换代理服务器来访问想要采集的网站。好处:1.程序逻辑变化小,只需要 阅读全文

posted @ 2016-03-14 11:34 John_ABC 阅读(21462) 评论(2) 推荐(1) 编辑

导航