2017年1月16日
爬虫关于ip管理池的应用
摘要： 在爬虫的时候经常会遇到一个问题就是ip被封，由于ip对网站的短时间大量请求，让网站将我们的ip暂时封掉。这样我们就无法全部爬取自己想要的内容。 这里百度了一下解决办法，很多人都提到了ip代理管理池的问题，其大致思想就是在一些网站上找一些免费的ip代理，然后将他们放入一个列表中，这样我们就可以用这些免 阅读全文
posted @ 2017-01-16 18:07 OverFitting 阅读(2870) 评论(0) 推荐(2) 编辑