2017年10月7日
如何维护一个1000 IP的免费代理池
摘要： 楔子 好友李博士要买房了, 前几天应邀帮他抓链家的数据分析下房价, 爬到一半遇到了验证码. 李博士的想法是每天把链家在售的二手房数据都抓一遍, 然后按照时间序列分析. 链家线上在交易的二手房数据大概有30000余套, 而一天只有86400秒, 也就是最慢3s也要访问一个页面. 测试按照这种频率, 大 阅读全文
posted @ 2017-10-07 19:31 ospider 阅读(14184) 评论(0) 推荐(2) 编辑