摘要: 本文内容来源:https://www.dataquest.io/mission/117/working-with-apis 本文的数据来源:https://en.wikipedia.org/wiki/International_Space_Station 本文摘要:通过requests库和github的api来操作github仓库,从而熟悉一下与网络数据交互的过程 API(Applicati... 阅读全文
posted @ 2016-03-04 21:17 kylinlin 阅读(6658) 评论(0) 推荐(0) 编辑
摘要: 本文内容来源:http://blog.privatenode.in/torifying-scrapy-project-on-ubuntu/ 在使用Scrapy的时候,一旦进行高频率的爬取就容易被封IP,此时可以通过使用TOR来进行匿名爬取,同时要安装Polipo代理服务器 注意:要进行下面的操作的前提是,你能FQ 安装TOR 下载地址:https://www.torprojec... 阅读全文
posted @ 2016-03-04 15:30 kylinlin 阅读(8425) 评论(3) 推荐(0) 编辑