摘要：
一. From: http://www.sharejs.com/codes/Python/8309 1.在Scrapy工程下新建“middlewares.py” 2.在项目配置文件里(./project_name/settings.py)添加 只要两步，现在请求就是通过代理的了。测试一下^_^ 二. 阅读全文
摘要：
{"error":"imagemogr2:File too large,please use pfop service"} ex: http://img5.mtime.cn/pi/u/2017/05/04/201118.78502982_1000X1000.jpg 待解。。。 阅读全文
摘要：
传送门：http://www.cnblogs.com/junrong624/p/5533655.html 在互联网上进行自动数据采集（抓取）这件事和互联网存在的时间差不多一样长。今天大众好像更倾向于用“网络数据采集”，有时会把网络数据采集程序称为网络机器人（bots）。最常用的方法是写一个自动化程序 阅读全文
摘要：
在 setting.py 文件中 设置 日志 记录等级 LOG_LEVEL= 'DEBUG' LOG_FILE ='log.txt' 阅读全文