摘要:
# 启用Redis调度存储请求队列SCHEDULER = "scrapy_redis.scheduler.Scheduler"# 确保所有的爬虫通过Redis去重DUPEFILTER_CLASS = "scrapy_redis.dupefilter.RFPDupeFilter"# 不清除Redis队 阅读全文
摘要:
http://www.microsoft.com/en-us/download/confirmation.aspx?id=48145 根据自己的版本安装这个即可 阅读全文