摘要： 最近总被房产中介骚扰，因此打算做一件事情：找一个爬虫把自己区域内所有中介的手机号爬下来，统统导入手机黑名单。经过简单比较，感觉Scrapy挺小巧的，因此选择了它。安装：（windows环境）scrapy的安装还是有一点麻烦，因为它本身依赖的项目足有5个之多。不过你如果正确安装了vs2008的c++编译器（注意是vs2008。。。高版本也不行）直接用pip install scrapy就可以搞定所有依赖项自动安装。不然的话。就有点麻烦了。可以根据pip的出错信息，一个个手动安装完依赖（想偷懒的话下binary的包比较省事）。官方安装文档：http://doc.scrapy.org/en/late 阅读全文