scrapy的使用

pip install scrapy 下载scrapy

scrapy startproject 项目名称

创建要抓取的网站的基本模板的生成 scrapy genspider cnblogs  news.cnblogs.com        cnblogs 为模板名称  news.cnblogs.com为要抓取网站的域名

运行scrapy的方法为 scrapy crawl cnblogs