爬虫Scrapy指令学习

1、新建一个新的爬虫项目指令 scrapy startproject xxx

2、在项目/spider目录下创建一个名为XXX的爬虫,并指定爬取域的范围  scrapy genspider XXX "www.XXX.com"

3、执行运行命令 scrapy crawl itcast

4、保存execl数据 scrapy crawl XXX -o XXX.csv

5、保存json数据 scrapy crawl XXX -o XXX.json

posted @ 2019-01-10 09:26  52117354  阅读(216)  评论(2编辑  收藏  举报