摘要: scrapy的步骤: a.编写item,爬取的各个属性 b.编写spider,name 要和 scrapy crawl xxspider一致,里面编写parse的信息,就是xpath获取item的各个信息。同时获取下一个要爬取的url放入url_set()队列 c.pipeline,item的数据落 阅读全文