爬虫的框架:Scarpy
1、新建Scrapy项目:
进入项目目录,按住shift,选择windows powershell,在弹出的窗口输入:scarpy startproject 项目名
2、新建爬虫案例:
在新建的项目根目录中,按住shift,选择windows powershell,在弹出的窗口输入:scrapy genspider 爬虫名称 爬取页面的主机地址(scrapy genspider example example.com)
或者直接在第一步的窗口中:
cd youdaoSpider
scrapy genspider example example.com
3、执行命令:scarpy crawl 爬虫名称
本博客纯粹是学习过程中的笔记,部分来自转载或摘抄,如有侵权,请联系删除
email:18017870857@163.com