Scrapy框架基本使用_对内容提取出来的url的进一步跟进

• 爬取网址 https://www.dytt8.net/index.htm

1. 创建项目
   
2. 创建爬虫
   
   
3. 项目结构
   
4. 规定要爬取的内容，如下
   
   随便点击一项进入
   
5. 对其编写xpath表达式
   5.1 提取描述文字xpath表达式
   
   5.2 提取链接xpath表达式
   
   5.3 图片链接提取xpath表达式
   
6. 定义Item
   
   7.编写parse函数
   
   8.编写管道函数
   
   10.开启管道
   
7. 创建movies文件夹
   
8. 启动爬虫
   
9. 结果
   
   

• emmm 除开第一个标签有173条数据，只爬取了172条数据，不知道原因出在哪儿。。。