初次使用scrapy

scrapy 安装 略

scrapy 的文件

     首先自己建立一个文件夹 在此文件下面 shift+右键 打开powershell

      输入 scrapy startproject 名字

     之后可以看到在这个文件夹里面多出来一个文件，在IDE里打开它

     文件有items  用来定义要爬取的东西 比如title

              pipelines  将爬取的东西写到数据库/或者其他

               setting 爬取的基本设置

               之后自己建立一个py文件 来编写爬虫的主要逻辑