摘要: 1.进入到一个要创建Scrapy项目的文件夹,然后运行以下命令来生成默认的Scrapy项目结构。 在Linux CentOS 6.10中,运行 然后生成的目录结构如下: 2.定义Item 打开 ,把 类改为: 3.Spider爬虫 在 文件夹中新建 ,代码如下: 然后在 的目录下,运行 运行完,会在 阅读全文
posted @ 2019-07-22 13:26 gkimeeq 阅读(446) 评论(0) 推荐(0) 编辑
摘要: 默认的情况下,Scrapy项目的默认结构如下: 1.scrapy.cfg Scrapy的项目配置文件。配置参数是以ini文件的风格来定义,即 的格式 。这里的scrapy.cfg是位于项目根目录。Scrapy也会查找系统和用户的scrapy.cfg。 系统级的配置文件位于 或`c:\scrapy\s 阅读全文
posted @ 2019-07-22 08:43 gkimeeq 阅读(368) 评论(0) 推荐(0) 编辑