scrapy日志的操作

日志信息和日志等级

　　1）日志级别：

　　　　CRITICAL：严重错误

　　　　ERROR： 一般错误

　　　　WARNING： 警告

　　　　INFO: 一般信息

　　　　DEBUG： 调试信息

　　　　默认的日志等级是DEBUG

　　　　只要出现了DEBUG或者DEBUG以上等级的日志

　　　　那么这些日志将会打印

　　2）settings.py文件设置：

　　　　默认的级别为DEBUG，会显示上面所有的信息

　　　　在配置文件中 settings.py

　　　　LOG_FILE : 将屏幕显示的信息全部记录到文件中，屏幕不再显示，注意文件后缀一定是.log

　　　　LOG_LEVEL : 设置日志显示的等级，就是显示哪些，不显示哪些

1、创建项目

 2、创建爬虫文件

 

取消settings中的robots校验

运行爬虫文件

 

 

在setting设置日志的级别

 

运行爬虫文件

在setting设置设置日志文件（常用）

 

运行爬虫文件