解决Scrapy shell启动出现UnicodeEncodeError问题

windows 命令行编码是cp936,而D:\Python27\Scripts\scrapy脚本编码是Unicode编码顾在命令行启动会出现编码问题

解决办法:修改D:\Python27\Scripts\ 下的scrapy文件,这个文件即scrapy命令的程序文件,加上如下代码即可:

import sys
default_encoding = 'cp936'
if sys.getdefaultencoding() != default_encoding:
reload(sys)
sys.setdefaultencoding(default_encoding)

在scrapy运行爬虫程序时若出现UincodeencodeError时在程序文件中加入以上代码即可解决编码问题

posted on 2014-07-19 09:24  菜菜鸟向前进  阅读(443)  评论(0编辑  收藏  举报