关于爬虫的编码格式问题

UnicodeEncodeError: 'gbk' codec can't encode character '\uc0ac' in position

爬虫编码想从把构造的字典信息写进文件。

有两种方法:

一、用json
import json
js=json.dumps(a)
fp.writelines(js+'\n')
二、直接强制转换
fp.write(str(a)+'\n')

   利用第一种方法输入网页信息,中文会变成编码。

   采用第二种方法,中文信息进行保留,但是,有时候会提出错误'UnicodeEncodeError: 'gbk' codec can't encode character '\uc0ac' in position'.

   此时,在文件的目录下面创造一个utf-8编码的txt。并且fp的编码格式改为utf-8

fp=open("top500.txt","at",encoding='utf-8')

posted @ 2018-08-12 17:05  flyer_duck  阅读(530)  评论(0编辑  收藏  举报