文本编码与解码问题解决方案

文本的编码与解码问题,其中很常见的一种解码错误如下所示:

        问题一   UnicodeDecodeError: 'gbk' codec can't decode byte 0x93 in position 130: illegal multibyte sequence

 

  • (首先在打开文本的时候,设置其编码格式,

            例:open(‘1.txt’,encoding=’gbk’);

  • 如果文本中出现的一些特殊符号超出了gbk的编码范围,那么使用上述方法依旧不能正确解码,我们使用编码范围更广的‘gb18030’进行解码

            例:open(‘1.txt’,encoding=’gb18030’); 

  • (3)、若之前两种方法仍不能解决解码问题,说明文中出现了连‘gb18030’也无法编码的字符,可以使用‘ignore’属性将无法解码的特殊符号进行忽略处理,

           例:open(‘1.txt’,encoding=’gb18030’,errors=‘ignore’); 

 

       问题二    'gbk' codec can't decode byte 0x93 in position 5456: illegal multibyte sequence

  • 解决方式1     FILE_OBJECT= open('order.log','r', encoding='UTF-8')
  • 解决方式2       FILE_OBJECT= open('order.log','rb')


---------------------
参考:https://blog.csdn.net/shijing_0214/article/details/51971734

参考: https://www.cnblogs.com/mengyu/p/6638975.html

posted @ 2018-10-18 14:28  小鹏_Leo  阅读(1219)  评论(0编辑  收藏  举报