Hadoop中文编码乱码相关问题

mapreduce程序处理GBK编码数据并输出GBK编码数据, hadoop涉及输出文本的默认输出编码统一用没有BOM的UTF-8的形式,但是对于中文的输出window系统默认的是GBK,有些格式文件例如CSV格式的文件用excel打开输出编码为没有BOM的UTF-8文件时,输出的结果为乱码,只能由UE或者记事本打开才能正常显示。因此将hadoop默认输出编码更改为GBK成为非常常见的需求,具体请参考以下这篇帖子http://www.aboutyun.com/thread-7358-1-1.html

posted @ 2017-05-16 21:56  诸葛小四  阅读(794)  评论(0编辑  收藏  举报