hive 分隔符替换
Hive建表的时候虽然可以指定字段分隔符,不过用insert overwrite local directory这种方式导出文件时,字段的分割符会被默认置为\001,一般都需要将字段分隔符转换为其它字符,
可以使用下面的命令:sed -e 's/\x01/|/g' file
可以将|替换成自己需要的分隔符,file为hive导出的文件。
sed -i 's/\x01/\t/g' file for f in `ls 98*`; do sed -i 's/\x01/\t/g' $f done
posted on 2018-01-09 16:22 iokde.com 阅读(1526) 评论(0) 编辑 收藏 举报