今日总结

hive数据导入mysql时出现中文乱码

 

hive数据导入mysql时出现中文乱码

今天将hive中清洗完的数据导出到mysql时遇到问题：

 

可以发现所有的中文全部变成了乱码。

根据网上查找到的教程，步骤如下：

1.在mysql中执行语句：

1	show variables like 'character%';

　看到如下结果：

 

 2、执行以下命令：

1 2 3

set character_set_database=utf8;   set character_set_server=utf8;

　　看到如下结果：

 

 

此时，将我导入的表刷新，发现并没有修改成功。然后我将表清空，重新在hive中导入

3、在sqoop中执行以下语句：

1 2 3 4 5 6 7 8

bin/sqoop export \ --connect "jdbc:mysql://node01:3306/hive2?useUnicode=true&characterEncoding=utf-8" \ --username root \ --password *** \ --table aa_19 \ --num-mappers 1 \ --export-dir /user/hive/warehouse/aa_19 \ --input-fields-terminated-by ","

　注意：在connect中加上了字符编码

4、导出成功