十月十日
hive数据导入mysql时出现中文乱码
今天将hive中清洗完的数据导出到mysql时遇到问题:

可以发现所有的中文全部变成了乱码。
根据网上查找到的教程,步骤如下:
1.在mysql中执行语句:
show variables like 'character%';
看到如下结果:

2、执行以下命令:
set character_set_database=utf8;
set character_set_server=utf8;
看到如下结果:

此时,将我导入的表刷新,发现并没有修改成功。然后我将表清空,重新在hive中导入
3、在sqoop中执行以下语句:
bin/sqoop export \
--connect "jdbc:mysql://node01:3306/hive2?useUnicode=true&characterEncoding=utf-8" \
--username root \
--password *** \
--table aa_19 \
--num-mappers 1 \
--export-dir /user/hive/warehouse/aa_19 \
--input-fields-terminated-by ","
注意:在connect中加上了字符编码
4、导出成功

【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
· 【硬核科普】Trae如何「偷看」你的代码?零基础破解AI编程运行原理
· 单元测试从入门到精通
· 上周热点回顾(3.3-3.9)
· winform 绘制太阳,地球,月球 运作规律