Sqoop --m(--num-mappers）参数使用及优化 及Bug
摘要：
估计是split的字段不是数值类型，可能是string类型，造成如下bug 在使用SQOOP从mysql导入hive表数据时，当想要字段排序order by，此时每个map都会在oder by或者DISTRIBUTE BY命令下执行，这样就会导致每个mapreduce都会执行一遍sqoop导入，进而 阅读全文
posted @ 2022-04-12 18:55 RICH-ATONE 阅读(331) 评论(0) 推荐(0) 编辑
