2018年9月28日

关于sqoop导入数据的时候添加--split-by配置项对sqoop的导入速度的影响。

摘要: 最近在搞sqoop的导入导出操作。但是今天遇到一个表数据量特别大。我们想通过sqoop的导入功能对数据进行导入,但是从oracle当中导入数据的时候,如果是需要平行导入的话必须使用--split-by,也就是设置map的数量。 一种就是不指定--split-by(切分的字段)直接使用一个map的形式 阅读全文

posted @ 2018-09-28 20:28 gxg123 阅读(910) 评论(0) 推荐(0) 编辑

导航