sqoop处理换行符--包含clob字段情况

一、sqoop同步oracle数据非clob字段:

要处理换行符,在sqoop脚本中,参数使用下面任意一个即可

#替换为空 
--hive-delims-replacement "" 
#删除
--hive-drop-import-delims   

二、sqoop同步oracle数据clob字段
clob字段一般包含大量文本,必然包含换行符,使用上面参数没有作用,需要使用下面参数:

#指定clob列为String类型
--map-column-java CLOB列=String 

例子如下:
oracle这张表可以看到YIWU字段为clob字段,打开明显有换行符
Oracle
没有使用该参数,可以看到Hive这边从换行符位置开始全错位了。
Hive
使用该参数
在这里插入图片描述
可以看到结果已经正常
在这里插入图片描述


学习交流,有任何问题还请随时评论指出交流。

posted @ 2021-01-26 18:18  Rango_lhl  阅读(911)  评论(0编辑  收藏  举报