【CDH】cloudera mamager中配置hive加载第三方JAR

前言

再将 hbase 导入 hive 表时,出现行数远远大于实际的数量,排查后发现是hbase 数据中有很多换行, 所以需要使用第三方的jar 的行分隔符。

这里使用了自定义的jar包。

永久添加

这时想要使用jar 包每次都需要手动添加,然后才能使用。这里我们使用永久添加的方式。

配置

在这里插入图片描述

  1. Hive 辅助 JAR 目录 设置 /opt/cloudera/parcels/CDH/lib/hive/auxlib
  2. hive-env.sh 的 Gateway 客户端环境高级配置代码段(安全阀) 设置 HIVE_AUX_JARS_PATH=/opt/cloudera/parcels/CDH/lib/hive/auxlib
  3. 将自定义的jar 包放到 /opt/cloudera/parcels/CDH/lib/hive/auxlib 中。

注:那台节点需要用,将jar包放入即可,不用每台节点都添加。

posted @ 2022-11-10 19:24  彬在俊  阅读(64)  评论(0编辑  收藏  举报