关于kettle连接cdh集群hive的相关报错。
今天在使用kettle连接hive的时候出现了下面的报错
Error connecting to database: (using class org.apache.hive.jdbc.HiveDriver) Illegal Hadoop Version: Unknown (expected A.B.* format)
看到这个首先想到的应该是版本的问题。导致这个问题出现的原因如下:
在使用kettle连接hive的时候,我们会修改
pdi-ce-7.1.0.0-12\data-integration\plugins\pentaho-big-data-plugin 这个目录下面的plugin.properties。其中在这个目录下面有一个参数
active.hadoop.configuration。这个参数是定义你的hadoop的版本的,你是cdh就用cdh,是hdp就用hdp.我集群安装的是cm-5.14.0所以这里就设置为
active.hadoop.configuration=cdh514
除了改这个之外还要去修改pdi-ce-7.1.0.0-12\data-integration\plugins\pentaho-big-data-plugin\hadoop-configurations 这个目录下的cdh目录为cdh514
然后到集群的客户端下载hive的相关的配置文件。
这个文件里面就是hive的配置文件,下载这个文件就是为了替换
将这个里面的文件全部替换掉,这样测试连接
这里显示已经连接到hive数据库。