spark连接hive后的几个问题
问题描述
一旦使用Spark SQL连接过Hive之后,无法使用Hive自带的命令行工具操作Hive了,
而且HiveServer2服务无法开启了,操作Hive报错:java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
原因是因为Spark SQL连接上Hive元数据库之后,会把Hive的元数据库中的元数据版本号修改为Spark SQL操作Hive的版本1.2.0版本。但是我们的hive是2.3.8版本,元数据库中版本号一旦更改,Hive使用自带命令行或者启动hiveserver2版本对应不上,就无法启动和使用了
问题解决
使用navicat连接工具,将版本号修改为虚拟机中下载好的版本,即可
本文来自博客园,作者:jsqup,转载请注明原文链接:https://www.cnblogs.com/jsqup/p/16636706.html
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· Manus的开源复刻OpenManus初探
· AI 智能体引爆开源社区「GitHub 热点速览」
· 三行代码完成国际化适配,妙~啊~
· .NET Core 中如何实现缓存的预热?