dremio hive 连接

dremio 对于hive 的连接实际上有两种方法,一种使用的是hive 的meta store ,一种是使用的hive jdbc server
第一中是官方支持的,第二种官方缺少直接的支持,需要自己开发相关的arp 扩展

一些参考实现

cdata 目前提供了一个开源实现,但是jdbc 驱动使用的是自己的,实际上这个我们可以调整为hive 官方的jdbc 驱动或者
aws 提供的(cdata 的jdbc 是收费的)

说明

开发一个dremio 的arp 扩展不难,核心是需要掌握需要开发的数据库的一些基本概念(数据类型,sql 处理)

参考资料

https://github.com/jerodj-cdata/dremio-apachehive-connector/
https://docs.dremio.com/24.1.x/sonar/data-sources/metastores/hive/
https://github.com/apache/hive/tree/master/jdbc
https://docs.aws.amazon.com/zh_cn/emr/latest/ReleaseGuide/HiveJDBCDriver.html
https://www.cdata.com/drivers/hive/jdbc/

posted on   荣锋亮  阅读(65)  评论(0编辑  收藏  举报

相关博文:
阅读排行:
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
历史上的今天:
2022-10-20 dremio kernel 模块之DremioSqlDialect
2022-10-20 wget --no-check-certificate 问题解决
2020-10-20 go-plugin hashicorp开源的golang插件框架
2020-10-20 maven 下载项目依赖jar包的方法
2019-10-20 space-cloud 支持多数据库多rest&& graphql web server
2019-10-20 不要轻易在java ext 目录放任何三方jar包
2018-10-20 knowledge-repo 知识管理简单试用

导航

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示