lakefs 周边生态集成

lakefs 集成的周边还是很多的，核心还是利用了s3 的特性，核心主要玩法以下

  • 直接利用s3特性 
    比如delta lake，spark,airbyte,kafka,dremio
  • 基于hdfs 
    使用s3a扩展进行hdfs集成
  • hive 元数据集成 
    实际上还是s3 的特性，只是基于git 的特性扩展了hive 的使用，lakefs 还专门提供了相关的metadata 命令

lakefs 集成模式

 

 

参考资料

https://docs.lakefs.io/integrations/glue_hive_metastore.html
https://docs.lakefs.io/integrations/

posted on   荣锋亮  阅读(182)  评论(0)  编辑  收藏  举报

相关博文：
· lakefs 组件
· lakefs 集成presto/trinodb
· RDS 、HDFS、 mapreduce 、spark 、hive、 hbase 、zookeeper 、kafka 、flume、mysql 安装时之间配置文件是如何依赖的？
· hive快速入门
· 基于Hadoop3.1.3安装Hive3.1.2
阅读排行：
· 全程不用写代码，我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了，比商业数据库还牛
· .NET10 - 预览版1新功能体验（一）
历史上的今天：
2021-02-12 几个开源的clickstream 分析工具
2021-02-12 partiql 学习一 试用
2021-02-12 partiql 亚马逊开源的基于sql 的查询语言
2021-02-12 cube.js 最新版本的一些特性
2021-02-12 astronomer 企业级的airflow 框架
2021-02-12 neodash 构建neo4j dashboard 的工具
2020-02-12 pgspider griddb fdw +plv8 集成使用

导航

< 2025年3月 >
日 一 二 三 四 五 六
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示