2023年3月7日

snowflake 元数据存储一些参考资料

摘要： 今天在写完关于使用一个开源kv 系统替换dremio 的kv 服务的之后，搜了下发现snowflake 的元数据系统就是基于foundationdb的，同时官方也有不少介绍可以参考学习 参考资料 https://medium.com/snowflake/part-2-migrating-snowfl 阅读全文

posted @ 2023-03-07 22:58 荣锋亮 阅读(84) 评论(0) 推荐(0) 编辑

dremio 替换kv 服务的一些思路

摘要： 我以前简单介绍过dremio 内部协调服务（基于了zk）以及数据存储的说明（实际上是基于了kv存储rocksdb）同时dremio 入口会创建DACDaemonModule （此类可以通过配置修改），如果需要修改修改就可以从此处下手，以下只是一个简单的说明，后续等有时间了实现下 当前方案 可以看出对 阅读全文

posted @ 2023-03-07 19:08 荣锋亮 阅读(51) 评论(0) 推荐(0) 编辑

导航