dremio cloud 参考架构
实际上以前官方包含了一些简单的介绍,但是后边似乎把相关的图删除了,但是官方还是提供了一个白皮书,里边包含了比较完整的介绍
参考架构
- 概览
总的包含了控制面板(dremio vpc 的能力)以及执行面板 (用户vpc),控制面板会包含权限,sql ,ui,rest api ,引擎管理,计划,job profile
以及元数据(目前只包含了schema 信息)
对于用户面板,会包含自己的引擎,项目存储(数据以及元数据)同时还会包含反射加速,用户上传的数据。。。。(实际上就是分布式存储的一些相关配置,目前使用的是s3 对象存储)
- 多引擎处理
dremio cloud 包含了自己添加执行引擎,同时可以配置自己的基于规则的查询路由(实际上社区版也是包含此能力的,只是默认实现为空处理)
- dremio cloud 的执行流程
从下图基本可以看出dremio cloud 的执行流程,还是比较有用的
- 权限管理
此图实际上官方文档有比较完整的介绍,具体可以参考
说明
当然dremio 还是支持一些外部登录集成的,可以看看官方文档或者,参考官方的白皮书
参考资料
https://hello.dremio.com/wp-cloud-architecture-overview-ty.html
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
2022-01-09 使用juicefs 做为dremio 的分布式存储
2021-01-09 graphjin 试用
2020-01-09 nodejs fork 子进程创建任务以及简单的prometheus 监控
2019-01-09 Singer 学习十三 发现模式
2019-01-09 Singer 学习十二 指南
2019-01-09 Singer 学习十一 配置以及状态管理
2019-01-09 Singer 学习十 同步模式