cube.js cubestore 生产可用了

使用到的技术

parquet,apache arrow,以及datafusion

参考机制

  • 参考使用模式

传统

 

 

 


基于cubestore

 

 

 

  • 存储模式

支持本地存储以及云模式(s3.。。)

 

 

工作机制

  • 一个router 处理请求,管理数据库的元数据构建查询计划以及调度执行
  • 多个worker节并行进行数据预热的处理
  • 一个本地后者面向云的blob 存储保存列士存储的预聚合数据

参考资料

https://cube.dev/docs/caching/using-pre-aggregations#running-in-production
https://cube.dev/blog/introducing-cubestore/
https://en.wikipedia.org/wiki/Apache_Parquet
https://github.com/apache/arrow
https://github.com/apache/arrow/tree/master/rust/datafusion
https://github.com/cube-js/cube.js/tree/master/examples/cubestore-benchmark

posted on   荣锋亮  阅读(136)  评论(0编辑  收藏  举报

编辑推荐:
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
阅读排行:
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
历史上的今天:
2020-05-01 lightproxy 阿里巴巴开源的基于proxy 的web debug 工具
2020-05-01 chartjs-plugin-datasource-prometheus 展示prometheus 数据
2020-05-01 Autopilot Pattern Applications 开发模式
2020-05-01 containerpilot 容器应用的自动服务发现
2019-05-01 cube.js 学习(二)cube.js与 graphql2chartjs的比较
2019-05-01 cube.js 学习(一)简单项目创建
2019-05-01 cube.js 开源模块化分析框架

导航

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示