cube.js cubestore 生产可用了

使用到的技术

parquet,apache arrow,以及datafusion

参考机制

  • 参考使用模式

传统

 

 

 


基于cubestore

 

 

 

  • 存储模式

支持本地存储以及云模式(s3.。。)

 

 

工作机制

  • 一个router 处理请求,管理数据库的元数据构建查询计划以及调度执行
  • 多个worker节并行进行数据预热的处理
  • 一个本地后者面向云的blob 存储保存列士存储的预聚合数据

参考资料

https://cube.dev/docs/caching/using-pre-aggregations#running-in-production
https://cube.dev/blog/introducing-cubestore/
https://en.wikipedia.org/wiki/Apache_Parquet
https://github.com/apache/arrow
https://github.com/apache/arrow/tree/master/rust/datafusion
https://github.com/cube-js/cube.js/tree/master/examples/cubestore-benchmark

posted on 2021-05-01 11:00  荣锋亮  阅读(134)  评论(0编辑  收藏  举报

导航