dremio 创建反射的命令

dremio 官方提供了不只是基于ui 的反射操作,同时也提供了基于类似sql 的命令方便进行反射操作

创建反射

  • 原始
ALTER DATASET <DATASET_PATH> 
CREATE RAW REFLECTION <REFLECTION_NAME> 
USING
DISPLAY (
field1,
field2,
field3
)
[PARTITION BY (field1)]
[LOCALSORT BY (field2)]
[DISTRIBUTE BY (field2)]
  • 聚合
ALTER TABLE <Source_PDS_OR_VDS_NAME> 
 CREATE AGGREGATE REFLECTION <reflection_name> 
 USING 
 DIMENSIONS (x by day, y) 
 MEASURES (b (COUNT, MIN, MAX, SUM, APPROXIMATE COUNT DISTINCT)) 
 --PARTITION BY (col1,col2...) 
 --LOCALSORT BY (col1,col2...)
 --ARROW CACHE
 --DISTRIBUTE BY (col1,col2...)
  • 外部
ALTER DATASET <SOURCE_DATASET_PATH> 
CREATE EXTERNAL REFLECTION <REFLECTION_NAME> 
USING <TARGET_DATASET_PATH>

删除反射

ALTER DATASET <DATASET_PATH> DROP REFLECTION <REFLECTION_NAME>

说明

dremio 提供的sys 内存数据表已经提供了好多内部信息,通过reflections我们可以方便的查看反射的状态(记录数,大小,分片信息)
同时系统提供的物化视图信息可以查看数据分布情况

参考资料

http://docs.dremio.com/sql-reference/sql-commands/acceleration/

posted on   荣锋亮  阅读(123)  评论(0编辑  收藏  举报

编辑推荐:
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
阅读排行:
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
历史上的今天:
2020-08-03 systemd 使用rc.local 说明
2018-08-03 nginx brotli 压缩试用

导航

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示