dremio 支持创建iceberg 的方法

实际上在以前介绍dremio 21.1特性的时候我就简单说明过这个特性,但是没有运行起来,实际上是配置问题

参考玩法

  • 配置iceberg
alter system set dremio.iceberg.enabled = true;
alter system set dremio.execution.support_unlimited_splits = true;
alter system set dremio.iceberg.ctas.enabled = true;
  • 使用
create table s3.dalongdemo.apptest store as (type=>'iceberg') as select * from "appdemo"

效果

 

 


查询

 

 

说明

对于iceberg的使用需要使用分布式存储,共享共享以及s3都是不错的选择,如果是单机测试可以直接使用本地文件,但是注意配置,可以参考我以前写的
实际上对于创建iceberg 核心还是对于ctas参数的开启,默认其他几个参数是直接开启的,都有阅读源码,多思考有助于更好的使用dremio

参考资料

https://docs.dremio.com/software/release-notes/210-release/

posted on 2022-06-11 10:02  荣锋亮  阅读(84)  评论(0编辑  收藏  举报

导航