dremio 支持创建iceberg 的方法
实际上在以前介绍dremio 21.1特性的时候我就简单说明过这个特性,但是没有运行起来,实际上是配置问题
参考玩法
- 配置iceberg
alter system set dremio.iceberg.enabled = true;
alter system set dremio.execution.support_unlimited_splits = true;
alter system set dremio.iceberg.ctas.enabled = true;
- 使用
create table s3.dalongdemo.apptest store as (type=>'iceberg') as select * from "appdemo"
效果
查询
说明
对于iceberg的使用需要使用分布式存储,共享共享以及s3都是不错的选择,如果是单机测试可以直接使用本地文件,但是注意配置,可以参考我以前写的
实际上对于创建iceberg 核心还是对于ctas参数的开启,默认其他几个参数是直接开启的,都有阅读源码,多思考有助于更好的使用dremio