2021年2月11日

开发自定义的dremio 函数

摘要: dremio 自定义函数的开发与drill 模式是一样的,以下是一个简单demo 预备 dremio 一些核心的功能都是在 dremio-sabot-kernel 中的,可以看看源码还是比较有用的 项目结构 项目主要是创建一个uuid 的函数 项目结构 ├── pom.xml ├── src │ ├ 阅读全文

posted @ 2021-02-11 23:11 荣锋亮 阅读(385) 评论(0) 推荐(1) 编辑

dremio sql 操作

摘要: 主要介绍关于创建相关的操作(比如table,反射,虚拟表) create table 注意并不是所有存储都是支持,一般文件系统相关的会有支持(比如s3,hdfs),同时也包含了一个隐藏的$scratch 目录 参考命令 注意需要开启CTAS 以及DROP 选项(文件系统的) CREATE TABLE 阅读全文

posted @ 2021-02-11 16:15 荣锋亮 阅读(486) 评论(0) 推荐(0) 编辑

dremio 生产部署推荐硬件配置

摘要: 以下内容参考自官方的一个参考文档 最低要求 执行节点&&协调节点 8 CPU, 16G 内存,4HDD 或者1SSD 生产推荐 执行节点 32+CPU,128G 内存,12+HDD, 或者3+SDD 协调节点 32+ CPU,128G内存,4HDD 或者SSD(RAID 10) 双工10G bond 阅读全文

posted @ 2021-02-11 15:00 荣锋亮 阅读(219) 评论(0) 推荐(0) 编辑

dremio 源码编译

摘要: dremio 是基于java 开发的,项目使用了maven进行包管理,以下是一个简单的源码构建 依赖 java8, maven (至少3.3.9) 构建 构建比较慢,需要等待 构建 git clone https://github.com/dremio/dremio-oss.git dremio c 阅读全文

posted @ 2021-02-11 10:06 荣锋亮 阅读(472) 评论(0) 推荐(0) 编辑

导航