随笔分类 -  dremio

上一页 1 ··· 18 19 20 21 22

dremio
dremio 学习二 部署
摘要:dremio 支持多种部署模式 基于云的基于独立部署,生产环境不建议使用独立模式(推荐基于集群模式),云环境的模式就不说了,主要说明关于独立环境的部署 基本模式 可以基于docker,rpm,以及编译好的软件包 依赖 至少jdk8 参考容器运行 version: "3" services: drem 阅读全文

posted @ 2021-02-08 08:36 荣锋亮 阅读(269) 评论(0) 推荐(0) 编辑

dremio 学习一 简单了解
摘要:dremio 是一个数据湖引擎,包含以下特性 快速的查询 基于了apache arrow 进行数据查询 自服务的语义层 可以依托dremio 提供的数据虚拟服务层以及space 解决 基于灵活以及开源的技术 没有厂商技术的限制 强大join 支持 支持我们查询各种数据,同时进行join ,包含了商业 阅读全文

posted @ 2021-02-08 08:26 荣锋亮 阅读(1260) 评论(0) 推荐(0) 编辑

dremio 集群简单部署
摘要:一个简单的测试,不算是ha (ha 后边会介绍使用) 环境准备 docker-compose 文件 version: "3" services: zookeeper: image: zookeeper ports: - "2181:2181" - "8080:8080" dremio1: image 阅读全文

posted @ 2021-02-07 23:25 荣锋亮 阅读(580) 评论(0) 推荐(0) 编辑

dremio mongodb objectid 转换问题
摘要:dremio 默认将mongodb 的objectid 转换为varbinary,如果需要字符串格式的id,需要使用函数处理 参考函数 lower(to_hex("_id")) 参考效果 参考资料 https://docs.dremio.com/sql-reference/sql-functions 阅读全文

posted @ 2021-02-06 23:01 荣锋亮 阅读(287) 评论(0) 推荐(0) 编辑

cube.js 集成dremio
摘要:cube.js 集成dremio 是一个很不错的选择,可以使用dremio 强大的数据处理能力+cube.js 灵活的数据分析可以加速我们数据分析应用的开发 一个参考集成方案 简单说明,cube.js 进行数据分析,dremio 进行数据湖的处理(连接+加速数据处理) 简单集成 可以基于dreami 阅读全文

posted @ 2021-02-06 20:50 荣锋亮 阅读(372) 评论(0) 推荐(0) 编辑

dremio 数据湖平台
摘要:说明dremio 很多人是从drill 出来的,但是如果体验了dremio 会发现dremio 的很多设计是drill 没有的(权限管理 ,数据虚拟机化,数据湖支持。。。)但是apache drill 也是一个很不错的选择方案 支持的数据擦集成 说明 同时比较好的是cube.js 也是支持基于dre 阅读全文

posted @ 2021-02-06 00:24 荣锋亮 阅读(357) 评论(0) 推荐(0) 编辑

dremio 中文查询问题解决
摘要:核心并不是dremio的问题,而是依赖的calcite的问题 参考配置 基于docker-compose 的运行 version: "3" services: dremio: image: dremio/dremio-oss:13.0 environment: - DREMIO_JAVA_SERVE 阅读全文

posted @ 2021-02-05 23:13 荣锋亮 阅读(366) 评论(0) 推荐(0) 编辑

上一页 1 ··· 18 19 20 21 22

导航