dremio 部署系统要求
支持的操作系统
RHEL 以及cents 6.7+ 以及7.3+ (支持rpm以及tar)
SLES 12 sp2+ (tar)
ubuntu 14+ (tar)
debian 7 + (tar)
jdk
注意需要jdk 同时需要8
服务以及实例硬件需求
- master 协调节点
8核 16G内存 - 执行节点
最少4核,推荐16核,16G内存,推荐128
注意:如果机器有64G内容,但是默认只有16G内存会被使用,所以需要配置dremio-env 的DREMIO_MAX_DIRECT_MEMORY_SIZE_MB
之后重启服务,同时注意推荐的heap存储为8G,默认的比较小 ,可以通过DREMIO_MAX_HEAP_MEMORY_SIZE_MB 修改(也是dremio-env)
一个推荐实践
- ulimit
推荐65536 - 内存配置
参考上边的说明,同时我们可以通过sys.memory 查看