drill 学习 五 配置说明- 多租户

drill 支持多用户共享同一个drillbit以及运行在独立drillbit节点的集群模式
drill可以与以下大数据工具运行在一起:

• mapreduce
• yarn
• hbase
• hive && pig
• spark
  当我们与其他工具一起运行的时候需要关注：内存，cpu，以及磁盘的配置
  当用户共享drillbit的时候，我们同时需要配置队列以及并行

多租户模式的资源配置

主要的配置文件是drill-env.sh,具体的配置可以结合官方文档以及各种工具的实践说明，但是对于cpu
资源的配额管理推荐使用linux 的cgroup

共享drillbit 模式

我们需要关注查询队列，包含的配置选项(通过sys.options)

 

exec.queue.large

exec.queue.small

exec.queue.threshold

并行配置，相关的参数(通过sys.options):

planner.width.max_per_node

跨核心和群集节点的查询的最大分布程度。

planner.width.max_per_query

与每个节点的最大值相同，但适用于整个集群执行的查询

说明

以上是一个简单的说明，详细的可以参考官方文档

参考资料

https://drill.apache.org/docs/configuration-options-introduction/
https://drill.apache.org/docs/performance-tuning-introduction/
https://drill.apache.org/docs/configuring-resources-for-a-shared-drillbit/
https://drill.apache.org/docs/configuring-cgroups-to-control-cpu-usage/