dremio resourcescheduler 模块说明

resourcescheduler 是dremio 进行资源分配处理的包含了不少功能,默认dremio 社区版本是包含一个
简单的调度,但是对于复杂的是需要企业版的,如果需要自己扩展就可以基于此模块

几个接口功能

  • RuleBasedEngineSelector 
    自定义基于规则的引擎查找,默认实现为null,猜测按照官方的玩法应该是一个tag
  • ResourceAllocator 
    资源分配器定义,默认的是一个实现是BasicResourceAllocator,具体的实现是需要需要ResourceSchedulingContext以及ResourceSchedulingProperties 
    类定义

 

 

使用resourcescheduler的模块

主要包含了MaestroService(大师服务具体执行的)、ResourceTracker(资源追踪),QueryTracker(查询追踪),SabotNode(不带ui 的测试框架)

说明

目前社区版本的资源调度处理还是比较简单的,但是我们可以自己扩展下

参考资料

services/resourcescheduler/src/main/java/com/dremio/resource/basic/BasicResourceAllocator.java

posted on   荣锋亮  阅读(61)  评论(0编辑  收藏  举报

相关博文:
阅读排行:
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
历史上的今天:
2021-03-09 streamset data collector 新注册机制
2020-03-09 pgspider wal2json doker 镜像
2020-03-09 pgspider Citus节点数据移动操作
2020-03-09 pgspider Citus worker 账户密码问题
2018-03-09 grpc nodejs tools 安装问题
2017-03-09 docker windows 2016 安装测试
2016-03-09 angular模板加载 ----ng-template

导航

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示