dremio resourcescheduler 模块说明
resourcescheduler 是dremio 进行资源分配处理的包含了不少功能,默认dremio 社区版本是包含一个
简单的调度,但是对于复杂的是需要企业版的,如果需要自己扩展就可以基于此模块
几个接口功能
- RuleBasedEngineSelector
自定义基于规则的引擎查找,默认实现为null,猜测按照官方的玩法应该是一个tag - ResourceAllocator
资源分配器定义,默认的是一个实现是BasicResourceAllocator,具体的实现是需要需要ResourceSchedulingContext以及ResourceSchedulingProperties
类定义
使用resourcescheduler的模块
主要包含了MaestroService(大师服务具体执行的)、ResourceTracker(资源追踪),QueryTracker(查询追踪),SabotNode(不带ui 的测试框架)
说明
目前社区版本的资源调度处理还是比较简单的,但是我们可以自己扩展下
参考资料
services/resourcescheduler/src/main/java/com/dremio/resource/basic/BasicResourceAllocator.java