dremio yarn 资源调度
dremio 是支持基于yarn 进行资源调度管理的，还是比较强大的
参考架构
部署简单说明
协调节点部署在边缘，对于执行节点通过节点进行配置yarn 资源的处理，dremio 会依赖hadoop 的数据卷进行cahce 以及split 处理
同时dremio 实现了watchdog 进行资源的清理（http health 检查进行处理）
说明
详细的部署可以参考官方文档，但是从目前来说尽管官方提供了此功能，但是关于动态资源调度的官方很不好，属于企业版的功能
如果我们需要控制只能基于队列控制（但是功能太弱了），yarn 调度功能的开发基于了apache.twill （已经退役了），运行时配置
参数参考官方文档的配置分布
参考资料
https://docs.dremio.com/deployment/yarn-hadoop/
https://docs.dremio.com/deployment/ahttps://docs.dremio.com/deployment/aws/aws-edition-managing-engines/ws/aws-edition-managing-engines/
https://docs.dremio.com/advanced-administration/workload-management/#direct-routing
https://docs.dremio.com/advanced-administration/dremio-conf/
【推荐】国内首个AI IDE，深度理解中文开发场景，立即下载体验Trae
【推荐】编程新体验，更懂你的AI，立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包，你的智能百科全书，全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell：AI 加持，快人一步
· 全程不用写代码，我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了，比商业数据库还牛
· .NET10 - 预览版1新功能体验（一）
2020-02-25 cube.js 集成s3 的一种方法
2020-02-25 postgres s3 fdw 试用
2020-02-25 cube.js 集成 elasticsearch 的一种变通方法
2020-02-25 使用postgres_fdw 串接elasticsearch fdw
2019-02-25 architecture and business process modelling
2019-02-25 10 BPMN PDF books, articles and brochures
2019-02-25 chaostoolkit 混沌工程工具集