2018 年 9月 4 日随笔档案 - 今天天蓝蓝

2018年9月4日

PAI FrameworkLauncher(5)--节点选择SelectionManager

摘要： PAI 在frameworkLauncher中对节点的分配做了进一步优化，可以为任务选择node的host。hadoop在2.6之后增加了对NodeLabel的支持，在配置NodeManager时可以给它打上标签，然后请求container的时候也可以加上label，这样就会分配到有该lable的n 阅读全文

posted @ 2018-09-04 15:12 今天天蓝蓝阅读(370) 评论(0) 推荐(0) 编辑