2021年3月10日
Yarn 日志聚合优化—摆脱 HDFS 依赖
摘要： 背景 （1）问题背景 线上集群 Container 日志上报的事务集群 namenode rpc 持续飙高，影响到了 Yarn 分配 Container 的性能，任务提交数下降，导致整个集群的吞吐量下降。 （2）原因简介 作业提交到 Yarn 集群时，每个 NM 节点都会对每个 app 作业进行日志 阅读全文
posted @ 2021-03-10 17:56 笨小康u 阅读(1458) 评论(0) 推荐(1) 编辑