会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
MoonyPog
博客园
首页
新随笔
联系
订阅
管理
2019年5月23日
hadoop yarn日志分离
摘要: 根据hdfs的auditlog以及fsimage分析,yarn的日志文件占用了10%-20%的rpc请求以及文件量,这对namenode的性能有比较大的影响,特别是当集群规模越来越大,会影响生产业务。故下面的方案对yarn日志进行拆分,将日志写入一个独立的hdfs集群 运行yarn的集群(pascd
阅读全文
posted @ 2019-05-23 14:32 MoonyPog
阅读(772)
评论(0)
推荐(0)
编辑
公告