hadoop web_ui_report

 

http://192.168.121.132:50070/

http://192.168.121.132:8088/cluster

http://192.168.121.132:19888/jobhistory

http://192.168.121.131:8042

 

配置文件修改

mapred-site.xml

<property>
   <name>mapreduce.jobhistory.address</name>
    <value>h201:10020</value>
    <description>MapReduce JobHistoryServer IPC host:port</description>
  </property>

  <property>
   <name>mapreduce.jobhistory.webapp.address</name>
    <value>h201:19888</value>
    <description>MapReduce JobHistoryServer Web UI host:port</description>
  </property>

 

yarn-site.xml

<property>  
 <name>yarn.resourcemanager.webapp.address</name>  
 <value>192.168.121.132:8088</value>  
</property>

<property>  
 <name>yarn.log-aggregation-enable</name>  
 <value>true</value>  
 <description>Configuration to enable or disable log aggregation</description>  
</property>

<property>
 <name>yarn.nodemanager.remote-app-log-dir</name>  
<value>/logs</value>  
<description>HDFS directory where the application logs are moved on application completion. Need to set appropriate permissions. Only applicable if log-aggregation is
enabled. The default value is "/logs" or "/tmp/logs"
</description>
</property>

<property>
 <name>yarn.log-aggregation.retain-seconds</name>
 <value>86400</value>
</property>

 

所有节点必须同时拥有,scp过去

目前依然存在jobhistory和application中无法查看history和log.显示无法访问从节点。

posted @   蜘蛛侠0  阅读(194)  评论(0编辑  收藏  举报
编辑推荐:
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
· 一个奇形怪状的面试题:Bean中的CHM要不要加volatile?
· [.NET]调用本地 Deepseek 模型
阅读排行:
· .NET 10 首个预览版发布,跨平台开发与性能全面提升
· 全程使用 AI 从 0 到 1 写了个小工具
· 快收藏!一个技巧从此不再搞混缓存穿透和缓存击穿
· AI 插件第二弹,更强更好用
· Blazor Hybrid适配到HarmonyOS系统
点击右上角即可分享
微信分享提示