hadoop web_ui_report
http://192.168.121.132:50070/
http://192.168.121.132:8088/cluster
http://192.168.121.132:19888/jobhistory
http://192.168.121.131:8042
配置文件修改
mapred-site.xml
<property>
<name>mapreduce.jobhistory.address</name>
<value>h201:10020</value>
<description>MapReduce JobHistoryServer IPC host:port</description>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>h201:19888</value>
<description>MapReduce JobHistoryServer Web UI host:port</description>
</property>
yarn-site.xml
<property>
<name>yarn.resourcemanager.webapp.address</name>
<value>192.168.121.132:8088</value>
</property>
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
<description>Configuration to enable or disable log aggregation</description>
</property>
<property>
<name>yarn.nodemanager.remote-app-log-dir</name>
<value>/logs</value>
<description>HDFS directory where the application logs are moved on application completion. Need to set appropriate permissions. Only applicable if log-aggregation is
enabled. The default value is "/logs" or "/tmp/logs"
</description>
</property>
<property>
<name>yarn.log-aggregation.retain-seconds</name>
<value>86400</value>
</property>
所有节点必须同时拥有,scp过去
目前依然存在jobhistory和application中无法查看history和log.显示无法访问从节点。
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 理解Rust引用及其生命周期标识(上)
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
· 一个奇形怪状的面试题:Bean中的CHM要不要加volatile?
· [.NET]调用本地 Deepseek 模型
· .NET 10 首个预览版发布,跨平台开发与性能全面提升
· 全程使用 AI 从 0 到 1 写了个小工具
· 快收藏!一个技巧从此不再搞混缓存穿透和缓存击穿
· AI 插件第二弹,更强更好用
· Blazor Hybrid适配到HarmonyOS系统