您的位置:首页 > 移动开发

如何解决Yarn管理页面的ApplicationHistory / History无法跳转到指定页面的问题

2020-01-13 17:58 459 查看

如何解决Yarn管理页面的ApplicationHistory / History无法跳转到指定页面的问题

分析原因:需要配置hostory!

解决方案
在mapred-site.xml中加入如下配置:

<!-- 指定MR运行在YARN上 -->
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>

<property>
<name>mapreduce.jobhistory.address</name>

<value>hadoop101:10020</value>
</property>

<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>hadoop101:19888</value>
</property>
<property>
<name>mapreduce.jobhistory.done-dir</name>
<value>/history/done</value>
</property>
<property>
<name>mapreudce.jobhistory.intermediate.done-dir</name>
<value>/history/done/done_intermediate</value>
</property>

之后,在在yarn-site.xml文件中添加如下内容:

<!-- Site specific YARN configuration properties -->
<!-- Reducer获取数据的方式 -->
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>

<!-- 指定YARN的ResourceManager的地址 -->
<property>
<name>yarn.resourcemanager.hostname</name>
<value>192.168.219.101</value>
</property>

<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>


当我们配置完成后,需要启动日志(历史)服务器,启动地址在如下目录

接下来,需要启动它,启动命令如下:

[root@hadoop101 hadoop]# mr-jobhistory-daemon.sh start historyserver

starting historyserver, logging to /usr/local/hadoop/module/hadoop-2.7.2/logs/mapred-root-historyserver-hadoop101.out

查看进程

[root@hadoop101 hadoop]# jps
20464 NameNode
21184 NodeManager
22144 ApplicationHistoryServer
22291 JobHistoryServer
22324 Jps
20741 SecondaryNameNode
20901 ResourceManager
20559 DataNode
  • 点赞
  • 收藏
  • 分享
  • 文章举报
江湖侠客 发布了115 篇原创文章 · 获赞 4 · 访问量 1647 私信 关注
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: 
相关文章推荐