第一次写文章,写的不好的地方还希望大家提提意见,共同进步。ღ( ´・ᴗ・` )比心

本文章是解决当我们在yarn application管理页面上点击history时出现无法访问问题以及查看日志是出现的Aggregation is not enabled问题

第一步:检查mapred-site.xml中是否配置了jobhistory的网页网址

第二步:检查是否在windows的hosts文件中添加了集群节点名与ip映射,如果没有添加的话只能通过集群节点名的ip地址进行访问

第三步:启动jobhistoryserver服务,这个服务启动yarn时不会自动启动

官网文档描述如下:


启动命令如下(需要先进入hadoop所在的文件夹):

sbin/mr-jobhistory-daemon.sh start historyserver

jps检查是否启动


启动后就可以在yarn管理页面看某一个application的history了


此时如果想要查看当前任务的日志的话,可能会出现Aggregation is not enabled. Try the nodemanager at node-4:38596问题,如图所示,这是因为我们没有开始日志聚合。

解决办法如下:

  • 首先先将集群关闭,因为我们要设置配置文件

  • 在yarn-site.xml中配置yarn.log-aggregation-enable属性,启动日志聚合,默认是false

  • 将修改后的yarn-site.xml分发到其他各个节点

官方文档如下:


设置完成后再次查看logs如下图所示

Yarn管理页面中Aplication history无法访问问题以及Aggregation is not enabled问题相关推荐

  1. Yarn管理界面中各个参数和yarn-site.xml中参数的对应关系

    启动集群后,打开master:8088/cluster/nodes 然后打开: master:8088/cluster/scheduler 上图中右侧的73.2%≈4.39 GB/6GB=0.7316 ...

  2. Yarn管理界面中Queue:root和Queue:default的区别

    截图如下: 那么这两个队列什么区别呢? [1] The root queue is the parent of all queues. All other queues are each a chil ...

  3. Yarn Web页面 8088 端口在Windows浏览器无法访问

    问题描述 配置好Hadoop的Namenode节点.secondarynode节点和datanode节点之后,配置hadoop /etc目录下的mapred-site.xml.yarn-site.xm ...

  4. android 360卫士跳转权限页面如何实现,奇酷360 手机中怎么跳转安全中心中指定包名App的权限管理页面...

    我是一名程序员,在 MIUI 中,涉及浮窗的 APP 需要在对应的软件设置页面打开 浮窗权限 才能正常使用 APP , MIUI 的权限设置入口就在应用管理页面,可以通过如下的代码跳转至该入口: pr ...

  5. 奇酷360 手机中怎么跳转安全中心中指定包名App的权限管理页面

    在处理SDK开发过程中遇到如下问题,在 MIUI 中,涉及浮窗的 APP  需要在对应的软件设置页面打开   浮窗权限   才能正常使用 APP , MIUI 的权限设置入口就在应用管理页面,可以通过 ...

  6. Kibana可视化管理页面详细使用说明

    Kibana可视化管理页面详细使用说明 使用浏览器访问 ip:5601 默认端口,进入首页 Discover:日志管理视图  主要进行搜索和查询 Visualize:统计视图      构建可视化的图 ...

  7. 如何访问Linux服务器中RabbitMQ管理页面

    大家好,本篇文章主要讲的是解决访问不到Linux服务器中RabbitMQ管理页面问题,感兴趣的同学赶快来看一看吧,对你有帮助的话记得收藏一下,方便下次浏览 由于自己项目的某项功能需要服务器中发送消息到 ...

  8. docker中安装了RabbitMQ后无法访问其Web管理页面

    2019独角兽企业重金招聘Python工程师标准>>> 在官网找了"$ docker run -d --hostname my-rabbit --name some-rab ...

  9. 路由器无法访问目标网络_初设路由器,无法访问管理页面的解决办法_网络设备技术应用...

    初次设置路由器,无法访问路由器的管理页面,即访问 或 页面时,浏览器提示无法显示该页面.导致此问题的原因通常是以下几种: · 用来配置路由器的电脑的TCP/IP属性设置有误: · 配置路由器的电脑的T ...

最新文章

  1. iOS导航栏标题错乱的解决方法
  2. Kong APIGW — Plugins — Authentication
  3. php和python对比-python与java、php、go的优势对比
  4. Google在Android P中隐藏了真棒的按应用自动旋转功能
  5. html css基础知识
  6. mariadb主从搭建
  7. JavaScript 中常见设计模式整理
  8. Linux设备驱动模型-Driver
  9. Linux下挂载NTFS
  10. 完整阅读 何凯明最新一作:Masked Autoencoders Are Scalable Vision Learners
  11. 计算圆周长,圆面积,圆球表面积,圆球体积,圆柱体积
  12. Excel筛选出符合自己条件的数据
  13. Adobe PDF打不开文件的一个解决办法
  14. 【庄碰辉】万般滋味,皆是生活常态
  15. TWEN-ASR ONE 语音识别系列教程(1)--- 运行第一个程序
  16. ae2020不支持的视频驱动程序_AE 2020版本安装提示系统兼容性报告怎么解决?
  17. windows达梦数据库卸载不完全,重新装达梦数据库现有服务失败/该实例名已被其他实例占用
  18. 2020我们都用这3个3D建模软件,常用简单又易上手!
  19. python 运动控制卡_运动控制卡应用开发教程之Linux
  20. Apache shiro 权限

热门文章

  1. 【每日一题】小A与小B
  2. 服务器linux重启要多久,win2003或linux服务器一般多久重启一次
  3. 网络测速插件speedtest
  4. 以现代化基础架构拥抱新零售时代
  5. 2017上半年无监督特征学习研究成果汇总
  6. 1688商品详情接口,1688详情页接口、商品主图
  7. A parser-blocking, cross site (i.e. different eTLD+1) script, http://api.map.baidu.com/getscript?v=2
  8. k-means算法优缺点
  9. 递归神经网络(RNN)
  10. 自定义menu菜单布局