使用YARN运行一个wordcount时报错:

20/03/25 00:10:45 INFO mapreduce.Job: Task Id : attempt_1585065643305_0001_r_000000_0, Status : FAILED
Error: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in fetcher#4at org.apache.hadoop.mapreduce.task.reduce.Shuffle.run(Shuffle.java:134)at org.apache.hadoop.mapred.ReduceTask.run(ReduceTask.java:376)at org.apache.hadoop.mapred.YarnChild$2.run(YarnChild.java:164)at java.security.AccessController.doPrivileged(Native Method)at javax.security.auth.Subject.doAs(Subject.java:422)

解决办法如下:
修改yarn-site.xml文件,添加内容:

    <property><name>yarn.nodemanager.local-dirs</name><value>/home/iie4bu/app/tmp/hadoop-tmp/nm-local-dir</value></property>

YARN 任务执行报错:Caused by: java.io.IOException: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out相关推荐

  1. 【Jenkins】解决检出git仓库时报错Caused by: java.io.IOException: Cannot run program “git“

    Jenkins中配置从一个win7的slave节点检出git仓库时报如下错误: git init E:\jenkins\workspace\Git-backup # timeout=10 ERROR: ...

  2. 解决Caused by: java.io.IOException: java.io.IOException: error=12, Cannot allocate memory

    最近公司一台线上服务器的hbase的regionserver挂掉之后起不起来报错OOM. 这台机器同时装有cassandra,于是停掉cassandra释放内存,重启regionserver失败,同时 ...

  3. 操作canal,报错:Caused by: java.io.IOException: end of stream when reading header

    报错:Caused by: java.io.IOException: end of stream when reading header 解决: canal连不上,报错:原因端口变更配置文件(cana ...

  4. Caused by: java.io.IOException: Keystore was tampered with, or password was incorrect

    启动yarn-session时上报的错误 java.io.IOException: Failed to initialize SSLContext for the blob server at org ...

  5. Caused by: java.io.IOException: The temporary upload location [......] is not valid

    在服务器tomcat文件夹下的logs文件夹,可以打开catalina.out文件,这个文件是tomcat保存全部日志信息的文件: 但是在上传文件的时候,没有上传成果,经过debug调试之后,可以看到 ...

  6. Caused by: java.io.IOException: On-disk size without header provided is 6, but block header contains

    Caused by: java.io.IOException: On-disk size without header provided is 6 1.前言 2.问题的来源: 3.问题分析 4.补充说 ...

  7. Caused by: java.io.IOException: CreateProcess error=5, 拒绝访问 。 CreateProcess error=2, 系统找不到指定的文件

    解决Intellij IDEA错误:" Caused by: java.io.IOException: CreateProcess error=5, 拒绝访问 " 和 " ...

  8. sqoop将oracle数据导入到hive报错:Error: java.io.IOException: SQLException in nextKeyValue

    提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 问题 一.问题是什么导致的? 二.验证问题 总结 问题 sqoop将oracle数据导入到hive报错:Error: jav ...

  9. Caused by: java.io.IOException: Cannot run program mips64el-linux-android-stri

    Caused by: java.io.IOException: Cannot run program mips64el-linux-android-strip问题 如果并没有用armeabi mips ...

最新文章

  1. Android之ViewPager讲解
  2. 想写游戏吗?手把手教你SDL的安装及配置(亲测有效!)
  3. Howto: 如何将ArcGIS Server缓存移动到新服务器
  4. Typora——恢复未保存文件解决方案
  5. 数字滤波常用方法(转)
  6. 部署Hadoop2.0高性能集群
  7. css3 transition transform属性造成文字抖动
  8. 如何在VC中调用第三方lib库(step by step)
  9. Python Tkinter 之Radiobutton控件(Python GUI 系列8)
  10. OS X系列文章 AirPlay+Apple TV影音方案研究[转]
  11. python 列表操作模块_Python:使用模块laspy的列表理解问题
  12. 碉堡了的kotlin扩展函数
  13. 数据库中的同义词synonym
  14. EPUB电子书阅读-MAC版
  15. winxp映射linux目录,如何让WinXP与Linux二者相互共存(2)
  16. QT的控件加载显示图标或图片
  17. 2021-2027全球与中国工业RFID特种电子标签市场现状及未来发展趋势
  18. 建立您的创业公司:提高安全性
  19. php与mysql 圣经_今天买了本传说中的PHP圣经-PHP和MySQL Web开发
  20. 【科创人】易快报创始人兼CEO马春荃:擅长自黑的改良派,创业就是带着未知跑步前进

热门文章

  1. iBatis.Net(C#)SQL数据映射
  2. 专门用于微信公众平台的Javascript API
  3. 配置ADO.NET类文件连接优化
  4. 北京某公司.NET面试题
  5. 如何配置nginx+uwsgi+django?(知乎上面的看着不错)
  6. MySQL查看SQL语句执行效率和mysql几种性能测试的工具
  7. go语言连接redis(已测试)
  8. 修改mysql文件位置_如何修改mysql数据文件存储位置
  9. js压缩代码后怎么生成source map_??markdown生成导航? #x27;[toc]#x27;足矣
  10. recv返回值为0_基于GNES和Tensorflow 2.0的大规模视频语义搜索