YARN 任务执行报错:Caused by: java.io.IOException: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out
使用YARN运行一个wordcount时报错:
20/03/25 00:10:45 INFO mapreduce.Job: Task Id : attempt_1585065643305_0001_r_000000_0, Status : FAILED
Error: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in fetcher#4at org.apache.hadoop.mapreduce.task.reduce.Shuffle.run(Shuffle.java:134)at org.apache.hadoop.mapred.ReduceTask.run(ReduceTask.java:376)at org.apache.hadoop.mapred.YarnChild$2.run(YarnChild.java:164)at java.security.AccessController.doPrivileged(Native Method)at javax.security.auth.Subject.doAs(Subject.java:422)
解决办法如下:
修改yarn-site.xml
文件,添加内容:
<property><name>yarn.nodemanager.local-dirs</name><value>/home/iie4bu/app/tmp/hadoop-tmp/nm-local-dir</value></property>
YARN 任务执行报错:Caused by: java.io.IOException: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out相关推荐
- 【Jenkins】解决检出git仓库时报错Caused by: java.io.IOException: Cannot run program “git“
Jenkins中配置从一个win7的slave节点检出git仓库时报如下错误: git init E:\jenkins\workspace\Git-backup # timeout=10 ERROR: ...
- 解决Caused by: java.io.IOException: java.io.IOException: error=12, Cannot allocate memory
最近公司一台线上服务器的hbase的regionserver挂掉之后起不起来报错OOM. 这台机器同时装有cassandra,于是停掉cassandra释放内存,重启regionserver失败,同时 ...
- 操作canal,报错:Caused by: java.io.IOException: end of stream when reading header
报错:Caused by: java.io.IOException: end of stream when reading header 解决: canal连不上,报错:原因端口变更配置文件(cana ...
- Caused by: java.io.IOException: Keystore was tampered with, or password was incorrect
启动yarn-session时上报的错误 java.io.IOException: Failed to initialize SSLContext for the blob server at org ...
- Caused by: java.io.IOException: The temporary upload location [......] is not valid
在服务器tomcat文件夹下的logs文件夹,可以打开catalina.out文件,这个文件是tomcat保存全部日志信息的文件: 但是在上传文件的时候,没有上传成果,经过debug调试之后,可以看到 ...
- Caused by: java.io.IOException: On-disk size without header provided is 6, but block header contains
Caused by: java.io.IOException: On-disk size without header provided is 6 1.前言 2.问题的来源: 3.问题分析 4.补充说 ...
- Caused by: java.io.IOException: CreateProcess error=5, 拒绝访问 。 CreateProcess error=2, 系统找不到指定的文件
解决Intellij IDEA错误:" Caused by: java.io.IOException: CreateProcess error=5, 拒绝访问 " 和 " ...
- sqoop将oracle数据导入到hive报错:Error: java.io.IOException: SQLException in nextKeyValue
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 问题 一.问题是什么导致的? 二.验证问题 总结 问题 sqoop将oracle数据导入到hive报错:Error: jav ...
- Caused by: java.io.IOException: Cannot run program mips64el-linux-android-stri
Caused by: java.io.IOException: Cannot run program mips64el-linux-android-strip问题 如果并没有用armeabi mips ...
最新文章
- Android之ViewPager讲解
- 想写游戏吗?手把手教你SDL的安装及配置(亲测有效!)
- Howto: 如何将ArcGIS Server缓存移动到新服务器
- Typora——恢复未保存文件解决方案
- 数字滤波常用方法(转)
- 部署Hadoop2.0高性能集群
- css3 transition transform属性造成文字抖动
- 如何在VC中调用第三方lib库(step by step)
- Python Tkinter 之Radiobutton控件(Python GUI 系列8)
- OS X系列文章 AirPlay+Apple TV影音方案研究[转]
- python 列表操作模块_Python:使用模块laspy的列表理解问题
- 碉堡了的kotlin扩展函数
- 数据库中的同义词synonym
- EPUB电子书阅读-MAC版
- winxp映射linux目录,如何让WinXP与Linux二者相互共存(2)
- QT的控件加载显示图标或图片
- 2021-2027全球与中国工业RFID特种电子标签市场现状及未来发展趋势
- 建立您的创业公司:提高安全性
- php与mysql 圣经_今天买了本传说中的PHP圣经-PHP和MySQL Web开发
- 【科创人】易快报创始人兼CEO马春荃:擅长自黑的改良派,创业就是带着未知跑步前进
热门文章
- iBatis.Net(C#)SQL数据映射
- 专门用于微信公众平台的Javascript API
- 配置ADO.NET类文件连接优化
- 北京某公司.NET面试题
- 如何配置nginx+uwsgi+django?(知乎上面的看着不错)
- MySQL查看SQL语句执行效率和mysql几种性能测试的工具
- go语言连接redis(已测试)
- 修改mysql文件位置_如何修改mysql数据文件存储位置
- js压缩代码后怎么生成source map_??markdown生成导航? #x27;[toc]#x27;足矣
- recv返回值为0_基于GNES和Tensorflow 2.0的大规模视频语义搜索