java作业不能运行_从Windows运行时,YARN作业失败
我正在尝试在Windows上运行Spring Boot YARN sample .
在我的VM上运行单节点Hadoop 2.7.1 .
当我尝试使用 java -jar ... 从Windows运行应用程序时,Spring Yarn成功部署了所有jar - 我可以在Hadoop FS中浏览和观察它们 . 在集群中运行程序(主机:8088 /集群)时,我可以看到该应用程序已提交,然后运行容器,之后该应用程序失败,日志中出现下一个异常:
Application application_1496328851344_0001 failed 2 times due to AM Container for appattempt_1496328851344_0001_000002 exited with exitCode: 1
For more detailed output, check application tracking page:http://host:8088/cluster/app/application_1496328851344_0001 Then, click on links to logs of each attempt.
Diagnostics: Exception from container-launch.
Container id: container_1496328851344_0001_02_000001
Exit code: 1
Exception message: /bin/bash: line 0: fg: (null): no job control
Stack trace: ExitCodeException exitCode=1: /bin/bash: line 0: fg: (null): no job control
at org.apache.hadoop.util.Shell.runCommand(Shell.java:545)
at org.apache.hadoop.util.Shell.run(Shell.java:456)
at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:722)
at org.apache.hadoop.yarn.server.nodemanager.DefaultContainerExecutor.launchContainer(DefaultContainerExecutor.java:211)
at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:302)
at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:82)
at java.util.concurrent.FutureTask.run(FutureTask.java:266)
at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142)
at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617)
at java.lang.Thread.run(Thread.java:748)
Container exited with a non-zero exit code 1
Failing this attempt. Failing the application.
但是,当我在VM上启动应用程序时 - 一切正常 .
这是我的Hadoop配置文件:
core-site.xml:
fs.defaultFS
hdfs://192.168.0.106:9000
hdfs-site.xml:
dfs.replication
1
dfs.namenode.name.dir
/usr/local/hadoop-2.7.1/data/namenode
dfs.datanode.data.dir
/usr/local/hadoop-2.7.1/data/datanode
dfs.client.use.datanode.hostname
true
dfs.permissions.enabled
false
mapred-site.xml:
mapreduce.framework.name
yarn
yarn-site.xml:
yarn.nodemanager.aux-services
mapreduce_shuffle
yarn.nodemanager.aux-services.mapreduce.shuffle.class
org.apache.hadoop.mapred.ShuffleHandler
yarn.nodemanager.vmem-pmem-ratio
5
UPD 将 mapreduce.app-submission.cross-platform 属性设置为 true 没有帮助 .
java作业不能运行_从Windows运行时,YARN作业失败相关推荐
- HTML5期末大作业:蛋糕甜品店网站设计——蛋糕甜品店(4页) web期末作业设计网页_甜品美食大学生网页设计作业成品
HTML5期末大作业:蛋糕甜品店网站设计--蛋糕甜品店(4页) web期末作业设计网页_甜品美食大学生网页设计作业成品 常见网页设计作业题材有 个人. 美食. 公司. 学校. 旅游. 电商. 宠物. ...
- HTML5期末大作业:美食介绍网站设计——河南美食介绍(4页) web期末作业设计网页_甜品美食大学生网页设计作业成品
HTML5期末大作业:美食介绍网站设计--河南美食介绍(4页) web期末作业设计网页_甜品美食大学生网页设计作业成品 常见网页设计作业题材有 个人. 美食. 公司. 学校. 旅游. 电商. 宠物. ...
- Windows Java JavaFX IntelliJ IDEA 开发环境搭建 创建工程 编译运行 打包分发 自定义运行时
博文目录 文章目录 本文说明 JavaFX 简单说明 JavaFX 版本说明 JavaFX 与 JDK 的关系 JavaFX 与 JDK Modular (JDK 9 模块化系统) JavaFX 模块 ...
- java applet怎么运行_配置Java Applet的运行环境
Java小程序,也就是Java Applet,可以在Web浏览器中运行.Java Applet必须以脚本的形式嵌入到HTML页面中,才能在web浏览器中运行. 之前总以为本地安装了JDK,指定好JAV ...
- idea中java文件怎么运行_在Java中使用临时文件/文件夹
Java NIO.2 API提供了对使用临时文件夹/文件的支持.例如,我们可以轻松地找到临时文件夹/文件的默认位置,如下所示: Java 1 String defaultBaseDir = Syste ...
- java能调用python吗_如何使用运行时在Java中调用python程序 - java
我想用来自Java的参数调用python程序.但是我的输出是空白.代码在这里. Python代码在这里: import sys print(sys.argv[1]) Java代码在这里: public ...
- mscoreei.dll没有被指定在windows上运行_在Windows上使用Docker运行.NetCore
今天我们来说下如何在windows下使用docker运行.net core,既然是docker,那么我们首先得在windows上安装docker. 在Windows安装 docker 有两种选择 : ...
- linux下hg无法运行_在 Windows 里也可以访问 Linux 子系统文件了
下一个Windows更新版带来了更好的Linux集成机制 Windows 10 April 2019更新版有许多改进之处,尤其是Windows Subsystem for Linux新增这项功能:让用 ...
- java 启动多个jvm实例_当多个Java程序在同一台计算机上运行时
小编典典 1)如果我有一个用Java编写的Web服务,它将需要一个JVM实例来运行.那么可以将JVM设为守护进程吗? 是的,它可以.如何完成取决于O / S和Web服务器容器本身. 2)如果是,当我们 ...
最新文章
- go语言基础到提高(7)-数组
- 计算机二级考试基础知识总结,全国计算机等级考试二级公共基础知识总结
- Codeforces.449D.Jzzhu and Numbers(容斥 高维前缀和)
- IOS15之Swift5.5的KVC报错以及JSON转字典转模型
- 多线程的创建方式---继承Thread和实现Runnable
- 安卓界面组件-文本框
- html中的波浪线,CSS3 波浪线
- 使用jupyterthemes插件定制jupyter notebook界面
- MySQL IFNULL函数
- mschart控件使用详解
- 饿百零售开放平台,测试账号饿了么显示该商家还没有上传商品
- ANSYS 有限元分析 几何建模
- iPhoneiPad越狱后的操作
- 量化投资:研报文本挖掘选股策略
- VS安装包下载和环境配置
- D. Aerodynamic(思维+计算几何判中心对称图形)
- 昨夜今晨全球大公司动态
- DZone每日必读-news: 指导软件团队取得成功的 4 种方法
- 拉普拉斯矩阵(Laplacian matrix)及其变体详解
- 最新可用版PanDownload网页端PHP系统源码