【Spark】Could not locate executable null\bin\winutils.exe in the Hadoop binaries
项目场景:
在ideal中运行spark项目进行数据存储文件时报错。
问题描述:
报错:Could not locate executable null\bin\winutils.exe in the Hadoop binaries
原因分析:
原因:缺少winutils.exe程序
Hadoop都是运行在Linux系统下的,在windows下eclipse中运行mapreduce程序,要首先安装Windows下运行的支持插件
解决方案:
1.在与你安装的对应版本的hadoop文件包目录中到达bin目录,找到winutils.exe文件,选择复制。
2.找出一个空余磁盘创建一个新的winutils文件
3.接着在该文件夹下在创建bin文件
4.然后将复制的winutils.exe文件拷贝过来。
5.在执行代码之前加入配置语句
System.setProperty("hadoop.home.dir","G:\\winutils")
6.在完成上述过程后,还会继续报错。不要慌,这个错只是因为刚刚第一次写入时虽然未成功,但是帮你创建好了文件夹,只需要删除即可。
注意:winutils.exe的版本号一定要和使用的hadoop版本号保持一致!!!
若本文章不能够解决你的问题,参见大佬博客:
Hadoop之——Could not locate executable null 解决办法
【Spark】Could not locate executable null\bin\winutils.exe in the Hadoop binaries相关推荐
- 安装spark,Could not locate executable null\bin\winutils.exe in the Hadoop binaries报错
安装spark,Could not locate executable null\bin\winutils.exe in the Hadoop binaries报错 缺少winutils.exe程序 ...
- 【Spark】Spark报错:Could not locate executable null\bin\winutils.exe in the Hadoop binaries
IDEA集成Scala和Spark之后,运行demo可能会报错: java.io.IOException: Could not locate executable null\bin\winutils. ...
- [Spark]Could not locate executable null\bin\winutils.exe in the Hadoop binaries
这里集群环境不同,但遇到的问题及解决办法其实一样,时间有限,就不详细修改了.我主要是在Windows本地运行Spark程序出现该错误. 本文转自http://www.cnblogs.com/hyl82 ...
- Could not locate executable null\bin\winutils.exe in the Hadoop binaries全网最强windows10安装hadoop教程
简述 详细安装配置步骤 1.安装jdk 2.下载安装hadoop 2.1 下载 2.2 解压安装 2.3 配置环境变量 2.4 配置cmd与xml文件 设置完毕启动hadoop 简述 报错内容:Cou ...
- 解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.
在Windows环境下使用IDEA.eclipse运行hadoop.spark程序时产生如下异常: 1.java.io.IOException: Could not locate executable ...
- IDEA启动hadoop报Could not locate executable null\bin\winutils.exe in the Hadoop binaries.错误的解决办法
打开了一个hadoop项目,项目代码确定无误可运行,但是本地运行报错如下 仔细看一下报错路径,显示的是null\bin\winutils.exe 而我的winutils已经下载下来并且复制到bin目录 ...
- 源码追踪,解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.问题
在windows系统本地运行spark的wordcount程序,会出现一个异常,但不影响现有程序运行. >>提君博客原创 http://www.cnblogs.com/tijun/ & ...
- 【收藏】Hadoop解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.问题
https://www.cnblogs.com/tijun/p/7567664.html
- bug-hadoop:Could not locate executable null\bin\winutils.exe in the Hadoop binaries
原因:缺少winutils.exe程序 Hadoop都是运行在Linux系统下的,在windows下eclipse中运行mapreduce程序,要首先安装Windows下运行的支持插件 下载: htt ...
最新文章
- Python: The _imagingft C module is not installed错误的解决
- CLR 中 线程的 ThreadState 解释
- ios 中是否每一个对象(尤其是在使用多线程时),都要判断一下对象是否为nil,以防止程序闪退?...
- Docker(二)-在Docker中部署Nginx实现负载均衡(视频)
- Android之AudioManager(音频管理器)详解
- 用matlab画图的好处,用matlab画图注意事项
- c++ ado操作mysql_利用ADO在C++下操作access数据库
- 技术人专访:GrapeCity,技术老炮开启低代码新征程
- 16复变函数的积分(二)
- NI 国家仪器 各版本软件下载链接
- 重温LuGre摩擦力模型
- BP神经网络算法简介
- 【AI视野·今日NLP 自然语言处理论文速览 第三十二期】Wed, 20 Apr 2022
- 史上最牛12306抢票攻略
- 拇指玩」制作的「谷歌安装器」app
- FDTD Solutions时域有限差分法仿真学习相关操作(一)——GDS导出
- 服务器通过ilo安装系统,如何通过ilo开启服务器远程桌面
- 生成数据库结构字段SQL语句
- 矩阵乘法——矩阵快速幂
- 适合编程初学者的开源博客系统
热门文章
- iMeta | 水科院南海所姜敬哲/中大施莽利用病毒组揭示的牡蛎体内的新型RNA病毒...
- Aurora 等号对齐,公式自动编号
- 问题 G: 深入浅出学算法007-求佩尔方程的解
- 企业内部服务器主机加固的必要性
- web基础漏洞之CSRF(跨站请求伪造漏洞)
- GitBook生成电子书并发布到GitHub Pages
- 海量数据将亮相“全栈式中间件信息技术应用创新峰会”
- remote: Repository not found. fatal: repository 'https://github.com/AlbertYang666/AlbertYang666.gith
- curl: (35) LibreSSL SSL_connect: SSL_ERROR_SYSCALL in connection
- 程序员到底有多累、多辛苦?加班如喝水,但是最累的其实不是加班