项目场景:

在ideal中运行spark项目进行数据存储文件时报错。


问题描述:


报错:Could not locate executable null\bin\winutils.exe in the Hadoop binaries


原因分析:

原因:缺少winutils.exe程序

Hadoop都是运行在Linux系统下的,在windows下eclipse中运行mapreduce程序,要首先安装Windows下运行的支持插件


解决方案:

1.在与你安装的对应版本的hadoop文件包目录中到达bin目录,找到winutils.exe文件,选择复制。

2.找出一个空余磁盘创建一个新的winutils文件

3.接着在该文件夹下在创建bin文件

4.然后将复制的winutils.exe文件拷贝过来。

5.在执行代码之前加入配置语句

System.setProperty("hadoop.home.dir","G:\\winutils")

6.在完成上述过程后,还会继续报错。不要慌,这个错只是因为刚刚第一次写入时虽然未成功,但是帮你创建好了文件夹,只需要删除即可。

注意:winutils.exe的版本号一定要和使用的hadoop版本号保持一致!!!



若本文章不能够解决你的问题,参见大佬博客:

Hadoop之——Could not locate executable null 解决办法



【Spark】Could not locate executable null\bin\winutils.exe in the Hadoop binaries相关推荐

  1. 安装spark,Could not locate executable null\bin\winutils.exe in the Hadoop binaries报错

    安装spark,Could not locate executable null\bin\winutils.exe in the Hadoop binaries报错 缺少winutils.exe程序 ...

  2. 【Spark】Spark报错:Could not locate executable null\bin\winutils.exe in the Hadoop binaries

    IDEA集成Scala和Spark之后,运行demo可能会报错: java.io.IOException: Could not locate executable null\bin\winutils. ...

  3. [Spark]Could not locate executable null\bin\winutils.exe in the Hadoop binaries

    这里集群环境不同,但遇到的问题及解决办法其实一样,时间有限,就不详细修改了.我主要是在Windows本地运行Spark程序出现该错误. 本文转自http://www.cnblogs.com/hyl82 ...

  4. Could not locate executable null\bin\winutils.exe in the Hadoop binaries全网最强windows10安装hadoop教程

    简述 详细安装配置步骤 1.安装jdk 2.下载安装hadoop 2.1 下载 2.2 解压安装 2.3 配置环境变量 2.4 配置cmd与xml文件 设置完毕启动hadoop 简述 报错内容:Cou ...

  5. 解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.

    在Windows环境下使用IDEA.eclipse运行hadoop.spark程序时产生如下异常: 1.java.io.IOException: Could not locate executable ...

  6. IDEA启动hadoop报Could not locate executable null\bin\winutils.exe in the Hadoop binaries.错误的解决办法

    打开了一个hadoop项目,项目代码确定无误可运行,但是本地运行报错如下 仔细看一下报错路径,显示的是null\bin\winutils.exe 而我的winutils已经下载下来并且复制到bin目录 ...

  7. 源码追踪,解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.问题

    在windows系统本地运行spark的wordcount程序,会出现一个异常,但不影响现有程序运行. >>提君博客原创  http://www.cnblogs.com/tijun/  & ...

  8. 【收藏】Hadoop解决Could not locate executable null\bin\winutils.exe in the Hadoop binaries.问题

    https://www.cnblogs.com/tijun/p/7567664.html

  9. bug-hadoop:Could not locate executable null\bin\winutils.exe in the Hadoop binaries

    原因:缺少winutils.exe程序 Hadoop都是运行在Linux系统下的,在windows下eclipse中运行mapreduce程序,要首先安装Windows下运行的支持插件 下载: htt ...

最新文章

  1. Python: The _imagingft C module is not installed错误的解决
  2. CLR 中 线程的 ThreadState 解释
  3. ios 中是否每一个对象(尤其是在使用多线程时),都要判断一下对象是否为nil,以防止程序闪退?...
  4. Docker(二)-在Docker中部署Nginx实现负载均衡(视频)
  5. Android之AudioManager(音频管理器)详解
  6. 用matlab画图的好处,用matlab画图注意事项
  7. c++ ado操作mysql_利用ADO在C++下操作access数据库
  8. 技术人专访:GrapeCity,技术老炮开启低代码新征程
  9. 16复变函数的积分(二)
  10. NI 国家仪器 各版本软件下载链接
  11. 重温LuGre摩擦力模型
  12. BP神经网络算法简介
  13. 【AI视野·今日NLP 自然语言处理论文速览 第三十二期】Wed, 20 Apr 2022
  14. 史上最牛12306抢票攻略
  15. 拇指玩」制作的「谷歌安装器」app
  16. FDTD Solutions时域有限差分法仿真学习相关操作(一)——GDS导出
  17. 服务器通过ilo安装系统,如何通过ilo开启服务器远程桌面
  18. 生成数据库结构字段SQL语句
  19. 矩阵乘法——矩阵快速幂
  20. 适合编程初学者的开源博客系统

热门文章

  1. iMeta | 水科院南海所姜敬哲/中大施莽利用病毒组揭示的牡蛎体内的新型RNA病毒...
  2. Aurora 等号对齐,公式自动编号
  3. 问题 G: 深入浅出学算法007-求佩尔方程的解
  4. 企业内部服务器主机加固的必要性
  5. web基础漏洞之CSRF(跨站请求伪造漏洞)
  6. GitBook生成电子书并发布到GitHub Pages
  7. 海量数据将亮相“全栈式中间件信息技术应用创新峰会”
  8. remote: Repository not found. fatal: repository 'https://github.com/AlbertYang666/AlbertYang666.gith
  9. curl: (35) LibreSSL SSL_connect: SSL_ERROR_SYSCALL in connection
  10. 程序员到底有多累、多辛苦?加班如喝水,但是最累的其实不是加班