Hadoop开发环境准备及错误问题解决方法

一、开发环境准备
二、错误问题及其产生原因
三、错误问题解决方法

一、开发环境准备

Hadoop环境已经搭建好（伪分布式搭建好即可）
eclipse或者idea已经下载安装好
修改下idea中默认的maven镜像地址为阿里云的镜像地址，配置如下

（1）启动idea，找到idea中maven默认的仓配置地址：

（2）找到上述红色部分的文件夹后，查看下.m2下面有没有settings.xml，如果，你需要在.m2下面创建settings.xml文件，文件内容如下，你复制粘贴即可：

<?xml version="1.0" encoding="UTF-8"?>
<settings xmlns="http://maven.apache.org/SETTINGS/1.0.0"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocation="http://maven.apache.org/SETTINGS/1.0.0 http://maven.apache.org/xsd/settings-1.0.0.xsd"><mirrors><mirror>  <id>alimaven</id>  <name>aliyun maven</name>  <url>http://maven.aliyun.com/nexus/content/groups/public/</url>  <mirrorOf>central</mirrorOf>          </mirror>  </mirrors>
</settings>

二、错误问题及其产生原因

错误一： Could not locate executable null \bin\winutils.exe in the hadoop binaries

原因：缺少winutils.exe
错误二： Unable to load native-hadoop library for your platform
原因：缺少hadoop.dll
错误三： entry in command string null chmod 0700 类似这种错误

三、错误问题解决方法

解决办法如下：

在windows上解压hadoop-2.7.3.tar.gz到某个盘上，比如D:\hadoop-2.7.3
在windows上配置环境变量，如下
需要下载hadoop依赖的二进制文件winutils.exe和hadoop.dll动态链接库
下载地址：winutils和hadoopdll
把这两个文件复制到Hadoop解压之后所在的文件夹下的bin文件夹中，比如D:\hadoop-2.7.3\bin下:
还需要hadoop.dll动态链接库复制到 C:\windows\system32文件夹下
重启下eclipse或者idea即可

Hadoop开发环境准备及错误问题解决方法相关推荐

Android开发环境搭建及常见问题解决方法
Android开发环境搭建及常见问题解决方法参考文章: (1)Android开发环境搭建及常见问题解决方法 (2)https://www.cnblogs.com/rwxwsblog/p/476978 ...
meego Java_meego 1.1 开发环境的搭建及问题解决方法
折腾了大半天终于把meego 1.1的开发环境安装在了ubuntu 10.10上了,这个过程的艰难也充分证明meego的道路可能还会很艰难. 1.meego SDK安装 (1),获取gpg key,不 ...
Mac下eclipse的Hadoop开发环境配置中以及windows-＞preferences下看不到Hadoop/MapReduce的配置项问题解决
Mac下eclipse的Hadoop开发环境配置中以及windows->preferences下看不到Hadoop/MapReduce的配置项问题解决 1. 下载hadoop插件下载好hado ...
在ubuntu下使用Eclipse搭建Hadoop开发环境
一.安装准备 1.JDK版本:jdk1.7.0(jdk-7-linux-i586.tar.gz) 2.hadoop版本:hadoop-1.1.1(hadoop-1.1.1.tar.gz) 3.ecli ...
配置HADOOP开发环境
考虑到Windows平台尽管界面友好,但Hadoop环境配置较"怪异",需借助cygwin,这个过程并不优雅.正好我手上另有一套ubuntu环境,用着也很顺手,就在ubuntu中安 ...
linux ftp 550 下载,linux ftp服务器上传文件夹时提示550错误问题解决方法
linux ftp服务器上传文件夹时提示550错误问题解决方法标签: linux ftp服务器 550 中文文件夹上传错误问题分类: 计算机 2010-11-06 22:47 前几天在实验室搭配 ...
Hadoop完全分布式搭建过程、maven和eclipse配置hadoop开发环境、配置Map/Reduce Locations、简单wordcount测试!
Hadoop完全分布式搭建及测试项目开始前准备工作 1.下载并安装VM workstation pro 15安装包,这里选择: VMware-workstation-full-15.1.0-1359 ...
大数据开发教程——构建Hadoop开发环境
什么是Hadoop ? Hadoop是由 Apache 基金会开发和维护的一个开源的分布式计算和存储框架. Hadoop 为庞大的计算机集群提供可靠的.可伸缩的应用层计算和存储支持,它允许使用简单的编 ...
极海APM微控制器基于IAR开发环境搭建与工程调试配置方法
极海APM微控制器基于IAR开发环境搭建与工程调试配置方法 ✨本篇主要针对基于IAR for ARM版本:V9.30.1环境搭建和工程调试配置过程进行介绍,当然也同样适用于基于ARM架构芯片的开发使用 ...
绝地求生大逃杀错误服务器维护,绝地求生 Bad Service Version 错误问题解决方法
绝地求生 Bad Service Version 错误问题解决方法 2017-11-13 15:53:01来源:游戏下载编辑:评论(0) <绝地求生大逃杀>提示Bad Service Ve ...

Hadoop开发环境准备及错误问题解决方法

Hadoop开发环境准备及错误问题解决方法

一、开发环境准备

二、错误问题及其产生原因

三、错误问题解决方法

Hadoop开发环境准备及错误问题解决方法相关推荐

最新文章

热门文章