eclipse安装Hadoop1.1.2版本开发插件

Hadoop1.1.2版本没有直接适合Eclipse的安装插件，需要手动打包jar文件。

我的系统配置：

VMware Workstation10
CentOS-6.5-i386
hadoop-1.1.2
eclipse_SDK_3.7.2_win32

系统配置说明：

我的电脑是Win7 32位的，安装了VMware虚拟机。

在虚拟机中安装的是CentOS系统（Linux系统）。

在Linux系统中配置的是Hadoop1.1.2的伪分布式集群环境。

Eclipse安装在Window系统下。

实现功能：

在window下的Eclipse中安装Hadoop的开发环境。

实现步骤：

一、编译eclipse hadoop plugin插件

详细参照页面：http://blog.csdn.net/yonghutwo/article/details/9185797

说明：使用此方法没有成功，没能成功打包生成jar文件。最后下载了现成的jar文件使用。

二、配置Eclipse

详细参照页面：http://f.dataguru.cn/thread-23548-1-1.html

三、运行问题。

12/04/24 15:32:44 WARN util.NativeCodeLoader: Unable to load native-hadoop     library for your platform... using builtin-java classes where applicable
12/04/24 15:32:44 ERROR security.UserGroupInformation:     PriviledgedActionException as:Administrator cause:java.io.IOException: Failed to set     permissions of path: \tmp\hadoop-Administrator\mapred\staging\Administrator-    519341271\.staging to 0700
Exception in thread "main" java.io.IOException: Failed to set permissions of path: \tmp\hadoop-Administrator\mapred\staging\Administrator-519341271\.staging to 0700

问题原因：

这个是Windows下文件权限问题，在Linux下可以正常运行，不存在这样的问题。

解决方法是将hadoop-x.x.x/src/core/org/apache/hadoop/fs/FileUtil.java里面方法checkReturnValue的代码注释掉.

再重新编译生成hadoop-x.x.x-core.jar.

问题解决：

新建一个MapReduce项目, 把hadoop-x.x.x/src/core/org/apache/hadoop/fs/FileUtil.java代码复制到src下(注意, 目录结构也需要), 按上面修改文件, 然后重新build下, 找到编译好的.class(两个), 用解压软件打开hadoop-x.x.x-core.jar, 把这两个class文件覆盖即可.

怎样build一个类文件：右键类--Export--Ant Bulidfiles

提供一个我编译好的jar文件。下载地址： http://files.cnblogs.com/6tian/hadoop-core-1.1.2.rar

（使用时将.rar后缀改成.jar 博客园不允许上传jar类型的附件）

转载于:https://www.cnblogs.com/6tian/p/3732807.html

eclipse安装Hadoop1.1.2版本开发插件相关推荐

eclipse安装、优化、配置、插件添加整理
文章目录说明资料下载安装启动优化配置修改编码格式设置字体大小修改背景色自定义new菜单显示内存复制上一行快捷键自定义注释增加插件下载dns 插件安装svn 安装class查 ...
配置GOPROXY安装VScode的go语言开发插件
背景我的VScode版本我的go版本: go version go1.15.15 windows/amd64 我的操作系统是:win11 如果不配置GOPROXY,则在安装下列go插件时会报访问相 ...
eclipse安装快速打开项目所在位置的插件
为什么80%的码农都做不了架构师?>>> 转载于:https://my.oschina.net/u/1773772/blog/750123
ubuntu下部署eclipse集成hadoop\android\web\GCC开发环境小记
Hadoop环境: 1.部署: 1)ubuntu上创建新用户账号:hadoop/123,并设置为管理员: 2)ubuntu上安装SSH:创建rsa无密码ssh-key: 3)ubun ...
Eclipse安装STS插件并解决安装缓慢问题
原 Eclipse安装STS插件并解决安装缓慢问题 2018年11月20日 10:22:29 MyronCham 阅读数 1198 标签: sts 更多个人分类: 开发工具 Eclipse安装spr ...
Eclipse安装SVN插件的两种方式
登录 | 注册收藏成功确定收藏失败,请重新收藏确定查看所有私信查看所有通知暂没有新通知想要绕过微信小程序开发中的坑吗?不妨来听这个,今晚8点,1小时帮你搞定! 23小时以前 CSDN日报 ...
为Eclipse安装lombok插件
原生的Eclipse没有lombok插件,即使项目引入了lombok依赖也无法正常使用@Data等常用标签.下面介绍一下如何手动为Eclipse添加lombok插件,具体操作步骤如下: (1)打开Do ...
Eclipse安装DSS会出现的一点问题
DSS:Dynasoft Anywhere standalone Eclipse安装源码管理工具DSS插件,可以通过以下三种方式: 前两种方式类似见:http://blog.csdn.net/helo ...
mac版本的eclipse安装springboot开发插件(STS)
查看mac上安装的eclipse版本(安装与eclipse版本一致的STS) 选择:Eclipse------>About Eclipse--------->Version: Photon ...

eclipse安装Hadoop1.1.2版本开发插件

eclipse安装Hadoop1.1.2版本开发插件相关推荐

最新文章

热门文章