Hadoop安装记录（伪分布式）

下面给大家分享一下我在安装Hadoop时候的一些步骤记录，希望能给大家带来帮助，我安装的是单节点的伪分布式。

1.基本环境：VMware8.0 + CentOS 6.0

　　2.软件版本：hadoop-0.20.2-cdh3u1.tar.gz + jdk-6u29-linux-i586.bin

第一步，将所需要的软件从本地共享到虚拟机，我们可以使用VMware Tools的Share共享文件夹功能

我们在/usr下新建/hadoopsoft文件夹，把需要的软件拷贝进去：

第二步，安装jdk

首先改变hadoopsoft目录为可执行目录，并安装jdk

第三步，安装hadoop

第四步，创建hadoop的用户组，并创建相应用户hadoopuser

第五步，配置环境变量

打开/etc/profile:

配置完环境变量以后需要重启一下CentOS，然后验证是否成功：

第六步，配置SSH免登陆认证

如果配置不成功需要赋予authorized_keys相应的权限！

第七步，配置hadoop配置文件

　　1.hadoop-env.sh 为hadoop添加java环境变量

（为了一下配置的方便，我们先为ip配置一个host)

同时也要修改/hadoop/conf下的masters和slaves文件，修改成相应的host名。

　　2.core-site.xml

　　3.mapred-site.xml

第八步，为hadoopuser用户赋予hadoop文件夹的使用权限

第九步，格式化namenode

如果格式化不成功，需要删除hadoop临时文件夹下的文件，然后重新执行namenode格式化：

第十步，启动hadoop

如果这些节点都已经启动，则代表hadoop已经正常启动，通过在浏览器里查看：

以上就是我在安装单节点hadoop的配置过程，如有什么疑问欢迎下方跟评论！

转载于:https://www.cnblogs.com/NicholasLee/archive/2012/08/27/2659029.html

Hadoop安装记录（伪分布式）相关推荐

Hadoop安装搭建伪分布式教程（全面）吐血整理
Hadoop安装搭建伪分布式教程(全面)吐血整理 1.安装下载虚拟机VMware 2.下载Ubuntu18.04镜像文件,并在VMware中添加虚拟机. 3.Hadoop伪分布式搭建 3.1 创建ha ...
Hadoop 安装 + HBase伪分布式安装
第一部分,安装Hadoop 一般配置都是在文件尾新增几行配置,也有文件路径需要手动新建. 1 修改主机名 # hostname xinyanfei 2 配置host 3 ping主机名 # ping ...
Hadoop系列之九：Hadoop集群伪分布式模式的实现详解
1.Hadoop依赖软件 Hadoop基于Java语言开发,因此其运行严重依赖于JDK(Java Development Kit),并且Hadoop的许多功能依赖于Java 6及以后的版本才提供的特性 ...
单机版安装，伪分布式安装
单机版安装,伪分布式安装单机版安装:适合做一些调试,mapreduce调试(debug),实际开发中不用伪分布式安装:在一台服务器上模拟出来多台服务器的效果(模拟多服务的启动方式) 官网地址单机 ...
Hadoop 单机版和伪分布式版安装
1 依赖项 java ssh $ java -version java version "1.8.0_181" Java(TM) SE Runtime Environment (b ...
linux hadoop etc目录,Hadoop系列——Linux下Hadoop的安装与伪分布式配置
1 环境配置 1.1 JDK配置在这里使用的是Oracle的JDK1.8. 1. 下载安装JDK 2. 配置环境变量以上两个步骤不再展开赘述. 3. 验证JDK是否安装成功分别使用 echo $ ...
hadoop 2.6 伪分布式的安装
我们选择安装的版本为: hadoop-2.6.0-cdh5.4.0.tar.gz. 一.下载.解压二.修改配置文件配置文件在 hadoop-2.6.0-cdh5.4.0/etc/hadoop/ 路 ...
Hadoop安装教程_分布式集群
安装前的准备伪分布式的设置集群的规划集群的初始设置网络配置 SSH无密码登陆 java及apache环境设置安装流程主机的安装集群的安装效果与验证安装注意模式切换参考资料安装前 ...
Hadoop单机和伪分布式环境搭建
hadoop环境搭建 1.三个环境单机.伪分布式.分布式 2.三个分支 apache版本(Apache基金会) cdh版本(cloudera公司) ...

Hadoop安装记录（伪分布式）

Hadoop安装记录（伪分布式）相关推荐

最新文章

热门文章