高效5步走，高速搭建Hadoop2伪分布环境

前两天将Hadoop2的全然分布式搭建文档整理公布于网上（http://blog.csdn.net/aaronhadoop/article/details/24859369）。朋友相邀。就再将Hadoop2的伪分布式文档整理一下，搭建过Hadoop2全然分布式后，就笑对“伪分布式”说声呵呵吧。

前期的jdk环境、SSH免密钥登录配置在此就不再赘述了。直接进入hadoop2的配置。

本文Hadoop2配置文件路径：/usr/local/hadoop/etc/hadoop。

开启Hadoop2模式，start now

一、改动hadoop-env.sh

export JAVA_HOME=/usr/local/jdk1.7.0_45/

二、改动core-site.xml

<name>fs.default.name</name>

<value>hdfs://hadoop0:9000</value>

</property>

<name>hadoop.tmp.dir</name>

<value>/usr/local/hadoop/HadoopTmpDir</value>

</property>

手动创建文件夹

mkdir /usr/local/hadoop/HadoopTmpDir

三、改动hdfs-site.xml

<name>dfs.replication</name>

</property>

四、改动mapred-site.xml

cp mapred-site.xml.template mapred-site.xml

<name>mapred.job.tracker</name>

<value>hadoop0:9001</value>

</property>

五、运行命令

hdfs namenode -format

start-dfs.sh

stop-dfs.sh

start-yarn.sh

stop-yarn.sh

验证

验证方式一，查看java守护进程

验证方式二。web端

对于Hadoop2的配置及使用，建议当然还是全然分布式了。Hadoop VS Hadoop2，当中妙处。要体会，更要多言。哈哈。欢迎交流哟

OK，搞定！

转载于:https://www.cnblogs.com/claireyuancy/p/6816187.html

高效5步走，高速搭建Hadoop2伪分布环境相关推荐

hadoop环境搭建之伪分布集群环境搭建（单节点）
首先,尼玛哥是一名研究生,可以说很多学习的知识都是来源于同门师兄弟,本着将自己学习到的东西以博客的形式分享到网络上,不仅仅可以让自己回顾,也可以帮助需要学习的小伙伴们,供大家一同学习. 首先,hado ...
Windows 7 64位系统上搭建Hadoop伪分布式环境（很详细）
在开始配置前,我们先了解Hadoop的三种运行模式. Hadoop的三种运行模式独立(或本地)模式:无需运行任何守护进程,所有程序都在同一个JVM上执行.在独立模式下测试和调试MapReduce程序 ...
Spark基础学习笔记04：搭建Spark伪分布式环境
文章目录零.本讲学习目标一.搭建伪分布式Hadoop (一)登录ied虚拟机 (二)配置免密登录 1.生成密钥对 2.将生成的公钥发送到本机(虚拟机ied) 3.验证虚拟机是否能免密登录本机 (三 ...
Hadoop2.6.0伪分布环境搭建
用到的软件: 一.安装jdk: 1.要安装的jdk,我把它拷在了共享文件夹里面. (用优盘拷也可以) 2.我把jdk拷在了用户文件夹下面. (其他地方也可以,不过路径要相应改变) 3.执行复制安装 ...
搭建 Hadoop 伪分布式环境
软硬件环境 CentOS 7.2 64 位 OpenJDK- 1.8 Hadoop- 2.7 关于本教程的说明云实验室云主机自动使用 root 账户登录系统,因此本教程中所有的操作都是以 root ...
本地搭建Hadoop伪分布式环境之一：虚拟机的安装
作者:GISer_Leo 好久没有写技术文档了,最近都在做项目:今日抽空搭建下Hadoop伪分布式环境: 个人笔记本:win8.1系统,内存32G,i7,硬盘1.5T: 准备软件:1.VMware-w ...
zookeeper伪分布环境搭建
前提条件 1. 1台Linux环境机器 2. Linux环境下安装好jdk 目标用1台Linux环境机器,安装zookeeper伪分布式环境. 操作步骤下载: 点击如下链接下载zookeeper安 ...
本地搭建Hadoop伪分布式环境之四：开启搭建Hadoop2.4.0之旅
1.准备软件 64位下载包下载: hadoop-2.4.0-64bit.tar.gz 百度网盘: 链接: http://pan.baidu.com/s/1hqEDe2S password: ...
hadoop的伪分布环境配置（2.5.2）
/hadoop/etc/hadoop/ Eclipse :: http://my.oschina.net/lanzp/blog/309078?fromerr=blt5oYkF core-site ...

高效5步走，高速搭建Hadoop2伪分布环境

高效5步走，高速搭建Hadoop2伪分布环境相关推荐

最新文章

热门文章