hadoop2.6.2分布式环境搭建

1、准备三台机器，机器名是：master、slave01、slave02

　　1.1 最小化安装centos6.5

　　1.2 安装ssh，yum -y install openssh-clients（这一步安装是因为系统最小化安装时，这个组件是没有的）

　　1.3 修改主机名

　　　　vi /etc/sysconfig/network　　　　

　　1.4 修改hosts文件，三台机器的内容一样　　

　　　　vim /etc/hosts　　　

　　　　192.168.137.56 master
　　　　192.168.137.61 slave01
　　　　192.168.137.62 slave02

2、免密码登录

　　http://www.cnblogs.com/bookwed/p/4809390.html　　

　　由于是自己测试，使用root用户，设置免密码登录；在生产环境，可以自己新建用户。

3、安装好jdk环境（jdk1.8）

　　http://www.cnblogs.com/bookwed/p/4807356.html

4、hadoop相关

　　4.1 下载

　　　　http://hadoop.apache.org/releases.html，选择 2.6.2版本，binary，下载。

　　4.2 上传、解压

　　　　通过xftp上传到服务器，可以先只上传到mater机器，完全设置好配置文件后，再拷贝到另外两台机器。

　　　　这里我把文件放到/app/programs/目录下

　　4.3 修改hadoop配置文件

　　　　http://www.cnblogs.com/bookwed/p/4816521.html

　　　　从 “附上几个配置文件的信息：”这里开始看，主要关注这几个配置文件。

　　　　把这几个配置文件修改后，通过scp 拷贝到slave01、slave02的相同目录。

　　　　　　scp /app/programs/hadoop-2.6.2 root@slave01:/app/programs/

　　　　　　scp /app/programs/hadoop-2.6.2 root@slave02:/app/programs/

　　4.4 测试

　　　　在master机器上操作：

　　　　cd hadoop-2.6.2

　　　　./bin/hadoop namenode -format 格式化

　　　　./sbin/start-all.sh 　　启动　　　　　　

　　　　jps　　查看

　　　　访问：http://192.168.137.56:50070/，master机器的ip。

　　　　　　　http://192.168.137.56:8088/

转载于:https://www.cnblogs.com/bookwed/p/5251393.html

hadoop2.6.2分布式环境搭建相关推荐

Hadoop2.2.0伪分布式环境搭建（附：64位下编译Hadoop-2.2.0过程）
Hadoop2.2.0伪分布式环境搭建: 写在前面:Hadoop2.2.0默认是支持32位的OS,如果想要在64位OS下运行的话,可以通过在64位OS下面编译Hadoop2.2.0来实现,编译的操作步 ...
2021年大数据环境搭建（二）：分布式环境搭建
2021大数据领域优质创作博客,带你从入门到精通,该博客每天更新,逐渐完善大数据各个知识体系的文章,帮助大家更高效学习. 有对大数据感兴趣的可以关注微信公众号:三帮大数据目录分布式环境搭建集群规 ...
Hadoop单机和伪分布式环境搭建
hadoop环境搭建 1.三个环境单机.伪分布式.分布式 2.三个分支 apache版本(Apache基金会) cdh版本(cloudera公司) ...
最详细的Hadoop+Hbase+Hive完全分布式环境搭建教程（二）
继续上次的教程,这次安装hbase与hive.之前有同学反应百度网盘中没有hbase安装包,这次补上了,在上篇博客的网盘链接中已经有了,最详细的Hadoop+Hbase+Hive完全分布式环境搭建教程 ...
1 Hadoop 3.2.4分布式环境搭建
1 Hadoop 3.2.4分布式环境搭建 1 系统配置 3台centOS虚拟机 # 配置hosts解析 vim /etc/hosts192.168.88.129 hadoop1 192.168.88 ...
HDFS伪分布式环境搭建-很不错
HDFS伪分布式环境搭建原创 ZeroOne01 2018-03-24 19:51:20 评论(0) 655人阅读 HDFS概述及设计目标什么是HDFS: 是Hadoop实现的一个分布式文件系统( ...
Hadoop入门基础教程 Hadoop之完全分布式环境搭建
上一篇我们完成了Hadoop伪分布式环境的搭建,伪分布式模式也叫单节点集群模式, NameNode.SecondaryNameNode.DataNode.JobTracker.TaskTracker所 ...
Zookeeper分布式环境搭建
Zookeeper分布式环境搭建一.分布式安装部署 1.前置条件 2.集群规划 3.解压安装 4.配置zoo.cfg文件 5.集群操作二.配置参数解读 1.tickTime 2.initLimit ...
ZooKeeper之分布式环境搭建
第1关:仲裁模式与伪分布式环境搭建本关任务:了解ZooKeeper的仲裁模式,掌握伪分布式安装. vi /opt/zookeeper-3.4.12/conf/zoo.cfg 增加以下内容并保存:se ...

hadoop2.6.2分布式环境搭建

hadoop2.6.2分布式环境搭建相关推荐

最新文章

热门文章