hadoop集群环境搭建

参考前面的hadoop集群搭建文档,搭建了三个服务器的集群如下
feixu-master     namenode, secondaryNamenode, jobtracker
feixu-slave1     datanode, tasktracker
feixu-slave2     datanode, tasktracker
zookeeper集群环境搭建
zooKeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(Distributed Synchronization)、命名服务(Naming Service)、集群维护(Group Maintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。
从conf/zoo_sample.cfg复制文件conf/zoo.cfg并添加如下配置
dataDir=/hadoop/zookeeperserver.1=hadoop01:2887:3887server.2=hadoop02:2888:3888server.3=hadoop03:2889:3889

在每个节点上启动zookeeper服务
sh bin/zkServer.sh start
sh bin/zkServer.sh status 查看当前节点是否是leader

HBase集群环境搭建
修改hbase-env.sh文件如下
export JAVA_HOME=/usr/java/jdkexport HBASE_CLASSPATH=/usr/local/hadoop-1.0.4/confexport HBASE_MANAGES_ZK=falseexport HBASE_HEAPSIZE=2048

修改hbase-site.xml文件如下

<configuration> <property>   <name>hbase.rootdir</name>   <value>hdfs://hadoop01:9000/hbase</value>   <description>The directory shared by region servers.</description> </property> <property>   <name>hbase.cluster.distributed</name>   <value>true</value>

 </property> <property>     <name>hbase.zookeeper.quorum</name>

     <value>hadoop01,hadoop02,hadoop03</value> </property> <property>  <name>hbase.tmp.dir</name>  <value>/hadoop/hbase</value></property></configuration>

conf/regionservers  相当于hadoop的slave

hadoop02hadoop03

启动所有hbase进程

bin/start-hbase.sh

master机器的进程
2255 SecondaryNameNode3745 QuorumPeerMain2115 NameNode4192 HMaster4461 Jps2333 JobTracker

slave机器的进程

1850 QuorumPeerMain1502 DataNode2091 HRegionServer1590 TaskTracker2292 Jps

hadoop1.2.1+zookeeper3.4.6+hbase0.94集群环境搭建相关推荐

  1. centos6.5环境下zookeeper-3.4.6集群环境部署及单机部署详解

    centos6.5环境下Zookeeper-3.4.6集群环境部署 [系统]Centos 6.5 集群部署 [软件]准备好jdk环境,此次我们的环境是open_jdk1.8.0_101 zookeep ...

  2. Hadoop2.7.3+HBase1.2.5+ZooKeeper3.4.6搭建分布式集群环境

    Hadoop2.7.3+HBase1.2.5+ZooKeeper3.4.6搭建分布式集群环境 一.环境说明 个人理解: zookeeper可以独立搭建集群,hbase本身不能独立搭建集群需要和hado ...

  3. 搭建hbase-0.94.26集群环境

    先安装hadoop1.2.1,见http://blog.csdn.net/jediael_lu/article/details/38926477 1.配置hbase-site.xml <prop ...

  4. centos7 zookeeper3.5.6单机伪集群部署

    接上篇文章centos7 zookeeper单点部署准备好zookeeper包,进行集群部署 单机伪集群部署 zookeeper1 zookeeper2 zookeeper3 三个目录分别部署一个服务 ...

  5. 安装hadoop1.2集群环境

    一.条件 安装好CentOS的虚拟机4抬,已安装JDK,且网络设置正常 四台虚拟机IP分别为(hosts文件) vi /etc/hosts 192.168.100.10 Node10 192.168. ...

  6. 安装hadoop1.2.1集群环境

    一.规划 (一)硬件资源 10.171.29.191 master 10.173.54.84  slave1 10.171.114.223 slave2 (二)基本资料 用户:  jediael 目录 ...

  7. Zookeeper3.5.7集群搭建

    Zookeeper集群搭建 文章目录 Zookeeper集群搭建 一.上传Zookeeper 二.解压Zookeeper 三.进入Zookeeper中创建一个zkData文件夹 四.进入conf中,将 ...

  8. hadoop-1.2.0集群安装与配置

    http://bbs.itcast.cn/thread-17487-1-1.html .硬件环境1.windows7旗舰版64位 2.VMwareWorkstationACE版6.0.2 3.Redh ...

  9. hadoop-2.7.1+zookeeper-3.4.8+hbase-1.2.1+apache-hive-2.0.0完全分布式集群

    一.环境准备 1.查看系统版本 cat /etc/issue CentOS release 6.8 (Final) 2.软件准备 软件自行官网下载,但自己要统一规划方便后面操作,本文软件源目录/usr ...

最新文章

  1. 如何在Window下安装node\npm\cnpm,并安装vue.js,创建项目
  2. Genymotion 解决虚拟镜像下载速度特别慢的问题
  3. COJ 1170 A Simple Problem
  4. Tensorflow yolov3 Intel Realsense D435 识别时间测试
  5. 【MFC】Windows样式
  6. 3行Python代码采集B站(弹幕、评论、用户)数据
  7. 05-Prohibited package name: java异常原因
  8. 【干货】如何判断 Sql 注入点
  9. Git报错解决:OpenSSL SSL_read: Connection was reset, errno 10054 错误解决
  10. 计算机专业建设会议纪要,本学期第六次专业建设工作会议纪要
  11. 单片机MCU OTA升级技术
  12. 写好的python如何在其它电脑上运行_写人作文-写人作文300字-400字-500字
  13. 推荐一款自带很好用的桌面便签
  14. C# GDI 手绘图片转化为电子版处理
  15. Android 天气APP(九)细节优化、必应每日一图
  16. 大商创是用哪种php柜架写的,大商创X二次开发基本规范与流程
  17. 最新研究:朝九晚五可能会让你的身心受到巨大伤害!
  18. mysql 二级什么意思_MySQL二级等级考试归纳——概念篇
  19. Windows机制下的游戏编程实例一
  20. iOS开发--一些开源的学习资源

热门文章

  1. Bugku:杂项 爆照(08067CTF)
  2. Git学习总结(3)
  3. 虚拟偶像 “造星” 指南,二次元、超写实、智能驱动,你会粉上谁?
  4. CTFlearn-Modern Gaius Julius Caesar
  5. tor 安装及使用教程
  6. 最长无重复子数组算法-java实现
  7. 二叉树中序遍历的非递归算法
  8. 2016-12-28 迪米特法则+依赖倒转原则+里氏替换原则
  9. 实现求出100~200之间的全部素数,每行输出8个数,每个数宽度为5列。 输入格式:无 输出格式:“%5d“ “\n“
  10. Android 全面屏处理(适配挖孔屏、刘海屏) kotlin