集群中包括4个节点:2个Master(主备),2个Salve,节点之间局域网连接,可以相互ping通
集群中包括4个节点:2个Master(主备),2个Salve,节点之间局域网连接,可以相互ping通。节点IP地址分布如下:
Hadoop HA集群:
IP地址 |
hostname |
role |
10.12.0.240 |
master |
ActiveNameNode |
10.12.0.243 |
standyMaster |
StandByNameNode |
10.12.0.241 |
slave1 |
DataNode1 |
10.12.0.242 |
slave2 |
DataNode2 |
[wangshumin@CentOSNode1 sbin]$ jps
21153 NameNode
20950 JournalNode
22454 Jps
17370 Master
[wangshumin@CentOSNode1 sbin]$ kill -9 21153
[wangshumin@CentOSNode1 sbin]$ jps
22464 Jps
20950 JournalNode
17370 Master
[wangshumin@CentOSNode1 sbin]$ start-dfs.sh
Starting namenodes on [CentOSNode1 CentOSNode2]
CentOSNode2: namenode running as process 18046. Stop it first.
CentOSNode1: starting namenode, logging to /home/wangshumin/hadoop-2.6.5/logs/hadoop-wangshumin-namenode-CentOSNode1.out
CentOSNode3: starting datanode, logging to /home/wangshumin/hadoop-2.6.5/logs/hadoop-wangshumin-datanode-CentOSNode3.out
Starting journal nodes [CentOSNode1 CentOSNode2 CentOSNode3]
CentOSNode1: journalnode running as process 20950. Stop it first.
CentOSNode2: journalnode running as process 17877. Stop it first.
CentOSNode3: journalnode running as process 56229. Stop it first.
Starting ZK Failover Controllers on NN hosts [CentOSNode1 CentOSNode2]
CentOSNode2: starting zkfc, logging to /home/wangshumin/hadoop-2.6.5/logs/hadoop-wangshumin-zkfc-CentOSNode2.out
CentOSNode1: starting zkfc, logging to /home/wangshumin/hadoop-2.6.5/logs/hadoop-wangshumin-zkfc-CentOSNode1.out
[wangshumin@CentOSNode1 sbin]$ jps
23074 Jps
20950 JournalNode
17370 Master
23002 DFSZKFailoverController
22587 NameNode
[wangshumin@CentOSNode1 sbin]$ jps
20950 JournalNode
17370 Master
23002 DFSZKFailoverController
22587 NameNode
23132 Jps
[wangshumin@CentOSNode1 sbin]$ start-dfs.sh
Starting namenodes on [CentOSNode1 CentOSNode2]
CentOSNode1: namenode running as process 22587. Stop it first.
CentOSNode2: namenode running as process 18046. Stop it first.
CentOSNode3: datanode running as process 58116. Stop it first.
Starting journal nodes [CentOSNode1 CentOSNode2 CentOSNode3]
CentOSNode1: journalnode running as process 20950. Stop it first.
CentOSNode3: journalnode running as process 56229. Stop it first.
CentOSNode2: journalnode running as process 17877. Stop it first.
Starting ZK Failover Controllers on NN hosts [CentOSNode1 CentOSNode2]
CentOSNode1: zkfc running as process 23002. Stop it first.
CentOSNode2: zkfc running as process 18838. Stop it first.
[wangshumin@CentOSNode1 sbin]$ ll
总用量 120
-rwxr-xr-x. 1 wangshumin wangshumin 2752 10月 3 2016 distribute-exclude.sh
-rwxr-xr-x. 1 wangshumin wangshumin 6452 10月 3 2016 hadoop-daemon.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1360 10月 3 2016 hadoop-daemons.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1640 10月 3 2016 hdfs-config.cmd
-rwxr-xr-x. 1 wangshumin wangshumin 1427 10月 3 2016 hdfs-config.sh
-rwxr-xr-x. 1 wangshumin wangshumin 2291 10月 3 2016 httpfs.sh
-rwxr-xr-x. 1 wangshumin wangshumin 2059 10月 3 2016 kms.sh
-rwxr-xr-x. 1 wangshumin wangshumin 4080 10月 3 2016 mr-jobhistory-daemon.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1648 10月 3 2016 refresh-namenodes.sh
-rwxr-xr-x. 1 wangshumin wangshumin 2145 10月 3 2016 slaves.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1779 10月 3 2016 start-all.cmd
-rwxr-xr-x. 1 wangshumin wangshumin 1471 10月 3 2016 start-all.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1128 10月 3 2016 start-balancer.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1401 10月 3 2016 start-dfs.cmd
-rwxr-xr-x. 1 wangshumin wangshumin 3705 10月 3 2016 start-dfs.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1357 10月 3 2016 start-secure-dns.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1571 10月 3 2016 start-yarn.cmd
-rwxr-xr-x. 1 wangshumin wangshumin 1347 10月 3 2016 start-yarn.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1770 10月 3 2016 stop-all.cmd
-rwxr-xr-x. 1 wangshumin wangshumin 1462 10月 3 2016 stop-all.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1179 10月 3 2016 stop-balancer.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1455 10月 3 2016 stop-dfs.cmd
-rwxr-xr-x. 1 wangshumin wangshumin 3206 10月 3 2016 stop-dfs.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1340 10月 3 2016 stop-secure-dns.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1642 10月 3 2016 stop-yarn.cmd
-rwxr-xr-x. 1 wangshumin wangshumin 1340 10月 3 2016 stop-yarn.sh
-rwxr-xr-x. 1 wangshumin wangshumin 4295 10月 3 2016 yarn-daemon.sh
-rwxr-xr-x. 1 wangshumin wangshumin 1353 10月 3 2016 yarn-daemons.sh
[wangshumin@CentOSNode1 sbin]$ start-yarn.sh
starting yarn daemons
starting resourcemanager, logging to /home/wangshumin/hadoop-2.6.5/logs/yarn-wangshumin-resourcemanager-CentOSNode1.out
CentOSNode3: starting nodemanager, logging to /home/wangshumin/hadoop-2.6.5/logs/yarn-wangshumin-nodemanager-CentOSNode3.out
[wangshumin@CentOSNode1 sbin]$ jps
20950 JournalNode
23544 ResourceManager
23801 Jps
17370 Master
23002 DFSZKFailoverController
22587 NameNode
[wangshumin@CentOSNode1 sbin]$ s
集群中包括4个节点:2个Master(主备),2个Salve,节点之间局域网连接,可以相互ping通相关推荐
- Tomcat5集群中的SESSION复制详解
Tomcat 5服务器为集群和SESSION复制提供了集成的支持.本系列的第一篇文章将为大家提供SESSION持久性以及TOMCAT集群中SESSION复制的 内在工作机制一个概要认识.我将会讨论SE ...
- docker swarm英文文档学习-8-在集群中部署服务
Deploy services to a swarm在集群中部署服务 集群服务使用声明式模型,这意味着你需要定义服务的所需状态,并依赖Docker来维护该状态.该状态包括以下信息(但不限于): 应该运 ...
- 高可用集群中的选举机制
2019独角兽企业重金招聘Python工程师标准>>> 一个高可用的集群里,一般都会存在主节点的选举机制.这里以elasticsearch集群为例,介绍一下集群的节点选举方法. 如果 ...
- Apache ZooKeeper - 集群中 Observer 的作用以及 与 Follow 的区别
文章目录 Pre Observer 介绍 源码解析 INFORM 消息 Observer 处理链 小结 Pre 在 ZooKeeper 集群服务运行的过程中,Follow 服务器主要负责处理来自客户端 ...
- oracle rac ocr文件,管理oracle集群中的ocr文件
OCR 文件及位置 ocrconfig 工具是Oracle 集群注册表的主要配置工具.可以使用此工具执行以下操作: 使用–export 选项生成OCR 的逻辑备份,并在以后使用–import 选项从这 ...
- OpenShift 4 之让Route只运行在集群中Infra节点
很多OpenShift的用户都非常喜欢其自带的Route功能,Route为外部用户提供了访问Pod的负载均衡功能,它要比Kubernetes缺省提供的Ingress功能强大很多.有关介绍可参见< ...
- skynet给集群中的一个节点配置多个通道
在skynet框架中使用cluster模式,经常有消息在节点之间传递.大部分情况,我们在节点A和节点B之间只需要建立一个连接通道,但是在有些时候我们希望让一些比较独立的业务能占用一条单独的通道进行处理 ...
- Elasticsearch 集群中增加专用master节点
Elasticsearch 集群中增加专用master节点 文章目录 Elasticsearch 集群中增加专用master节点 1.增加master节点 2.排除原来的节点的选举权 3.data节点 ...
- 学习MongoDB(三) Add an Arbiter to Replica Set 集群中加入仲裁节点
Add an Arbiter to Replica Set 在集群中加入仲裁节点,当集群中主节点挂掉后负责选出新的主节点,仲裁节点也是一个mongo实力,但是它不存储数据. 1.仲裁节点消耗很小的资源 ...
- 在多节点集群中运行Cassandra
这篇文章收集了我在多节点中设置Apache Cassandra集群的步骤. 在设置集群时,我已经参考了Cassandra Wiki和Datastax文档. 详细介绍了以下过程,分享了我建立群集的经验. ...
最新文章
- 机器学习算法优缺点对比及选择(汇总篇)
- python简单操作题_Python简单练习题可以一起做做
- Linux 查找redis进程命令:ps -ef | grep redis
- Luogu2439 [SDOI2005]阶梯教室设备利用 (动态规划)
- Alpha冲刺随笔—:第一天
- 优秀logo设计解析_日本的logo设计为什么那么优秀?
- 寄存器之通用寄存器(一)
- MySQL数据库开发的三十六条军规
- 几种常见的7号电池的容量
- pytorch-tenor-细节
- 11、C++各大有名库的介绍——综合
- 椭圆曲线算法和国密SM2算法介绍
- 云服务器忘记密码怎么设置?云服务器BCC实例重置密码方法【附视频】
- 2021最新Spring Security知识梳理
- 高性能Web应用程序–数据URI
- android4.4 获取符合默认短信应用要求的短信应用包名(改进篇)
- linux查看所有文件
- solidworks报错合集
- Neutron服务组件
- 2020中科大计算机分数线,2020年中国科学技术大学强基计划入围分数线,录取分数线,中国科大强基计划笔试、面试...
热门文章
- LoRaWan 硬件和信道特点 TDMA的MAC协议优势
- 匹配 网络 Q值 带宽
- linux中Oops信息的调试及栈回溯—Linux人都知道,这是好东西!
- 水溶性CdTe/CdSe/ZnS量子点荧光波长620nm-820nm
- ssh-keygen的使用方法
- 3dmax和python做3d动画_3D动画和影视建模,用什么软件或者多个什么软件结合做比较好?...
- 保险精算--第8周作业
- 一篇文章“简单”认识《生成对抗网络》(GAN)
- 用 dfuse 交易预测执行工具优先赢得 Gas 竞价
- mysql 分离和附加数据库_分离数据库和附加数据库有什么区别