Hadoop HA在停掉active namenode后无法自动切换到standby namenode

问题：停掉active namenode后无法自动切换到standby namenode，但是手动重启停掉的active namenode后，standby namenode就变成active了。

如题，设置了两个NameNode，启动时一个active，一个standby。
当在active namenode上运行如下命令停掉active namenode：

hadoop-daemon.sh stop namenode

active namenode是停掉了，但是standby namenode没有自动切换成active，
但是当使用如下命令重新启动刚刚停掉的namenode，这时standby namenode就变成active了。

hadoop-daemon.sh start namenode

通过查看日志发现报错：
## Caused by: java.net.ConnectException: Connection refused
## Caused by: java.io.FileNotFoundException: /root/.ssh/id_dsa (No such file or directory)
报错的文件路径为dfs.ha.fencing.ssh.private-key-files的值。

通过网上查阅得知，hdfs-site.xml通过参数dfs.ha.fencing.methods来实现，出现故障时通过哪种方式登录到另一个namenode上进行接管工作，这意味着dfs.ha.fencing.ssh.private-key-files参数用来指定存放ssh免密登录到另一个节点的私钥的路径。
而/root/.ssh/id_dsa路径是从别人的配置拷过来的，修改成本机存放私钥的文件就行

修改完后，重启集群，停掉active namenode后standby namenode自动切换成active了。
.
.
.
.
.
知识：
Hadoop公共库中对外提供了两种fenching实现，分别是sshfence和shellfence（缺省实现），其中sshfence是指通过ssh登陆目标Master节点上，使用命令fuser将进程杀死（通过tcp端口号定位进程pid，该方法比jps命令更准确），shellfence是指执行一个用户事先定义的shell命令（脚本）完成隔离。
hdfs-site.xml通过参数dfs.ha.fencing.methods来实现出现故障时通过哪种方式登录到另一个namenode上进行接管工作，这意味着dfs.ha.fencing.ssh.private-key-files参数用来指定存放ssh免密登录到另一个节点的私钥的路径。

本文为个人记录所用，如有侵权/错误，恳请指出 (╹▽╹)…

Hadoop HA在停掉active namenode后无法自动切换到standby namenode相关推荐

西门子触摸屏上电显示初始画面几秒后，自动切换到下一个画面的具体方法
西门子触摸屏上电显示初始画面几秒后,自动切换到下一个画面的具体方法例如:在启动画面停留10秒后,切换到其他画面. 具体实现方法可参考以下内容: 如下图所示,新建一个项目,在画面中添加2个画面, 如下 ...
HADOOP HA之NameNode HA集群配置与应用
目录前言一.HADOOP HA之NameNode HA集群配置 1.修改hadoop-env.sh 2.修改core-site.xml 3.修改hdfs-site.xml 4.修改workers ...
Hadoop HA namenode宕机环境恢复
描述 Ambari管理的Hadoop生产集群开启了HA,在运行期间,namenode1(nn1)为活跃(active)namenode,namenode2(nn2)为备用(standby)nameno ...
Hadoop HA 双namenode搭建
机器分布 hadoop1 192.168.56121 hadoop2 192.168.56122 hadoop3 192.168.56123 准备安装包 jdk-7u71-linux-x64.tar. ...
hadoop HA 之 QJM
前言本文主要通过对hadoop2.2.0集群配置的过程加以梳理,所有的步骤都是通过自己实际测试.文档的结构也是根据自己的实际情况而定,同时也会加入自己在实际过程遇到的问题.搭建环境过程不重要,重要点 ...
Hadoop Ha集群配置
为什么要配置HDFS HA? 首先:HDFS集群中NameNode 如果存在单点故障.对于只有一个NameNode的集群,如果NameNode机器出现意外情况,将导致整个集群无法使用. 而影响HD ...
Hadoop Ha (High avilable)配置
为什么要配置HDFS HA? 首先:HDFS集群中NameNode 如果存在单点故障.对于只有一个NameNode的集群,如果NameNode机器出现意外情况,将导致整个集群无法使用. 而影响HDFS ...
Hadoop HA
Hadoop HA 是什么? hadoop2.x版本中可以有多个namenode结点,一个是活跃(active)状态,一个是准备(standby)状态. HDFS HA背景 HDFS集群中NameN ...
（超详细）基于Zookeeper的Hadoop HA集群的搭建
基于Zookeeper的Hadoop HA集群的搭建 JunLeon--go big or go home 前言: 高可用(high availability,HA)指的是若当前工作中的机器宕机了,系 ...

Hadoop HA在停掉active namenode后无法自动切换到standby namenode

问题：停掉active namenode后无法自动切换到standby namenode，但是手动重启停掉的active namenode后，standby namenode就变成active了。

Hadoop HA在停掉active namenode后无法自动切换到standby namenode相关推荐

最新文章

热门文章