CDH页面配置HA（高可用）

2024-06-16 05:12:07

CDH页面配置HA（高可用）

集群的配置简单介绍：

(1) NameNode机器：运行 Active NameNode和 Standby NameNode 的机器配置应保持一样。
(2) 当 Active 状态的 NameNode 宕机后，需要手动切换Standby 状态的 NameNode 来继提供服务。如果要实现自动故障转移，必须依赖 ZooKeeper。
(3) JournalNode 机器：这些守护进程比较轻量级，可以部署在其他服务器上。至少需要部署 3个JoumalNode 节点，便容忍一个节点故障。通常配置成奇数。
(4) 配置NameNode HA后，客户端可以通过HA的逻辑名称去访问数据，而不用指定某一台NameNode，当某一台 NameNode 失效自动切换后，客户端不必更改 HDFS的连接地址，仍通过逻辑名称去访问。
需要注意的是， Standby NameNode 同时完成了原来 SecondaryNameNode checkpoint （检查点）功能，因此不需要再独立部署 SecondaryNameNode。

二、HDFS HA

1.进入HDFS -> 操作 -> 启用High Availability。

点击HDFS的操作按钮，启用HDFS的高可用

自定义HDFS集群的名称

选择NameNode节点

.添加JournalNode的主机

指定journalNode数据的存储目录

启用 HDFS的高可用模式

高可用启用完成

查看HDFS的WebUI

访问NameNode的WebUI

【注】禁用HDFS的HA模式

2.Hive 设置

三、YARN HA
方式一：可以跟HDFS一样添加HA，

方式二：如果HDFS已经启用HA，那更简单，添加一个ResourceManager，重启即可，CDH会自动部署高可用。

重启

四、Hive HA
同YARN。添加MataStore Server和HiveServer2，重启自动部署。

重启hive

整体来说在，页面配置还是很方便简单的，
每配置一个HA ，最好也需要测试一下
也在后端检查一下配置，OK了

CDH页面配置HA（高可用）相关推荐

greenplum配置高可用_0665-6.2.0-如何在CDH中配置HMS高可用
作者:朱超杰 1.文档编写目的 Metastore HA解决方案被设计用来处理metastore服务故障.当一个部署的metastore宕机时,metastore服务可能持续相当长的时间不可用,直到服 ...
HA 高可用之V1版
HA(High Available), 高可用性群集,是保证业务连续性的有效解决方案,一般有两个或两个以上的节点,且分为活动节点及备用节点.通常把正在执行业务的称为活动节点,而作为活动节点的一个备份的 ...
MyCat双机HA高可用集群搭建_HAProxy安装和配置---MyCat分布式数据库集群架构工作笔记0028
技术交流QQ群[JAVA,C++,Python,.NET,BigData,AI]:170933152 前面我们说了mycat部署HA高可用的架构,这里我们来实现它首先我们去装HAProxy 下载了H ...
Kubeadm 1.9 HA 高可用集群本地离线镜像部署【已验证】
k8s介绍 k8s 发展速度很快,目前很多大的公司容器集群都基于该项目,如京东,腾讯,滴滴,瓜子二手车,易宝支付,北森等等. kubernetes1.9版本发布2017年12月15日,每三个月一个迭代 ...
[K8s 1.9实践]Kubeadm 1.9 HA 高可用集群本地离线镜像部署
Kubeadm HA 1.9 高可用集群本地离线部署 k8s介绍 k8s 发展速度很快,目前很多大的公司容器集群都基于该项目,如京东,腾讯,滴滴,瓜子二手车,易宝支付,北森等等. kubernet ...
Centos7.6+Hadoop 3.1.2(HA)+Zookeeper3.4.13+Hbase1.4.9(HA)+Hive2.3.4+Spark2.4.0(HA)高可用集群搭建
本文转自https://mshk.top/2019/03/centos-hadoop-zookeeper-hbase-hive-spark-high-availability/,因为原链接打不开,故在 ...
Hadoop 3.1.2(HA)+Zookeeper3.4.13+Hbase1.4.9(HA)+Hive2.3.4+Spark2.4.0(HA)高可用集群搭建
目录目录 1.前言 1.1.什么是 Hadoop? 1.1.1.什么是 YARN? 1.2.什么是 Zookeeper? 1.3.什么是 Hbase? 1.4.什么是 Hive 1.5.什么是 Sp ...
来了，Zabbix 6.0原生HA高可用抢先体验
马嘉炜 | Zabbix开源社区签约专家 SRE运维工程师,六年Zabbix监控系统使用经验.在Zabbix架构设计及性能优化领域有丰富的经验,擅长监控模板制作及Zabbix API的二次开发. 官方 ...
主机 HA 高可用知识梳理和经验分享
目录 1.什么是主机高可用 2.主机高可用主流解决方案 3.主机HA能做什么 4.主机HA高可用定义和切换流程 5.HA三种经典工作方式 6.主机HA的核心组件和实现原理 7.哪些场景不适合主机HA ...

最新文章

热门文章