Secondary NameNode:

  • HDFS单NameNode节点的情况下(即非高可用HA),Secondary NameNode负责每隔一段时间将旧的fsimage文件和edits log文件merge成新的fsimage并替换,即为NameNode 合并编辑日志edits log,减少 NameNode 启动时间;
  • 非实时merge,一旦NameNode挂了,可能会导致元数据丢失;

Standby NameNde:

  • HDFS主从架构情况下(即高可用HA,生产环境都是用HA的),Active NameNode和Standby NameNode,后者会实时同步前者的fsimage,并将merge后的新fsimage文件替换前者中旧的fsimage文件;
  • 实时merge,一旦前者挂了,后者能够马上顶上,不会出现元数据丢失;

即非HA时,有Secondary NameNode;HA时,有Standby NameNode。

Secondary NameNode和Standby NameNde的区别相关推荐

  1. Secondary NameNode:它究竟有什么作用?(转自:http://blog.csdn.net/xh16319/article/details/31375197)

    前言 最近刚接触Hadoop, 一直没有弄明白NameNode和Secondary NameNode的区别和关系.很多人都认为,Secondary NameNode是NameNode的备份,是为了防止 ...

  2. Secondary Namenode的Check point机制以及Namenode、Datanode工作机制说明

    目录 前言: 1.NameNode的工作机制 2.DataNode的工作机制 3.Secondary Namenode的Check point机制 目录 前言: 在说明checkpoint机制之前,先 ...

  3. 模拟namenode挂掉利用secondary namenode恢复

    测试机器: 10.0.50.144  master  (namenode,datanode) 10.0.50.145  node1    (datanode) 10.0.50.146  node2   ...

  4. 简明扼要的HDFS元数据管理机制描述(NameNode和Secondary NameNode工作机制)

    目录 一.思考: NameNode中的元数据是存储在哪里? 二.NameNode和Secondary NameNode工作机制 三.Fsimage和Edits概念 一.思考: NameNode中的元数 ...

  5. Hadoop——使用secondary namenode数据恢复namenode

    secondary namenode会定期将fsimage和edits从namenode上拉取进行合并,且在在secondary nemenode上有副本,当namenode节点损坏后,我们可以通过这 ...

  6. Hadoop中的Namenode、Datanode和Secondary Namenode

    1.namenode Namenode 管理着文件系统的Namespace.它维护着文件系统树(filesystem tree)以及文件树中所有的文件和文件夹的元数据(metadata),比如命名空间 ...

  7. 大数据之-Hadoop之HDFS_NameNode和Secondary NameNode工作机制_通过文件的增删改查说明---大数据之hadoop工作笔记0070

    然后我们再来说一下,hadoop的集群中的namenode节点的工作原理. 1.我们先来大体的了解一下,如果有客户端要来上传文件,这个过程,会先访问namenode,给namenode节点发送请求 2 ...

  8. Hadoop运维工程师专家之路--第二章Hadoop架构简介

    第二章Hadoop架构简介 本章包括 l  Hadoop架构 l  分布式集群 l  HDFS架构 l  YARN架构 本章介绍Hadoop架构.在你学习管理Hadoop集群之前,有必要先了解下Had ...

  9. Hadoop系列 (三):HDFS详细介绍

    文章目录 Hadoop系列文章 HDFS简介 HDFS基本概念 分布式文件系统特点 HDFS设计目标 HDFS架构 HDFS应用场景 HDFS三大组件 NameNode SecondaryNameNo ...

最新文章

  1. Redis 分布式锁如何自动续期
  2. pytest框架安装(MacOS)
  3. Exchange2007中创建收件人对象、通讯组和地址列表和客户端访问
  4. 微擎pc 导入前缀_段覆盖前缀| 8086微处理器
  5. git repo使用心得
  6. 计算机应用与软件修审,国中课室素养导向标准本位评量的设计与应用:以英语科阅读为例...
  7. Tachyon:Spark生态系统中的分布式内存文件系统的使用
  8. 喜马拉雅下载文件名批量修改
  9. 做好ASO优化方案,步骤。
  10. 求95859回文数c语言程序,csdn 回文数
  11. hr 标签可选的属性(续) 和 img 标签介绍
  12. activemq启动错误:ERROR | Temporary Store limit is 51200 mb, whilst the temporary data directory
  13. 中易浏览器(enjoyie) v3.0.1.15 完整绿色版 免费
  14. 2012年腾讯实习生笔试附加题
  15. 解决 Virtualbox 6.1.34 出现 End kernel panic - not syncing: attempted to kill the idle task
  16. 新型肺炎疫情导致华为手机遭受重大挫折,排名滑落两名
  17. (18) 基于时空多图卷积网络的网约车需求预测
  18. 普通的程序员每天都做什么,资深程序员带你了解行业内幕
  19. 计算机对商务英语的不利之处,商务英语教学中计算机网络利弊分析论文.docx
  20. vasp结构优化英语_活动 | 英语学院举办研究生招生线上宣讲会

热门文章

  1. 更换故障POE交换机
  2. 【AIOps下的探索与实践】神州灵云和Rancher共同举办Container Open Talk 沙龙活动
  3. Codeforces Round #429 (Div. 2):B. Godsend
  4. elasticsearch配置x-pack和SSL安全认证常见问题
  5. python批量新建文件夹_Python3 批量创建文件夹
  6. 数学之美:牛顿-拉夫逊迭代法原理及其实现
  7. Pyecharts中Map和Geo的使用笔记
  8. Linux - 安全 - 账户管理
  9. redis配置文件 谷歌翻译版本
  10. 第十四届中国大学生服务外包创新创业大赛百度赛道-智慧医疗赛题baselin