zookeeper入门综合概要介绍

~ zookeeper

原理
- zookeeper是一个具有高可用性的高性能协调服务
- 模型
  - zookeeper维护着一个具有高可用性的树形层次结构
  - 树节点被称为znode
    - znode可以存储数据
      - ACL
        
        决定谁可以对它执行何种操作
      - 数据访问具有原子性
        要么读到所有数据要么读取失败
    - znode通过路径被引用
      - 必须是绝对路径，不支持路径解析
      - 由Unicode字符串构成
      - zookeeper是保留词
        /zookeeper树用来保存管理信息
    - 类型
      - 短暂znode
        
        会话结束后被删除
        
        不可以有子节点
      - 持久znode
    - 顺序号
      - 递增
      - 用于全局排序
    - 观察
      - znode发生某些变化时，观察机制可以让客户端得到通知。
- 操作
  - create
  - delete
  - exists
  - getACL,setACL
  - getChildren
  - getData,setData
  - sync
- 实现
  - standalone
  - replicated mode
    - 复制模式
      - 整个集群被称为集合体
        
        通常包含奇数台机器
      - 确保对znode树的每一个修改都会被复制到集合体中超过半数的机器上。
    - Zab协议
      - 领导选举
        
        所有机器通过选择过程选出一台leader领导者
        
        其他机器被称为跟随者follower
        
        如果领导者出现故障，其余机器会选出另外的领导者，并与之一起继续提供服务。
        原领导者故障恢复后会成为一个跟随者。
        
        半数以上（或指定数量）的跟随者已经将状态与领导者同步，则表明这个阶段完成
      - 原子广播
        所有的写请求都会被转发给领导者，再由领导者将更新广播给跟随者。
        
        半数以上的跟随者将更新持久化后，领导者才会提交这个更新，然后客户端才会收到一个更新成功的响应。
- 一致性
  - 每个对znode树的更新都被赋予一个全局唯一的ID,称为zxid
    - 决定了分布式系统的执行顺序
  - 顺序一致性
    - 更新会按其发送顺序被提交。
  - 原子性
  - 第一系统映像
  - 持久性
  - 及时性
- 会话
  - 会话超时
    - 滴答tick time
    - 服务器越多，会话超时应该设置的越大，连接超时反而越小。
  - 有唯一的ID和密码
- 状态
  - connecting
  - connected
  - closed
- 客户端
  - 客户端连接
    - bin/zkCli.sh -server 127.0.0.1:2181
  - 客户端命令
    - ls /
    - ls2
    - get /
安装
- 单机
  - conf/zoo.cfg
    - tickTime=2000 dataDir=/var/lib/zookeeper clientPort=2181
  - bin/zkServer.sh start
  - 连接zookeeper
    - bin/zkCli.sh -server 127.0.0.1:2181
- 集群（复制模式）
  - zoo.cfg
    - clientPort=2181
    - dataDir=/home/myhadoop/zk/data
    - server.10=master.hadoop:2888:3888
    - server.11=slave1.hadoop:2888:3888
    - server.12=slave2.hadoop:2888:3888
  - 每台机器分别设置data/myid为其在zoo.cfg下定义的id
    - data
      - myid
        
        10
  - 分别启动
    - bin/skServer.sh start
  - 查看状态
    - bin/zkServer.sh status

zookeeper入门综合概要介绍相关推荐

redis入门综合概要介绍
redis入门综合概要介绍概要介绍:个人感觉redis是一个将数据保存在内存的存取工具,类似一个增强的Map,所以存取比较快.数据的存取基本上是set(key,value),get(key)这种ke ...
kafka入门综合概要介绍
~ kafka 设计初衷为统一信息收集平台分布式收集,统一处理可以实时处理反馈信息支持大数据高容错分布式.分区的.多副本的.多订阅者的日志系统(分布式MQ系统) 消息的发布(publish) ...
hbase入门综合概要介绍
Hbase 是什么 HDFS上开发的面向列的分布式数据库依赖于zookeeper 数据模型表模式表的属性 disable离线 enable在线列族的列表行行键字节数组行根据行的键值进 ...
【Zookeeper实战】Zookeeper入门到实战看这篇就够了
1. 前言在上一篇[Zookeeper入门]相关概念总结中已经完美的讲解了 Zookeeper入门相关概念总结,接下来讲讲ZooKeeper 实战使用. 这篇文章简单给演示一下 ZooKeepe ...
各种编程语言功能综合简要介绍（C,C++,JAVA,PHP,PYTHON,易语言）
各种编程语言功能综合简要介绍(C,C++,JAVA,PHP,PYTHON,易语言) 总结 a.一个语言或者一个东西能火是和这种语言进入某一子行业的契机有关.也就是说这个语言有没有解决社会急需的问题. ...
Html快速入门之基本介绍
Html快速入门之基本介绍 1. Html快速入门之基本介绍 1.1 网页组成 1.2 浏览器内核 1.3 Web标准 1.4 Html概念 1.5 超文本的含义 1.6 Html骨架标签 1.7 H ...
尚硅谷大数据技术Zookeeper教程-笔记01【Zookeeper(入门、本地安装、集群操作)】
视频地址:[尚硅谷]大数据技术之Zookeeper 3.5.7版本教程_哔哩哔哩_bilibili 尚硅谷大数据技术Zookeeper教程-笔记01[Zookeeper(入门.本地安装.集群操作)] ...
c++服务器开发之一概要介绍
c++服务器开发之一概要介绍背景指的是普通的c++服务器开发,不涉及特定的需求,仅涉及需要实现大众功能的系统. 假设读者对c++的基础概念都有所了解. 目前很多这类的培训课程,但是没什么书系统 ...
NLP汉语自然语言处理入门基础知识介绍
NLP汉语自然语言处理入门基础知识介绍自然语言处理定义: 自然语言处理是一门计算机科学.人工智能以及语言学的交叉学科.虽然语言只是人工智能的一部分(人工智能还包括计算机视觉等),但它是非常独特的一部 ...

zookeeper入门综合概要介绍

zookeeper入门综合概要介绍相关推荐

最新文章

热门文章