什么是Zookeeper?

2020-03-25 16:24发布

4条回答
竹林风
1楼 · 2020-03-25 16:47.采纳回答

ZooKeeper由雅虎研究院开发,是Google Chubby的开源实现,后来托管到Apache,于2010年11月正式成为Apache的顶级项目。

ZooKeeper是一个经典的分布式数据一致性解决方案,致力于为分布式应用提供一个高性能、高可用,且具有严格顺序访问控制能力的分布式协调服务。

分布式应用程序可以基于ZooKeeper实现数据发布与订阅、负载均衡、命名服务、分布式协调与通知、集群管理、Leader选举、分布式锁、分布式队列等功能。


那些年很冒险的梦。
2楼 · 2020-03-25 16:51
  • ZooKeeper主要服务于分布式系统,可以用ZooKeeper来做:统一配置管理、统一命名服务、分布式锁、集群管理。

  • 使用分布式系统就无法避免对节点管理的问题(需要实时感知节点的状态、对节点进行统一管理等等),而由于这些问题处理起来可能相对麻烦和提高了系统的复杂性,ZooKeeper作为一个能够通用解决这些问题的中间件就应运而生了。


我的网名不再改
3楼 · 2021-01-15 17:20

分布式协调服务

zookeeper的数据结构

类似于文件目录

这里面的每一个方框被认为是一个节点znode。 

znode里面有啥东西

data:数据信息

ACL:什么ip可以访问此znode

children:下面节点的引用

stat: znode的版本号,时间戳,等。

znodeApi操作以及watch机制

getData():查询节点数据

exists():判断节点是否存在

getChildren():获取子节点信息

setData():设置数据

create():创建节点

delete():删除节点

在特定的节点设置watch为true,当这个节点的数据有变化的时候异步通知watch这个节点的客户端。

zookeeper数据一致性

zk作为分布式协调服务,当自身宕机了怎么办?所以维护了一个zk集群。

但是怎么保证主从服务器之间数据一致呢?以及节点数据恢复呢?这就用到了ZAB协议。zookeeper atomic  broadcast 

ZAB协议

三个节点状态

Looking 

Leading

Following

ZAB崩溃恢复

master宕机了怎么办?

master选举

投票时带着自己服务器id和最新事务id(ZXID)

节点1首先给自己投一票,节点11票,节点2首先给自己投一票,然后给节点1投一票带上自己的机器id和最新事务id(2 32)此时节点2的事务id大于节点1的事务id(20)重新发起投票节点1给节点2投一票,此时节点2有2票半数以上结束选举。节点2为leader 。

ZAB主从数据同步

broadcast

客户端首先发送写入数据给任意的follow节点

follow节点传播给leader节点

leader节点二阶段提交,发送propose给follow节点

follow节点接受,写入数据,成功后返回ack消息给leader节点

leader节点接收到半数的ack,广播commit请求给follow节点,最后返回结果给客户端。

zookeeper的应用

分布式锁

利用了Znode临时顺序节点的特点

client1试图获取锁,首先 新建一个parentLock,在下面新建一个Lock1,此时查询Lock1是最靠前的节点所以client1获取锁。

此时Client1 已经获得锁了,Client2也想获取锁,首先建立一个Lock2,此时查看Lock2前面还有Lock1节点所以无法获取锁,

client2抢锁失败向排序仅比它考前的节点Lock1注册Watcher,用于监听Lock1是否存在

当任务完成,客户端显示释放锁或者故障中断因为是临时节点此时也会中断与客户端的联系

此时Client1释放锁,lock1切断与客户端的联系,由于Client2在lock1注册了Watcher,所以会收到通知,此时client2查询parentlock下面的所有节点确认自己的节点lock2是目前最小的节点,lock2就获取到了锁。

服务的注册与发现

Znode和Watcher机制,最著名的是阿里的Dubbo框架

我的理解是:服务注册时相当于注册一个znode,里面有四部分相关数据,发现有在对应的服务商注册的watcher。dubbo框架用zookeeper作为服务的注册和发现就是利用了znode和watcher机制。


IT学习助手 - qq:2676427015
4楼 · 2022-03-26 10:34

1、ZooKeeper主要服务于分布式系统,可以用ZooKeeper来做:统一配置管理、统一命名服务、分布式锁、集群管理。使用分布式系统就无法避免对节点管理的问题(需要实时感知节点的状态、对节点进行统一管理等等),而由于这些问题处理起来可能相对麻烦和提高了系统的复杂性,ZooKeeper作为一个能够通用解决这些问题的中间件就应运而生了。

2、ZooKeeper的节点我们称之为Znode,Znode分为两种类型:

  短暂/临时(Ephemeral):当客户端和服务端断开连接后,所创建的Znode(节点)会自动删除。

  持久(Persistent):当客户端和服务端断开连接后,所创建的Znode(节点)不会删除。


相关问题推荐

  • 回答 2

    Statement的execute(String query)方法用来执行任意的SQL查询,如果查询的结果是一个ResultSet,这个方法就返回true。如果结果不是ResultSet,比如insert或者update查询,它就会返回false。我们可以通过它的getResultSet方法来获取ResultSet,或者通过getUpda...

  • 回答 22

    忙的时候项目期肯定要加班 但是每天加班应该还不至于

  • 回答 108
    已采纳

    虽然Java人才越来越多,但是人才缺口也是很大的,我国对JAVA工程师的需求是所有软件工程师当中需求大的,达到全部需求量的60%-70%,所以Java市场在短时间内不可能饱和。其次,Java市场不断变化,人才需求也会不断增加。马云说过,未来的制造业要的不是石油,...

  • 回答 5
    已采纳

    工信部证书含金量较高。工信部是国务院的下属结构,具有发放资质、证书的资格。其所发放的证书具有较强的权威性,在全国范围内收到认可,含金量通常都比较高。 工信部证书,其含义也就是工信部颁发并承认的某项技能证书,是具有法律效力的,并且是国家认可的...

  • 回答 70
    已采纳

    学Java好不好找工作?看学完Java后能做些什么吧。一、大数据技术Hadoop以及其他大数据处理技术都是用Java或者其他,例如Apache的基于Java 的 HBase和Accumulo以及ElasticSearchas。但是Java在此领域并未占太大空间,但只要Hadoop和ElasticSearchas能够成长壮...

  • 回答 16
    已采纳

    就是java的基础知识啊,比如Java 集合框架;Java 多线程;线程的五种状态;Java 虚拟机;MySQL (InnoDB);Spring 相关;计算机网络;MQ 消息队列诸如此类

  • 回答 12

    #{}和${}这两个语法是为了动态传递参数而存在的,是Mybatis实现动态SQL的基础,总体上他们的作用是一致的(为了动态传参),但是在编译过程、是否自动加单引号、安全性、使用场景等方面有很多不同,下面详细比较两者间的区别:1.#{} 是 占位符 :动态解析 ...

  • 回答 62

    没问题的,专科学历也能学习Java开发的,主要看自己感不感兴趣,只要认真学,市面上的培训机构不少都是零基础课程,能跟得上,或是自己先找些资料学习一下。

  • 回答 4

    1、反射对单例模式的破坏采用反射的方式另辟蹊径实例了该类,导致程序中会存在不止一个实例。解决方案其思想就是采用一个全局变量,来标记是否已经实例化过了,如果已经实例化过了,第 二次实例化的时候,抛出异常2、clone()对单例模式的破坏当需要实现单例的...

  • 回答 5

     优点: 一、实例控制  单例模式会阻止其他对象实例化其自己的单例对象的副本,从而确保所有对象都访问唯一实例。 二、灵活性  因为类控制了实例化过程,所以类可以灵活更改实例化过程。 缺点: 一、开销  虽然数量很少,但如果每次对象请求引用时都要...

  • 回答 4

    这个主要是看你数组的长度是多少, 比如之前写过的一个程序有个数组存的是各个客户端的ip地址:string clientIp[4]={XXX, xxx, xxx, xxx};这个时候如果想把hash值对应到上面四个地址的话,就应该对4取余,这个时候p就应该为4...

  • 回答 6

     哈希表的大小 · 关键字的分布情况 · 记录的查找频率 1.直接寻址法:取关键字或关键字的某个线性函数值为散列地址。即H(key)=key或H(key) = a·key + b,其中a和b为常数(这种散列函数叫做自身函数)。...

  • 回答 6

    哈希表的大小取决于一组质数,原因是在hash函数中,你要用这些质数来做模运算(%)。而分析发现,如果不是用质数来做模运算的话,很多生活中的数据分布,会集中在某些点上。所以这里最后采用了质数做模的除数。 因为用质数做了模的除数,自然存储空间的大小也用质数了...

  • 回答 2

    是啊,哈希函数的设计至关重要,好的哈希函数会尽可能地保证计算简单和散列地址分布均匀,但是,我们需要清楚的是,数组是一块连续的固定长度的内存空间

  • 回答 3

     解码查表优化算法,seo优化

  • 回答 5

    1.对对象元素中的关键字(对象中的特有数据),进行哈希算法的运算,并得出一个具体的算法值,这个值 称为哈希值。2.哈希值就是这个元素的位置。3.如果哈希值出现冲突,再次判断这个关键字对应的对象是否相同。如果对象相同,就不存储,因为元素重复。如果对象不同,就...

没有解决我的问题,去提问