首页技术文章正文

Zookeeper典型应用场景:数据发布与订阅

更新时间:2022-05-27 来源:黑马程序员 浏览量:

IT培训班

  数据发布与订阅模型,即所谓的全局配置中心,就是发布者将需要全局统一管理的数据发布到Zookeeper节点上,供订阅者动态获取数据,实现配置信息的集中式管理和动态更新,这也是大数据技术中比较重要的一环。例如全局的配置信息,服务式服务框架的服务地址列表等就非常适合使用。接下来,介绍一些数据发布与订阅的主要应用场景。

  (1)应用中用到一些配置信息放到Zookeeper上进行集中管理。这类场景通常是这样:应用在启动时会主动来获取一次配置,同时,在节点上注册一个Watcher,这样一来,以后每次配置有更新的时候,都会实时通知到订阅的客户端,用来达到获取最新配置信息的目的。

  (2)分布式搜索服务中,索引的元信息和服务器集群机器的节点状态存放在Zookeeper的一些指定节点,供各个客户端订阅使用。

  (3)分布式日志收集系统中,这个系统的核心工作是收集分布在不同机器的日志。收集器通常是按照应用来分配收集任务单元,因此需要在Zookeeper上创建一个以应用名作为path的节点P,并将这个应用的所有机器IP,以子节点的形式注册到节点P上,这样一来当机器变动的时候,能够实时通知到收集器调整任务分配。

  (4)系统中有些信息需要动态获取,并且还会存在人工手动去修改这个信息的发问。通常是暴露出接口,例如JMX接口,来获取一些运行时的信息。

  引入Zookeeper之后就不用自己实现一套方案了,只要将这些信息存放到指定的Zookeeper节点上即可。

  小提示:在上面提到的应用场景中,有个默认前提是:数据量很小,但是数据更新可能会比较快的场景。

分享到:
在线咨询 我要报名
和我们在线交谈!