[转载] zookeeper 事件通知

ZK事件回调
当一个client访问ZK时,client与ZK保持长连接。应用可以通过client的api注册一些callback,当对应的事件发生时,client会执行对应的callback。
如果你基本了解ZK的watch机制,可直接看最后一节- 一般性原则。
类别
总体上说,ZK的事件分为两类
session 事件 -表示client与ZK的连接状态
znode 事件 - 表示client所关注节点的状态
注册
以C lib为例,client api接受的callback定义如下:
1
typedef void (*watcher_fn)(zhandle_t *zh, int type, int state, const char *path,void *watcherCtx);
应用通过client api注册对应的callback,初始时通过zookeeper_init注册一个callback,用于全局默认的callback,保存在zh的watcher字段中(如果fn为NULL,client用一个空函数代替)。
当发生session事件时,该callback被执行。
1
zhandle_t *zookeeper_init(const char *host, watcher_fn fn, int recv_timeout, const clientid_t *clientid, void *context, int flags);
当client与ZK建立连接后,在进行数据查询的同时可以注册callback,典型的通过以下几个函数注册:
1
2
3
4
5
int zoo_wget(zhandle_t *zh, const char *path, watcher_fn watcher, void* watcherCtx, char *buffer, int* buffer_len, struct Stat *stat);

int zoo_wexists(zhandle_t *zh, const char *path, watcher_fn watcher, void* watcherCtx, struct Stat *stat);

int zoo_wget_children(zhandle_t *zh, const char *path, watcher_fn watcher, void* watcherCtx, struct String_vector *strings);
其中zoo_wget与zoo_wexists注册的callback用于监视path对应的znode的状态(wget与wexists区别一会解释);
zoo_wget_children注册的callback用于监视path对应的znode的子节点的状态。
触发
当事件发生时,注册的callback被执行,参数中zh是对应的handle,type表示事件的类型,state表明该client的连接的当前状态,path对应的是节点路径,watcherCtx是callback被设置时指定的(用于传递数据)。
type有以下几种类型 :
1
2
3
4
5
6
7
8
9
10
11
// c客户端,ZOO_SESSION_EVENT代表连接/session事件

const int ZOO_SESSION_EVENT = -1;

const int ZOO_CREATED_EVENT = 1;

const int ZOO_DELETED_EVENT = 2;

const int ZOO_CHANGED_EVENT = 3;

const int ZOO_CHILD_EVENT = 4;
对于第一类的session事件,type为ZOO_SESSION_EVENT,path为NULL ,state可能为一下几种类型 :
1
2
3
4
5
6
7
const int ZOO_EXPIRED_SESSION_STATE;

const int ZOO_AUTH_FAILED_STATE;

const int ZOO_CONNECTED_STATE;

const int ZOO_CONNECTING_STATE;
(为叙述方便,下面会简写state的变量名,如EXPIRED表示ZOO_EXPIRED_SESSION_STATE)
当收到EXPIRED时,表明服务端判定该session已经超时并清理该session创建的临时节点,之后任何在zh上的查询将返回EXPIRED。
当遇到EXPIRED时,说明该zh已经不能在用了,这时候需要close该handle(zookeeper_close)来回收其占用的资源。
当遇到AUTH_FAILED时,说明使用zoo_add_auth添加的认证信息在ZK上验证失败了(公司内部一般没用auth,基于IP白名单的认证对应用透明,不需要add_auth),这时候该zh也不能用了,需要close。
当返回CONNECTED时,说明与ZK建立session成功,可以进行正常的读写了。
当返回CONNECTING时,说明与ZK的连接断开(可能网络抖动等),这时client会自动与ZK重连,重连上之后触发CONNECTED。在CONNECTING时,使用api读写ZK将返回ZCONNECTIONLOSS。
对于第二类znode事件,type为ZOO_CREATED_EVENT/ZOO_DELETED_EVENT/ZOO_CHANGED_EVENT/ZOO_CHILD_EVENT。
顾名思义,CREATED表明节点被创建,DELETE表明节点被删除,CHANGED表示节点内容被跟改,CHILD表示节点的子节点被创建或删除。
示例
zhandle_t zh = zookeeper_init(zkurl**callback1**),当zh连上ZK后,收到第一个事件callback1(type=SESSION,state=CONNECTED)
然后执行zoo_wget(**path2**callback2"")并返回成功,zoo_wexists(**path3**callback3"")返回成功。
之后zoo_set(zh**path2**),path2被更新,client会收到callback2(CHANGED,state=CONNECTED)。
假设此时zh连接的那台ZK机器挂了,client会收到callback1(SESSION,CONNECTING),callback3(SESSION,CONNECTING)。
之后client会重试到其它机器上,依次收到callback1(SESSION,CONNECTED),callback3(SESSION,CONNECTED)。
假设之后该session超时了,依次收到callback1(SESSION,EXPIRED),callback3(SESSION,EXPIRED)
这个示例的隐含如下信息:
1. init注册的callback在发生session相关的事件时被触发,不需要重新注册。
2. get/exists/get_children注册的callback,收到znode事件后callback被触发且失效,需要重新注册。如果在发生znode事件前发生session相关的事件,callback会被触发,但不会失效。
通过client api注册的callback可能收到的事件对应关系可以总结成一张表格:
事件
会触发由此API添加的回调方法
SESSION_EVENT zookeeper_init(),wget(),wexists(),wget_children()
CREATED_EVENT wexists()
DELETED_EVENT wget(),wexists(),wget_children()
CHANGED_EVENT wget(),wexists()
CHILD_EVENT wget_children()
其中wexists可以对不存在的节点添加watcher,当节点被创建会收到CREATED,当wexists对一个已存在的节点添加watcher时,与wget等价。
wget_children添加的/path的子节点被创建删除时,会收到CHILD,当/path被删除时,会收到DELETED。
在client的api中,可复用全局的那个watcher函数指针
1
zoo_get(zhandle_t zh, const char *path, int watch, char *buffer,int buffer_len, struct Stat *stat);
当watch非0时,以zookeeper_init传入的watcher做为callback( 不推荐这种使用方式)。
一般性原则
在使用ZK的事件回调时,最好需要区分开ZK的这两大类事件。
一个callback_s,zookeeper_init时传入,用于处理session事件,比如EXPIRED时close句柄并重新建立连接。
一个callback_z,用于wget等时,只处理znode事件。
这么做的原因是session事件发生时,如上所述,callback_z也会被执行,如果callback_z也处理EXPIRED事件,则该逻辑会被执行多次,带来不必要的问题。
对于不同的查询函数,可以选择注册不同的callback,只需遵守watch数据的callback只处理znode事件即可。

时间: 2024-10-04 17:47:47

[转载] zookeeper 事件通知的相关文章

[转载] ZooKeeper的Java客户端API

转载自 http://www.cnblogs.com/ggjucheng/p/3370359.html http://zookeeper.apache.org/doc/trunk/javaExample.html http://topmanopensource.iteye.com/blog/1880601 http://san-yun.iteye.com/blog/1977454 客户端要连接 Zookeeper 服务器可以通过创建 org.apache.zookeeper. ZooKeeper

[转载] zookeeper应用——集中配置管理系统的实现

转载自http://blog.csdn.net/huangfengxiao/article/details/8844239 1 场景描述 参考http://www.ibm.com/developerworks/cn/opensource/os-cn-zookeeper/index.html,实现自己的集中配置管理系统. 术语:配置管理(Configuration Management) 一个带配置的服务程序,部署在若干台机器上,如果配置发生了变化,接下去要进行的操作是停止所有机器上的该程序,修改

Linux内核基础--事件通知链(notifier chain)

转载: http://blog.csdn.net/wuhzossibility/article/details/8079025 http://blog.chinaunix.net/uid-27717694-id-4286337.html 内核通知链 1.1. 概述 Linux内核中各个子系统相互依赖,当其中某个子系统状态发生改变时,就必须使用一定的机制告知使用其服务的其他子系统,以便其他子系统采取相应的措施.为满足这样的需求,内核实现了事件通知链机制(notificationchain). 通知

淘宝SOA框架dubbo学习(9)--事件通知

1.服务提供端及客户端共享代码 package com.alibaba.dubbo.demo; public interface DemoService {     String sayHello(String name);     Person get(int id); } package com.alibaba.dubbo.demo; import java.io.Serializable; public class Person implements Serializable {     

网络编程(三):从libevent到事件通知机制

由于POSIX标准的滞后性事件通知API的混乱一直保持到现在 所有就有libevent.libev甚至后面的libuv的出现为跨平台编程扫清障碍. 下面是WikiPedia对于libevent的介绍    libevent是一个异步事件处理软件函式库以BSD许可证发布. libevent提供了一组应用程序编程接口API让程序员     可以设定某些事件发生时所执行的函式也就是说libevent可以用来取代网络服务器所使用的事件循环检查框架. 由于可以省去对网络的处理且拥有不错的效能 有些软件使用

[转载] zookeeper faq

Zookeeper FAQ1. 如何处理CONNECTION_LOSS?在Zookeeper中,服务器和客户端之间维持一个长连接,CONNECTION_LOSS意味着这个连接断开了.客户端API返回CONNECTION_LOSS时,不能确定请求是成功还是失败(视连接断开发生在请求发送之前还是之后,遗憾的是无法区分这两种情况),应用需要自己的逻辑来确认操作是否成功. 连接断开可能是由于网络抖动,或者是连接的那台服务器死机等原因.出现这种情况后,客户端的LIB内部会自动重连.如果在session超时

.NET Core 实践二:事件通知和异步处理

首先让我们来先看一个例子: 这是一个简单的用户下单购买商品的业务模型,输入端是用户,相关物料有订单和货物,相关的内部服务有业务(订单).财务(支付).仓储(备货)和物流(运输). 从图中我们可以看到,用户首先向业务部门下了一个订单,业务部门根据用户提供的内容生成了一份订单给客户,并要求客户根据订单金额支付费用.此时用户会拿着订单向财务部门付款,财务部门收款后告诉业务部门,此订单的货款已经收到,业务部门通知仓储部门备货,仓储部门备货完成后通知业务部门货物已经准备完毕,再由业务部门通知物流部门去仓库

Zookeeper 事件监听 - 史上最详解读

目录 写在前面 1.1. Curator 事件监听 1.1.1. Watcher 标准的事件处理器 1.1.2. NodeCache 节点缓存的监听 1.1.3. PathChildrenCache 子节点监听 1.1.4. Tree Cache 节点树缓存 写在最后 疯狂创客圈 亿级流量 高并发IM 实战 系列 疯狂创客圈 Java 分布式聊天室[ 亿级流量]实战系列之 -25[ 博客园 总入口 ] 写在前面 ? 大家好,我是作者尼恩.目前和几个小伙伴一起,组织了一个高并发的实战社群[疯狂创客

spring事件通知机制详解

优势 解耦 对同一种事件有多种处理方式 不干扰主线(main line) 起源 要讲spring的事件通知机制,就要先了解一下spring中的这些接口和抽象类: ApplicationEventPublisherAware        接口:用来 publish event ApplicationEvent                  抽象类,记录了source和初始化时间戳:用来定义Event ApplicationListener<E extends ApplicationEvent