Zookeeper基本知识

Zookeeper的Session: 
(1)客户端和server间采用长连接 
(2)连接建立后,server产生session ID(64位)返还给客户端 
(3)客户端定期发送ping包来检查和保持和server的连接 
(4)一旦session结束或超时,所有ephemeral节点会被删除 
(5)客户端可根据情况设置合适的session超时时间

Zookeeper的Watchs: 
Watch是客户端安装在server的事件侦听方法 
(1) 当侦听的变化发生时,server发消息给客户端进行通知 
(2) 客户端使用单线程对所有事件按顺序同步回调 
(3) 触发回调条件: 
• 客户端连接、断开连接 
• 节点数据发生改变 
• 节点本身发生变化 
(4)Watch是单发的,每次触发后会被自动删除 
(5)如果需要再次侦听事件,必须重新安装watch 
(6)无法保证跟踪到每一个变化 
(7)避免安装大量watches侦听在同一个节点

Zookeeper的一些注意事项: 
在客户端事件回调实现有阻塞调用 
• 试图跟踪每个状态变化 
• 大量watch侦听同一个znode的状态变化 
• 客户端会有需要长时间处理的GC(garbage collection) 
• Session超时后上层应用不进行恢复处理 

可以把zookper看成一个文件系统,文件系统中的所有文件形成一个数状结构,zookeeper维护着这样的树形层次结构,树中的节点称为znode。每个znode有一个与之相关联的ACL(Access Control List) 
znode通过路径被引用,而且要采用绝对路径,即必须以/开头。znode存储的数据要小于1M,这个可以配置,建议不要存储太大的东西,避免同步操作时间过长。 
znode类型 
短暂znode:回话结束,zookeeper就会把短暂znode删除,短暂znode不可以有子节点。 
持久znode:回话结束也不会被删除,除非客户端明确要删除此znode,持久znode可以有子节点。
对于在特定时刻需要知道有哪些分布式资源可用的应用来说,使用短暂znode比较合适。

znode的观察机制 
znode以某种方式发生变化时,“观察”(watch)机制可以让客户端得到通知。可以针对ZooKeeper服务的“操作”来设置观察,该服务的其他操作可以触发观察。比如,客户端可以对某个客户端调用exists操作,同时在它上面设置一个观察,如果此时这个znode不存在,则exists返回false,如果一段时间之后,这个znode被其他客户端创建,则这个观察会被触发,之前的那个客户端就会得到通知。 

时间: 2024-12-15 03:41:52

Zookeeper基本知识的相关文章

zookeeper 入门知识

作为开启分布式架构的基石,除了必会还有的选么 自己的一些理解,有错误的话请一定要给予指正! 一.是什么? 分布式数据一致性的解决方案. 二.有什么用 数据的发布/订阅(配置中心)  . 负载均衡(dubbo利用了zookeeper机制实现负载均衡) .命名服务. master选举(kafka.hadoop.hbase).分布式队列.分布式锁. zookeeper入门知识 1.CAP理论和BASE理论 参考文献: http://www.jdon.com/bigdata/how-to-underst

zookeeper基础知识

Zookeeper 不仅能够帮你维护当前的集群中机器的服务状态,而且能够帮你选出一个“总管”,让这个总管来管理集群,这就是 Zookeeper 的另一个功能 Leader Election. 配置管理(Configuration Management) 配置的管理在分布式应用环境中很常见,例如同一个应用系统需要多台 PC Server 运行,但是它们运行的应用系统的某些配置项是相同的,如果要修改这些相同的配置项,那么就必须同时修改每台运行这个应用系统的 PC Server,这样非常麻烦而且容易出

zookeeper入门知识

1.zookeeper概念 Zookeeper是一个开源的分布式的,为分布式应用提供协调服务的Apache项目: ZooKeeper最为主要的使用场景,是作为分布式系统的分布式协同服务, 2.工作机制 3.zookeeper特点 4.数据结构 4.应用场景 提供的服务包括:统一命名服务.统一配置管理.统一集群管理.服务器节点动态上下线.软负载均衡等 原文地址:https://www.cnblogs.com/muaamu/p/10906885.html

hadoop知识体系

目录结构知识点还是挺全的,可以按照点学习. 一.Hadoop入门,了解什么是Hadoop 二.分布式文件系统HDFS,是数据库管理员的基础课程 1.Hadoop产生背景 2.Hadoop在大数据.云计算中的位置和关系 3.国内外Hadoop应用案例介绍 4.国内Hadoop的就业情况分析及课程大纲介绍 5.分布式系统概述 6.Hadoop生态圈以及各组成部分的简介 7.Hadoop核心MapReduce例子说明 1.分布式文件系统HDFS简介 2.HDFS的系统组成介绍 3.HDFS的组成部分详

Zookeeper教程从入门到精通

下载地址:http://pan.baidu.com/s/1o6QALvG 密码:eh8n 课程大纲: 第1讲.Zookeeper熟悉和用途综述,Zookeeper基础知识.体系结构.数据模型,常见的应用场景 第2讲.Zookeeper集群搭建.命令行Client操作,集群搭建和测试,命令行客户端操作,Stat 第3讲.Watches.Node.API介绍.Java Client开发,Watches.Node详解,API介绍,Java Client开发 第4讲.Java Client 进阶练习授权

Zookeeper从入门到精通(开发详解,案例实战,Web界面监控)

ZooKeeper是Hadoop的开源子项目(Google Chubby的开源实现),它是一个针对大型分布式系统的可靠协调系统,提供的功能包括:配置维护.命名服务.分布式同步.组服务等. Zookeeper的Fast Fail 和 Leader选举特性大大增强了分布式集群的稳定和健壮性,并且解决了Master/Slave模式的单点故障重大隐患,这是越来越多的分布式产品如HBase.Storm(流计算).S4(流计算)等强依赖Zookeeper的原因. Zookeeper在分布式集群(Hadoop

ZooKeeper_基础知识学习

ZooKeeper是Hadoop的开源子项目(Google Chubby的开源实现),它是一个针对大型分布式系统的可靠协调系统,提供的功能包括:配置维护.命名服务.分布式同步.组服务等. Zookeeper的Fast Fail 和 Leader选举特性大大增强了分布式集群的稳定和健壮性,并且解决了Master/Slave模式的单点故障重大隐患,这是越来越多的分布式产品如HBase.Storm(流计算).S4(流计算)等强依赖Zookeeper的原因. Zookeeper在分布式集群(Hadoop

[转]ZooKeeper的学习与应用

http://blog.csdn.net/rengq126/article/details/7393227 1. ZooKeeper的学习与应用 1.1. 概述 ZooKeeper是Apache在很多云计算项目中的一个,与Hadoop密切相关,这种情况导致我一开始认为ZooKeeper的搭建需要Hadoop项目作为支持,但是最后发现完全不需要,它是可以单独运行的一个项目. 在网上看到了一个很不错的关于ZooKeeper的介绍: 顾名思义动物园管理员,他是拿来管大象(Hadoop) . 蜜蜂(Hi

zookeeper原理与实践(一)----zookeeper的基本功能

我们现在围绕两个问题来学习zookeeper: 什么是zookeeper? zookeeper基础知识 什么是zookeeper: zookeeper是hadoop下面的一个子项目,是一个分布式协调服务框架,这个解释其实是很抽象的.其实我觉得不用扯这些东西,通过zk的一些实践项目就可以很好的理解什么是zookeeper了.我们通过一个zk的实际例子来了解,基本所有公司都有这样的需求:在使用rpc进行服务调用的时候,我们更不关心现在提供服务的集群入口(比如:一个集群提供同一个服务,但是只有一个入口