1. Zookeeper 基础知识、体系结构、数据模型
Zookeeper 是一个类似 linux、hdfs 的树形文件结构, zookeeper 可以用来保证数据在( Zookeeper ) 集群之间的数据的事务性一致性, zookeeper 也是我们常说的 CAP 理论中的 CP (强一致性)。
Zookeeper 有一个概念叫 watch (也称之为事件) ,是一次性触发的,当 watch 监视的数据发生变化时,通知设置了该 watch 的 clien 端,即 watcher 实例对象(用于改变节点的变化而做出相应的行为)。
2. Zookeeper 有三个角色: Leader, Follower, Observer
Leader: 数据总控节点,用于接收客户端连接请求,分发给所有的 Follower 节点后,各个 Follower 节点进行更新数据操作并返回给 Leader 节点,如果满足半数以上(所以 Zookeeper 集群一般是奇数个节点)更新成功则此次操作成功。
Follower: 相当于跟随者的角色, zookeeper 的 Leader 宕机(挂掉)时,所有的 Follower 角色内部会产生选举机制,选举出新的 Leader 用于总控;
Observer: 顾名思义,就是我们的客户端,用于观察 Zookeeper 集群的数据发送变化,如果产生变化则 zookeeper 会主动推送 watch 事件给 Observer (客户端),用于对数据变化的后续处理;当然 Observer (客户端)也可以 发送数据变更请求;
3. Zookeeper 应用场景
统一命名服务 ( Name Service)
配置管理 ( Configuration Management)
集群管理 ( Group Membership)
共享锁 ( Locks )
4. Zookeeper 集群环境搭建与配置
代码语言:javascript复制1. 准备工作:
## 准备3个节点,要求配置好主机名称,服务器之间系统时间保持一致
## 注意 /etc/hostname 和 /etc/hosts 配置主机名称(在这个里我准备 bhz125,bhz126,bhz127 三节点)
## 特别注意 以下操作3个节点要同时进行操作哦!
2. 上传 zookeeper 到三台服务器节点
## 注意我这里解压到 /usr/local 下
2.1 进行解压: tar zookeeper-3.4.6.tar.gz
2.2 重命名: mv zookeeper-3.4.6 zookeeper
2.3 修改环境变量: vim /etc/profile
## 这里要添加 zookeeper 的全局变量
export ZOOKEEPER_HOME=/usr/local/zookeeper
export PATH=.:$ZOOKEEPER_HOME/bin
2.4 刷新环境变量: source /etc/profile
2.5 到 zookeeper 下修改配置文件:
2.5.1 首先到指定目录: cd /usr/local/zookeeper/conf
2.5.2 然后复制 zoo_sample.cfg 文件,复制后为 zoo.cfg: mv zoo_sample.cfg zoo.cfg
2.5.3 然后修改两处地方, 最后保存退出:
(1) 修改数据的 dir
dataDir=/usr/local/zookeeper/data
(2) 修改集群地址
server.0=bhz125:2888:3888
server.1=bhz126:2888:3888
server.2=bhz127:2888:3888
2.6 增加服务器标识配置,需要2步骤,第一是创建文件夹和文件,第二是添加配置内容:
(1) 创建文件夹: mkdir /usr/local/zookeeper/data
(2) 创建文件myid 路径应该创建在/usr/local/zookeeper/data下面,如下:
vim /usr/local/zookeeper/data/myid
注意这里每一台服务器的 myid 文件内容不同,分别修改里面的值为 0,1,2;与我们之前的 zoo.cfg 配置文件里:server.0,server.1,server.2 顺序相对应,然后保存退出;
2.7 到此为止,Zookeeper 集群环境大功告成!启动 zookeeper 命令
启动路径:/usr/local/zookeeper/bin(也可在任意目录,因为配置了环境变量)
执行命令:zkServer.sh start (注意这里3台机器都要进行启动,启动之后可以查看状态)
查看状态:zkServer.sh status (在三个节点上检验 zookeeper 的 mode, 会看到一个 leader 和俩个 follower)
5. Zookeeper 客户端操作
代码语言:javascript复制zkCli.sh 进入 zookeeper 客户端
根据提示命令进行操作:
查找:ls / ls /zookeeper
创建并赋值: create /alihuitailang zookeeper
获取: get /alihuitailang
设值: set /alihuitailang zookeeper1314
PS1: 任意节点都可以看到 zookeeper 集群的数据一致性
PS2: 创建节点有俩种类型:短暂(ephemeral) 持久(persistent)
6. Zookeeper 核心配置详解: (zoo.cfg 配置文件)
代码语言:javascript复制(1)tickTime:基本事件单元,以毫秒为单位。这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每隔 tickTime 时间就会发送一个心跳。
(2)initLimit:这个配置项是用来配置 Zookeeper 接受客户端初始化连接时最长能忍受多少个心跳时间间隔数,当已经超过 10 个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒。
(3)syncLimit:这个配置项标识 Leader 与 Follower 之间发送消息,请求和应答时间长度,最长不能超过多少个 tickTime 的时间长度,总的时间长度就是 5*2000=10 秒
(4)dataDir:存储内存中数据库快照的位置,顾名思义就是 Zookeeper 保存数据的目录,默认情况下,Zookeeper 将写数据的日志文件也保存在这个目录里。
(5)clientPort: 这个端口就是客户端连接 Zookeeper 服务器的端口,Zookeeper 会监听这个端口,接受客户端的访问请求。
(6)至于最后的配置项:server.A = B:C:D:
A表示这个是第几号服务器,
B 是这个服务器的 ip 地址;
C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;
D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader