ZK集群搭建：详细步骤与注意事项

在大数据和分布式系统日益重要的今天，ZooKeeper（简称ZK）作为一种分布式协调服务，扮演着举足轻重的角色。它主要用于管理大型分布式系统中的配置信息、命名、同步等。下面将详细介绍如何搭建一个ZooKeeper集群，帮助大家掌握这一关键技能。

0x00、准备工作

硬件与软件准备

硬件：至少需要三台服务器（或虚拟机）来搭建一个基本的ZooKeeper集群。

服务器	系统	CPU	内存	IP
cvm1	CentOS 7.6	4核	8G	172.20.0.10
cvm2	CentOS 7.6	4核	8G	172.20.0.16
cvm3	CentOS 7.6	4核	8G	172.20.0.17

软件：每台服务器需要安装JDK（Java Development Kit），因为ZooKeeper是用Java编写的。建议使用JDK 1.8或更高版本。

网络配置

为每台服务器分配一个唯一的IP地址，并在/etc/hosts文件中配置主机名和IP地址的映射关系，以便ZooKeeper集群内部能够相互通信。

0x01、安装JDK

下载JDK安装包

从Oracle官网或其他可信的JDK下载源获取JDK安装包。

解压并安装JDK

使用tar命令解压JDK安装包，并将其移动到合适的目录，例如/data/jdk/。

配置环境变量

编辑/etc/profile文件，添加以下环境变量：

export JAVA_HOME=/data/zk/jdk1.8.0_xxx  
export PATH=$PATH:$JAVA_HOME/bin

保存并退出，然后执行下面的命令使配置生效。

source /etc/profile

0x02、下载并安装ZooKeeper

下载ZooKeeper安装包

从ZooKeeper官网（https://zookeeper.apache.org/）下载最新版本的ZooKeeper安装包。

解压并安装ZooKeeper

使用tar命令解压ZooKeeper安装包，并将其移动到合适的目录，例如/data/zk/。

配置ZooKeeper

进入ZooKeeper的conf目录，复制zoo-sample.cfg文件并重命名为zoo.cfg。

编辑zoo.cfg文件，进行以下配置：

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/data/zookeeper_data
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
server.1=172.20.0.10:2888:3888
server.2=172.20.0.16:2888:3888
server.3=172.20.0.17:2888:3888

创建myid文件

在每台服务器的dataDir目录下创建myid文件，文件内容应为服务器的编号（与zoo.cfg中的server.X对应）。

0x03、部署ZooKeeper集群

复制ZooKeeper安装包到其他服务器

使用scp命令将ZooKeeper安装包复制到其他两台服务器。

配置其他服务器的myid文件

在其他两台服务器的dataDir目录下创建myid文件，并分别填写对应的服务器编号。

启动ZooKeeper服务

在每台服务器的ZooKeeper安装目录下的bin目录中，执行./zkServer.sh start命令启动ZooKeeper服务。

cd /data/apache-zookeeper-3.5.9-bin/bin
./zkServer.sh start

使用./zkServer.sh status命令查看ZooKeeper服务的状态。

0x04、验证ZooKeeper集群

检查集群状态

在任意一台服务器上执行./zkServer.sh status命令，查看集群状态。正常情况下，会有一台服务器被选举为leader，其他服务器为follower。

测试数据同步

使用ZooKeeper客户端连接到任意一台服务器，创建节点并设置值。

cd /data/apache-zookeeper-3.5.9-bin/bin
./zkCli.sh -server 172.20.0.10:2181,172.20.0.16:2181,172.20.0.17:2181

在其他服务器上使用ZooKeeper客户端连接到相应的服务器，检查节点和值是否已同步。

0x05、注意事项

防火墙配置

确保每台服务器的防火墙配置允许ZooKeeper集群内部通信所需的端口。

日志管理

定期检查和清理ZooKeeper的日志文件，以避免磁盘空间不足导致的问题。

监控与报警

配置监控和报警系统，以便在ZooKeeper集群出现异常时能够及时发现并处理。

版本兼容性

确保集群中所有ZooKeeper服务器的版本一致，以避免版本不兼容导致的问题。

0x06、最后几句

ZooKeeper集群的搭建是一个复杂但重要的过程，它涉及到硬件准备、软件安装、网络配置、服务启动和验证等多个环节。通过上面的详细介绍，相信你应该能够掌握ZooKeeper集群搭建的基本步骤和注意事项，为构建稳定、高效的分布式系统打下坚实的基础。

同时，也建议在实际操作中不断积累经验，优化集群配置，提高系统的性能和可靠性。