频道栏目
首页 > 资讯 > 云计算 > 正文

Zookeeper集群搭建

17-05-22        来源:[db:作者]  
收藏   我要投稿

**

Zookeeper 集群搭建

**
鉴于 zookeeper 本身的特点,服务器集群的节点数推荐设置为奇数台。我这里我规划为三台,
为别为 hadoop01,hadoop02,hadoop03.

1.上网找 zookeeper 的软件安装,并下载下来
下载地址: http://mirrors.hust.edu.cn/apache/zookeeper/
版本号: zookeeper-3.4.7.tar.gz
2.解压安装到自己的目录
tar -zxvf zookeeper-3.4.7.tar.gz -C apps/
3.修改配置文件
cd conf/
mv zoo_sample.cfg zoo.cfg
vi zoo.cfg
修改配置项:

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/root/apps/zkdata
clientPort=2181
server.1=hadoop01:2888:3888
server.2=hadoop02:2888:3888
server.3=hadoop03:2888:3888

保存退出

补充: 假如要配置 observer,那么请把 zoo.cfg 改成如下配置:
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/root/apps/zkdata
clientPort=2181
server.1=hadoop01:2888:3888
server.2=hadoop02:2888:3888
server.3=hadoop03:2888:3888
server.4=hadoop04:2888:3888:observer // 如果有第四台机器,并且想配置 observer

配置参数解析:
tickTime
基本事件单元,以毫秒为单位。它用来控制心跳和超时,默认情况下最小的会话超时时
间为两倍的 tickTime。

initLimit
此配置表示,允许 follower (相对于 leader 而言的“客户端”)连接并同步到 leader 的
初始化连接时间,它以 tickTime 的倍数来表示。当超过设置倍数的 tickTime 时间,则
连接失败。

syncLimit
此配置表示, leader 与 follower 之间发送消息,请求和应答时间长度。如果 follower 在
设置的时间内不能与 leader 进行通信,那么此 follower 将被丢弃。

dataDir
存储内存中数据库快照的位置
注意: 如果需要保留日志信息,那么可以考虑配置 dataLogDir 的位置,这个位置就是日
志的存储目录。 通常情况下是分开存储的。 并且应该谨慎地选择日志存放的位置,使用
专用的日志存储设备能够大大地提高系统的性能,如果将日志存储在比较繁忙的存储设
备上,那么将会在很大程度上影响系统的性能。

clientPort
监听客户端连接的端口,默认是 2181,最好不要修改
最后再增加 zookeeper 的服务器列表信息,格式为:
server.id=主机名:心跳端口:选举端口
例子: server.1=hadoop01:2888:3888
其中 id 虽然可以随便写,但是有两点要求,第一不能重复,第二范围是 1-255,并且对
应服务器列表上还得存在对应的 id 文件,具体看下面操作

然后分发至其他服务器:

[root@hadoop01 zkdata]# scp -r zookeeper-3.4.7/ root@hadoop02:$PWD
[root@hadoop01 zkdata]# scp -r zookeeper-3.4.7/ root@hadoop03:$PWD

是最重要的步骤,一定不能忘了。
去你的各个 zookeeper 服务器节点,新建目录 dataDir=/root/apps/zkdata,这个目录就是
你在 zoo.cfg 中配置的 dataDir 的目录,建好之后,在里面新建一个文件,文件名叫 myid,
里面存放的内容就是服务器的 id,就是 server.1=hadoop01:2888:3888 当中的 id,就是 1,那
么对应的每个服务器节点都应该做类似的操作
拿服务器 hadoop01 举例:*

[root@hadoop01 zkdata]# mkdir /root/apps/zkdata
[root@hadoop01 zkdata]# echo 1 > myid

4.启动软件,并验证安装是否成功

先配置环境变量

vi ~/.bash_profile

增加两行:

export ZOOKEEPER_HOME=/root/apps/zookeeper-3.4.7
export PATH=$PATH:$ZOOKEEPER_HOME/bin

5.保存退出,执行 source ~/.bash_profile
6.启动命令zkServer.sh start

注意: 虽然我们在配置文件中写明了服务器的列表信息,但是,我们还是需要去每一台服务
器去启动,不是一键启动集群模式
然后检查在每台服务器之间是不是都启动了有 QuorumPeerMain 进程,并检查每台服务器的
角色,使用命令:

jps 检查 QuorumPeerMain 进程
zkServer.sh status 查看服务器角色(leader or follower)
相关TAG标签
上一篇:DOM对象转化成jQuery对象
下一篇:EM算法的应用--高斯混合模型学习
相关文章
图文推荐

关于我们 | 联系我们 | 广告服务 | 投资合作 | 版权申明 | 在线帮助 | 网站地图 | 作品发布 | Vip技术培训 | 举报中心

版权所有: 红黑联盟--致力于做实用的IT技术学习网站