P04_zookeeper-cdh5集群搭建

时间:2022-05-07
本文章向大家介绍P04_zookeeper-cdh5集群搭建,主要内容包括安装ZooKeeper包、配置zoo.cfg、设置zk节点标识、搭建zk集群、启动ZooKeeper集群、基本概念、基础应用、原理机制和需要注意的事项等,并结合实例形式分析了其使用技巧,希望通过本文能帮助到大家理解应用这部分内容。

安装ZooKeeper包

[CDH下载地址](http://archive.cloudera.com/cdh5/cdh/5/

1、将课程提供的zookeeper-3.4.5-cdh5.3.6.tar.gz使用WinSCP拷贝到sparkproject1的/usr/local目录下。 2、对zookeeper-3.4.5-cdh5.3.6.tar.gz进行解压缩:tar -zxvf zookeeper-3.4.5-cdh5.3.6.tar.gz。 3、对zookeeper目录进行重命名:mv zookeeper-3.4.5-cdh5.3.6 zk。 4、配置zookeeper相关的环境变量 vi ~/.bashrc export ZOOKEEPER_HOME=/usr/local/zk export PATH=$ZOOKEEPER_HOME/bin source ~/.bashrc

配置zoo.cfg

cd zk/conf mv zoo_sample.cfg zoo.cfg

vi zoo.cfg 修改:dataDir=/usr/local/zk/data 新增: server.0=sparkproject1:2888:3888 server.1=sparkproject2:2888:3888 server.2=sparkproject3:2888:3888

设置zk节点标识

cd zk
mkdir data
cd data

vi myid
0

搭建zk集群

1、在另外两个节点上按照上述步骤配置ZooKeeper,使用scp将zk和.bashrc拷贝到spark2和spark3上即可。 2、唯一的区别是spark2和spark3的标识号分别设置为1和2。

启动ZooKeeper集群

1、分别在三台机器上执行:zkServer.sh start。 2、检查ZooKeeper状态:zkServer.sh status,应该是一个leader,两个follower 3、jps:检查三个节点是否都有QuromPeerMain进程。