Hadoop之Zookeeper安装

野性酷女 2022-02-19 10:25 236阅读 0赞

1、Zookeeper基本安装配置  
该项的所有操作步骤使用专门用于集群的用户admin进行  
此项只在一台主机操作，然后在下一步骤进行同步安装与配置  
首先，Zookeeper软件包“Zookeeper-3.4.9.tar.gz”，上节课已经上传到用户家目录的“setups”目录下。  
然后进行解压和环境变量设置  
$mkdir ~/zookeeper \#创建用户存放Zookeeper相关文件的目录  
$cd ~/zookeeper \#进入该目录  
$tar -xzf ~/setups/zookeeper-3.4.9.tar.gz \#将软件包解压  
![在这里插入图片描述][20190615213748885.png]  
$vi ~/.bash\_profile \#配置Zookeeper相关的环境变量  
![在这里插入图片描述][20190615213838232.png]  
对配置文件进行修改，在文件末尾添加以下内容：  
\#zookeeper environment  
ZOOKEEPER\_HOME=/home/admin/zookeeper/zookeeper-3.4.9  
\#在路径以Zookeeper软件包实际解压解包的路径为准  
PATH= $ZOOKEEPER\_HOME/bin: $PATH \#确保此项输入正确，否则可能会导致所有命令无法使用  
Export ZOOKEEPER\_HOMEPATH \#必须按照前面的定义顺序书写  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70]  
$source ~/.bash\_profile \#使新配置的环境变量立即生效  
![在这里插入图片描述][20190615214248788.png]  
$echo $ZOOKEEPER\_HOME  
$echo $PATH \#查看新添加和修改的环境变量是否设置成功，以及环境变量的值是否正确  
![在这里插入图片描述][20190615214507913.png]  
2、Zookeeper完全分布模式配置  
此项的所有操作步骤使用专门用于集群用户admin进行  
$cd ~/zookeeper \#进入Zookeeper相关文件的目录  
$mkdir data logs \#分别创建用于存放数据文件的目录“data”和用于存放日志文件的目录“logs”  
![在这里插入图片描述][20190615214602959.png]  
$cd ~/zookeeper/zookeeper-3.4.9/conf \#进入Zookeeper的配置文件所在的目录  
$cp zoo\_sample zoo.cfg \#拷贝生成Zookeeper的配置文件  
![在这里插入图片描述][20190615214650823.png]  
$vi zoo.cfg \#对配置文件进行修改  
![在这里插入图片描述][20190615214731123.png]  
以下配置项若已经存在则修改其对应值，若不存在则在配置文件末尾进行添加：  
dataDIR=/home/admon/zookeeper/data  
dataLogDir=/home/admon/zookeeper/logs  
Server.1=Cluster-01:2888:3888  
Server.2=Cluster-02:2888:3888  
Server.3=Cluster-03:2888:3888  
Server.4=Cluster-04:2888:3888  
Server.5=Cluster-05:2888:3888  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70 1]  
3、同步安装和配置  
该项的所有操作步骤使用专门用于集群用户admin进行  
将“zookeeper”目录和“.bash\_profile”文件发给集群中所有主机，发送目标用户为集群专用用户admin，发送目标路径为“/home/admin”，即集群专用用户admin的家目录。然后每台执行source ~/.bash\_profile使环境变量生效

$scp -r ~/zookeeper ~/.bash_profile admin@Cluster-02:/home/admin
    $scp -r ~/zookeeper ~/.bash_profile admin@Cluster-03:/home/admin
    $scp -r ~/zookeeper ~/.bash_profile admin@Cluster-04:/home/admin
    $scp -r ~/zookeeper ~/.bash_profile admin@Cluster-05:/home/admin

在每台主机会虚拟机上，使用命令“echo $ZOOKEEPER\_HOME”、“echo $PATH”查看新添加和修改的环境变量是否设置成功，以及环境变量的值是否正确。如在主机Cluster-02上验证：  
$source ~/.bash\_profile \#使新配置的环境变量立即生效  
![在这里插入图片描述][20190615215905217.png]  
$echo $ZOOKEEPER\_HOME  
$echo $PATH \#查看新添加和修改的环境变量是否设置成功，以及环境变量的值是否正确  
![在这里插入图片描述][20190615215926789.png]  
4、配置Zookeeper节点标识文件  
该项的所有操作步骤使用专门用于集群用户admin进行  
在集群中所有主机上使用命令“echo ” \*“ > ~/zookeeper/data/myid”,创建Zookeeper的节点标识文件  
如在主机Cluster-01中，配置Zookeeper节点标识文件，如下所示：  
$echo ‘1’ > ~/zookeeper/data/myid  
![在这里插入图片描述][20190615215956701.png]  
$cat zoo.cfg  
![在这里插入图片描述][20190615220132223.png]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70 2]  
5、Zookeeper完全分布模式启动和验证  
该项的所有操作步骤使用专门用于集群用户admin进行  
进行操作前，先关闭防火墙（root用户下）：  
\#systemctl stop firewalld.service  
\#systemctl disable firewalld.service  
如在主机Cluster-01上关闭防火墙，其他主机一样，在操作前需关闭防火墙  
![在这里插入图片描述][20190615221711598.png]  
在集群中所有主机上使用命令“zkServer.sh start”启动Zookeeper服务的脚本，若启动过程没有报错，  
并且显示“STARTED”则表示启动成功。  
$zkServer.sh start  
![在这里插入图片描述][20190615221917711.png]  
在集群中所有主机上使用命令“jps”查看Java进程信息，若存在一个名为“QuorumPeerMain”的进程，则表示Zookeeper服务启动成功。 $jps  
![在这里插入图片描述][20190615221944417.png]  
在集群中所有主机上使用命令“zkServer.sh status”查看该节点Zookeeper服务当前的状态，若集群中只有一个“leader”节点，其余的均匀为“follwer”节点，则集群的工作状态正常。防火墙必须关掉，状态是Error contacting service.It is probably not running.。  
$zkServer.sh status  
![在这里插入图片描述][20190615222326197.png]  
使用命令“zkCli.sh -server Cluster- \*:2181”利用Zookeeper的命令行工具连接Zookeeper集群，其中  
" \*"为集群中节点的编号，可以选择连接集群中任意一个节点，若显示“CONNECTED”则表示连接正常，命令行工具可以正常使用，在命令行工具中使用命令“quit”可以退出工具程序。如在主机Cluster-01利用命令行工具连接Zookeeper集群，如下所示：  
$zkCli.sh -server Cluster-01:2181  
![在这里插入图片描述][20190615222618963.png]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70 3]  
问题及解决方法：  
防火墙未关闭成功  
CentOS 7.0 默认使用的是firewall作为防火墙，需执行以下命令关闭防火墙：  
$systemctl stop firewalld.service \#停止firewall  
$systemctl disable firewalld.service \#禁止firewall开机启动  
关闭各个节点防火墙后，重启Zookeeper进程，防火墙关闭成功

[20190615213748885.png]: /images/20220219/b8f8e8963d7a4779a16e7ead6013bfc6.png
[20190615213838232.png]: /images/20220219/137c8f1dc7b94be9851d15109d9bce1c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70]: /images/20220219/6ad829a97cf842f79dd5730b7eca82ce.png
[20190615214248788.png]: /images/20220219/69b80e312b8f4078935e30a30280272f.png
[20190615214507913.png]: /images/20220219/e70656501784449397e28eff50c090db.png
[20190615214602959.png]: /images/20220219/6204a526b58449e78aa8853bf0656abe.png
[20190615214650823.png]: /images/20220219/3bf1aad7005744bba0de28257860dadf.png
[20190615214731123.png]: /images/20220219/c407e1ae0b96478ab2c4fbc0d3dd5b8b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70 1]: /images/20220219/979d628920d6479d96557456ad5f8e6b.png
[20190615215905217.png]: /images/20220219/b9ef6b95894f411284ecdb08abf966b1.png
[20190615215926789.png]: /images/20220219/9a54a80ec0e04debbde0f7a86f80ed3c.png
[20190615215956701.png]: /images/20220219/42ebeefc29ca42f5b8a219dd962c731f.png
[20190615220132223.png]: /images/20220219/fb6be05b64dd41399e367b28e41c9013.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70 2]: /images/20220219/e5ecbdcf18c04a5d98619f082d3b7160.png
[20190615221711598.png]: /images/20220219/cabe50a128c741efb22053ffcf2816a1.png
[20190615221917711.png]: /images/20220219/7ddb962b76484e3bb6d4bb558d63e07d.png
[20190615221944417.png]: /images/20220219/9a64037225564ba2bed476d8b98a8dc2.png
[20190615222326197.png]: /images/20220219/495ed6f6e8374116837a273ee639cc0d.png
[20190615222618963.png]: /images/20220219/777c8389d50c4da296e55e23cf34739f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80NDQ5NTY3OA_size_16_color_FFFFFF_t_70 3]: /images/20220219/0c2cc39ab5d649b99639c9f55ac60e37.png