Redis集群搭建【超详细】

向右看齐 2022-01-07 05:57 411阅读 0赞

有问题可以关注公众号：YangzaiLeHeHe

**一、基本环境**

首先我们需要使用VMware配置几个虚拟机，我们需要安装VMWare然后 下载自己的linux镜像文件，在虚拟机上安装linux系统，

[vm15和centos7下载传送门][vm15_centos7]   提取码： **lvb5** 。我使用的是**centos7 64**，

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70][]

大致步骤可以根据其他博客将第一台虚机的系统安装成功，然后直接clone这台机器就可以了，然后需要修改ip。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 1][]

**二、准备相关软件安装包**

在这里我们需要准备 redis-3.0.7.tar.gz  如果需要搭建其他集群请自行准备，上面的链接中还提供了zookeeper的文件。

**三、开始**

1、我们启动好虚拟机后，首先需要确保各个之间可以ping 通。

![20190625144335798.png][]

2、我们使用xshell工具连我自己的这几台服务器。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 2][]

配置大致如上图，配置参数如下图。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 3][]

3、`cd` `/root/software 进入到我们software目录下 我们可以使用wget http:``//download``.redis.io``/releases/redis-3``.0.7.``tar``.gz 下载 ，也可以使用xshell 提供的文件传输工具将我们的离线文件上传至software下：`

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 4][]

![20190625145101320.png][]

目录如上。

进入到 redis-3.0.7目录下 使用如下命令

4、编译并安装

**cd redis-3.2.4**

** make && make install**

5、 将 **redis-trib.rb** 复制到 **/usr/local/bin** 目录下

**cd src  
cp redis-trib.rb /usr/local/bin/**

6、创建redis节点（在/root/software/redis-3.0.7 下创建redis\_cluster 目录）

**mkdir redis\_cluster**

7、创建节点目录并将redis.conf文件复制到节点目录下

**mkdir 7000 7001 7002**    （创建节点目录）

**cp redis.conf redis\_cluster/7000  
cp redis.conf redis\_cluster/7001  
cp redis.conf redis\_cluster/7002**

复制配置文件

8、修改配置文件

port  7000                                        //端口7000,7002,7003        
    bind 本机ip                                       //改为其他节点机器可访问的ip 可以使用ifconfig查看一下
    daemonize    yes                               //redis后台运行
    appendonly  yes                           //aof日志开启  有需要就开启，它会每次写操作都记录一条日志
    pidfile  /var/run/redis_7000.pid          //pidfile文件对应7000,7001,7002
    cluster-enabled  yes                           //开启集群  
    cluster-config-file  nodes_7000.conf   //集群的配置  配置文件首次启动自动生成 7000,7001,7002
    cluster-node-timeout  15000                //请求超时  默认15秒，可自行修改

操作之后在另外一台机器重复该操作。

9、启动各个节点

第一台机器上执行
    redis-server redis_cluster/7000/redis.conf
    redis-server redis_cluster/7001/redis.conf
    redis-server redis_cluster/7002/redis.conf
     
    另外一台机器上执行
    redis-server redis_cluster/7003/redis.conf
    redis-server redis_cluster/7004/redis.conf
    redis-server redis_cluster/7005/redis.conf

10、检查启动情况

**ps -ef | grep redis**

**netstat -tnlp | grep redis**

![20190625150219378.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 5][]

**注意****红色部分是总线ip稍后会给我们埋坑**。

11、创建集群之前准备

redis-trib.rb使用ruby实现的所以在执行集群创建命令之前我们需要安装ruby。

启动命令：

redis-trib.rb  create  --replicas  1  192.168.255.128:7003   192.168.255.128:7004   192.168.255.128:7005  192.168.255.3:7000  192.168.255.3:7001  192.168.255.3:7002

不安装的话会出现下图结果：

![20190625150616910.png][]

所以我们需要使用如下命令安装redis接口：

**gem install redis**

![20190625151054610.png][]

我们看到上图提示说需要redis的version 大于 2.3.0 。

这是因为我之前使用 yum -y install ruby ruby-devel rubygems rpm-build 安装的了ruby 但是安装的版本是2.0.0的。

我们可以使用RVM来对ruby进行环境的管理和切换，而RVM需要通过CRUL来进行下载。

12 安装CRUL

使用命令    **yum install curl**

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 6][]

13、使用curl安装rvm

命令： **curl -L get.rvm.io | bash -s stable**

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 7][]

14、使用key进行RVM的安装

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 8][]

**source ~/.bashrc**

**source ~/.bash\_profile**

执行上述命令使环境变量生效。

使用source让当前shell读入路径为" /usr/local/rvm/scripts/rvm "（路径可以自定义）的shell文件并依次执行文件中的所有语句，并重新执行刚修改的初始化文件，使之立即生效，而不必注销并重新登录

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 9][]

15、安装需要的ruby版本

**rvm install 2.4.6**

![20190625152434278.png][]

16、检查版本，移除旧版本，check新版本

**rvm use 2.4.6** \#启用新版本

**rvm remove 2.0.0**  \# 移除旧版本

**ruby -v** \#检查当前使用的版本号

![20190625152505409.png][]

17、然后继续redis接口安装（**gem install redis**）

![20190625152741429.png][]

18、现在可以执行redis集群启动命令

redis-trib.rb  create  --replicas  1  192.168.255.128:7003   192.168.255.128:7004   192.168.255.128:7005  192.168.255.3:7000  192.168.255.3:7001  192.168.255.3:7002

执行命令时出现下面的错误。

[ERR] Sorry, can't connect to node 192.168.255.3:7000

这个错误的原因是我们之前配置的所有节点都没有进行对外开放所以无法链接。

firewall-cmd --zone=public --add-port=7003/tcp --permanent 
    firewall-cmd --zone=public --add-port=7004/tcp --permanent 
    firewall-cmd --zone=public --add-port=7005/tcp --permanent 
    firewall-cmd --reload
    firewall-cmd --zone=public --add-port=7000/tcp --permanent 
    firewall-cmd --zone=public --add-port=7001/tcp --permanent 
    firewall-cmd --zone=public --add-port=7002/tcp --permanent 
    firewall-cmd --reload

在两台机器上分别执行上述命令开发端口。这里我们修改的是firewall防火墙。

此时执行会出现如下图的情况：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 10][]

后面的点会一直点一下一直等待中。

这是因为我们只是开放了客户端节点的端口，没有开放集群总线的端口，总线端口就是客户端端口+10000，上面我们提到重点注意的

19、在iptables中开发所有端口

我们使用命令

cd /etc/sysconfig/可以使用vi iptables 先查看一下 目前只是开放了 22 端口。

iptables -A INPUT -p tcp --dport 17001 -j ACCEPT
    iptables -A INPUT -p tcp --dport 17002 -j ACCEPT
    iptables -A INPUT -p tcp --dport 17000 -j ACCEPT
    iptables -A INPUT -p tcp --dport 7001 -j ACCEPT
    iptables -A INPUT -p tcp --dport 7002 -j ACCEPT
    iptables -A INPUT -p tcp --dport 7000 -j ACCEPT
    
    service iptables save #保存文件
    iptables -L -n #查看哪些端口开放了
    
    -----------------------------------------------
    iptables -A INPUT -p tcp --dport 17003 -j ACCEPT
    iptables -A INPUT -p tcp --dport 17004 -j ACCEPT
    iptables -A INPUT -p tcp --dport 17005 -j ACCEPT
    iptables -A INPUT -p tcp --dport 7003 -j ACCEPT
    iptables -A INPUT -p tcp --dport 7004 -j ACCEPT
    iptables -A INPUT -p tcp --dport 7005 -j ACCEPT
    service iptables save #保存文件
    iptables -L -n #查看哪些端口开放了

20、此时再次执行集群启动命令

[ERR] Node xxxxx is not empty. Either the node already knows other nodes (check with CLUSTER NODES)

会提示我们node节点不空，这是因为我们之前在执行redis集群启动命令的时候虽然一直等待，但是相关节点配置数据以及数据文件都已经生成。我们需要进入到我们的redis解压目录下删除掉图中红色的数据文件：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 11][]

执行rm \*\*\*\*  然后选择y

最后我们再次执行集群启动命令成功：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 12][]

21 测试集群效果：

在Xshell中新开一个窗口 如下图，使用7002的节点进行设值操作传递到7003主。（如图 03、04 00 都是主）

set redis cluster

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 13][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 14][]

接下来我们能在另外一台机器上链接05从节点，进行取值操作 get redis

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 15][]

集群功能测试成功。至此redis集群搭建测试成功。

[vm15_centos7]: https://pan.baidu.com/s/1_ak7ovHkG2R2uC-I8kE7Vg
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70]: /images/20211227/27a2f62dfae44298a2920f2cc3abd619.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 1]: /images/20211227/b23b242c0bb447e7aca6a6e30982da0d.png
[20190625144335798.png]: /images/20211227/f38cc62e4a864d06a8ece48d92dd1cee.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 2]: /images/20211227/54b22fbe39cd4da3ab0ee0863640c6bc.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 3]: /images/20211227/e3c93425dfb84154a2fa05c09499fd27.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 4]: /images/20211227/8956ed00efd94e77b57bc08019708131.png
[20190625145101320.png]: /images/20211227/a325ff2ca9e7453eb305a574ba73070b.png
[20190625150219378.png]: /images/20211227/8430e7b3a57c4feca3ca250cb1fb127c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 5]: /images/20211227/e52133b6b2f047f4b4109a8f358fce04.png
[20190625150616910.png]: /images/20211227/17215058ea754fa5a829d3a5210c2f87.png
[20190625151054610.png]: /images/20211227/70177fcc80ed49fbbd544521deac2baf.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 6]: /images/20211227/d4be2f3dd8084cd7b2c27a0aeb0607c0.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 7]: /images/20211227/580fc70df3e94ee6b127dd8867fd2fac.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 8]: /images/20211227/30029a6594ed4a558dcab9d3c4efb98c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 9]: /images/20211227/1db3412c0fca4ff880a94ec077d3aa14.png
[20190625152434278.png]: /images/20211227/59875db014114446b69ddc341ec59f4a.png
[20190625152505409.png]: /images/20211227/44d42858efb64e56a28f0b228c0ff795.png
[20190625152741429.png]: /images/20211227/62dfabe4fef34c0aa692edd9b5a3095b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 10]: /images/20211227/8e42cef8ab8e4b54b872456775d2a01f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 11]: /images/20211227/acfc4a9aa9114d83a10d0d494ef809e1.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 12]: /images/20211227/69026ee39da04e16ab02729277e13d99.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 13]: /images/20211227/4aa62ca1eaa94dc0b3e50c07b2bd08b9.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 14]: /images/20211227/fc73dc76974348aeb7d33d1f29798c3c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1lhbmd6YWlMZUhlSGU_size_16_color_FFFFFF_t_70 15]: /images/20211227/52ec865538714bc18eeab24a9645d97c.png