MySQL集群搭建详解（三种结点分离）

我不是女神ヾ 2022-08-25 13:45 21阅读 0赞

本文将搭建一个最简化的MySQL Cluster系统，配置方法中的所有命令都是以root账户运行。这个MySQL Cluster包含一个管理结点、两个数据结点、两个SQL结点，这五个结点会分别安装在五个虚拟机上，虚拟机的名称和IP如下所示：

<table style="table-layout:fixed; border-collapse:collapse; border:1px">      
 <tbody> 
  <tr> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:宋体; font-size:12px; color:#010101"><span style="font-size:10pt">管理结点</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">mysql-mgm</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">192.168.124.141</span></span> 
    </div> </td> 
  </tr> 
  <tr> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:宋体; font-size:12px; color:#010101"><span style="font-size:10pt">数据结点</span></span>&nbsp; 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">1</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">mysql-ndbd-1</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">192.168.124.142</span></span> 
    </div> </td> 
  </tr> 
  <tr> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:宋体; font-size:12px; color:#010101"><span style="font-size:10pt">数据结点</span></span>&nbsp; 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">2</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">mysql-ndbd-2</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">192.168.124.143</span></span> 
    </div> </td> 
  </tr> 
  <tr> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">SQL</span></span> 
     <span style="font-family:宋体; font-size:12px; color:#010101">&nbsp;<span style="font-size:10pt">结点</span></span> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">1</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">mysql-sql-1</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">192.168.124.144</span></span> 
    </div> </td> 
  </tr> 
  <tr> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">SQL</span></span> 
     <span style="font-family:宋体; font-size:12px; color:#010101">&nbsp;<span style="font-size:10pt">结点</span></span> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">2</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">mysql-sql-2</span></span> 
    </div> </td> 
   <td align="center" style="border:1px solid rgb(1,1,1)"> 
    <div> 
     <span style="font-family:Calibri; font-size:12px; color:#010101"><span style="font-size:10pt">192.168.124.145</span></span> 
    </div> </td> 
  </tr> 
 </tbody> 
</table>

**一、公共配置**

请在三个虚拟机上分别配置此处的配置项。

**1. 安装虚拟机**

虚拟机操作系统安装CentOS 6.4的x86\_64版本，使用NAT网络，并且还要安装vmware-tools，具体安装方法此处不详述。

**2. 拷贝mysql cluster**

下载以下版本的MySQL-Cluster：

[http://cdn.mysql.com/Downloads/MySQL-Cluster-7.3/mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86\_64.tar.gz][http_cdn.mysql.com_Downloads_MySQL-Cluster-7.3_mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz]

下载得到的压缩包拷贝至虚拟机的/root/Downloads目录，然后在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>cd /root/Downloads<br> tar -xvzf&nbsp;mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz<br> mv&nbsp;mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64 /usr/local/mysql<br> </td> 
  </tr> 
 </tbody> 
</table>

**3. 关闭安全策略**

关闭iptables防火墙（或者打开防火墙的1186、3306端口），在Shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>chkconfig --level 35 iptables off<br> </td> 
  </tr> 
 </tbody> 
</table>

关闭SELinux，在Shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>gedit /etc/selinux/config<br> </td> 
  </tr> 
 </tbody> 
</table>

将config文件中的SELINUX项改为disabled，修改后的config文件的内容如下：

<table> 
 <tbody> 
  <tr> 
   <td><br> # This file controls the state of SELinux on the system.<br> # SELINUX= can take one of these three values:<br> #&nbsp;&nbsp;&nbsp;&nbsp; enforcing - SELinux security policy is enforced.<br> #&nbsp;&nbsp;&nbsp;&nbsp; permissive - SELinux prints warnings instead of enforcing.<br> #&nbsp;&nbsp;&nbsp;&nbsp; disabled - No SELinux policy is loaded.<br> SELINUX=disabled<br> # SELINUXTYPE= can take one of these two values:<br> #&nbsp;&nbsp;&nbsp;&nbsp; targeted - Targeted processes are protected,<br> #&nbsp;&nbsp;&nbsp;&nbsp; mls - Multi Level Security protection.<br> SELINUXTYPE=targeted<br> </td> 
  </tr> 
 </tbody> 
</table>

最后重启系统

**二、配置管理结点（192.168.124.141）**

**1. 配置config.ini配置文件**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td> 
    <div>
      mkdir /var/lib/mysql-cluster 
    </div> 
    <div>
      cd /var/lib/mysql-cluster 
    </div> 
    <div>
      gedit&nbsp;config.ini 
    </div> 
    <div> 
     <br> 
    </div> </td> 
  </tr> 
 </tbody> 
</table>

配置文件config.ini内容如下：

<table> 
 <tbody> 
  <tr> 
   <td>[ndbd default]<br> NoOfReplicas=2<br> DataMemory=80M<br> IndexMemory=18M<br> <br> [ndb_mgmd]<br> NodeId=1<br> hostname=192.168.124.141<br> datadir=/var/lib/mysql-cluster<br> <br> [ndbd]<br> NodeId=2<br> hostname=192.168.124.142<br> datadir=/usr/local/mysql/data<br> <br> 
    <div>
      [ndbd] 
     <br> NodeId=3 
     <br> hostname=192.168.124.143 
     <br> datadir=/usr/local/mysql/data 
    </div> <br> 
    <div>
      [mysqld] 
     <br> NodeId=4 
     <br> hostname=192.168.124.144 
    </div> <br> [mysqld]<br> NodeId=5<br> hostname=192.168.124.145<br> </td> 
  </tr> 
 </tbody> 
</table>

**2. 安装管理结点**

安装管理节点，不需要mysqld二进制文件，只需要MySQL Cluster服务端程序(ndb\_mgmd)和监听客户端程序(ndb\_mgm)。在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>cp /usr/local/mysql/bin/ndb_mgm* /usr/local/bin<br> cd /usr/local/bin<br> chmod +x ndb_mgm*<br> </td> 
  </tr> 
 </tbody> 
</table>

**三、配置数据结点（192.168.124.142、192.168.124.143）**

**1. 添加mysql组和用户**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>groupadd mysql<br> useradd -g mysql mysql<br> </td> 
  </tr> 
 </tbody> 
</table>

**2. 配置my.cnf配置文件**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>gedit /etc/my.cnf<br> </td> 
  </tr> 
 </tbody> 
</table>

配置文件my.cnf的内容如下：

<table> 
 <tbody> 
  <tr> 
   <td>[mysqld]<br> basedir=/usr/local/mysql<br> datadir=/usr/local/mysql/data<br> socket=/usr/local/mysql/sock/mysql.sock<br> user=mysql<br> # Disabling symbolic-links is recommended to prevent assorted security risks<br> symbolic-links=0<br> <br> [mysqld_safe]<br> log-error=/var/log/mysqld.log<br> pid-file=/var/run/mysqld/mysqld.pid<br> <br> [mysql_cluster]<br> ndb-connectstring=192.168.124.141<br> </td> 
  </tr> 
 </tbody> 
</table>

**3. 创建系统数据库**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>cd /usr/local/mysql<br> mkdir sock<br> scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data<br> </td> 
  </tr> 
 </tbody> 
</table>

**4. 设置数据目录**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>chown -R root .<br> chown -R mysql.mysql /usr/local/mysql/data<br> chown -R mysql.mysql /usr/local/mysql/sock<br> chgrp -R mysql .<br> </td> 
  </tr> 
 </tbody> 
</table>

**5. 配置MySQL服务**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>cp support-files/mysql.server /etc/rc.d/init.d/<br> chmod +x /etc/rc.d/init.d/mysql.server<br> chkconfig --add mysql.server<br> </td> 
  </tr> 
 </tbody> 
</table>

**四、配置SQL结点（192.168.124.144、192.168.124.145）**

**1. 添加mysql组和用户**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>groupadd mysql<br> useradd -g mysql mysql<br> </td> 
  </tr> 
 </tbody> 
</table>

**2. 配置my.cnf配置文件**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>gedit /etc/my.cnf<br> </td> 
  </tr> 
 </tbody> 
</table>

配置文件my.cnf的内容如下：

<table> 
 <tbody> 
  <tr> 
   <td>[client]<br> socket=/usr/local/mysql/sock/mysql.sock<br> <br> [mysqld]<br> ndbcluster<br> datadir=/usr/local/mysql/data<br> socket=/usr/local/mysql/sock/mysql.sock<br> ndb-connectstring=192.168.124.141<br> <br> [mysql_cluster]<br> ndb-connectstring=192.168.124.141<br> </td> 
  </tr> 
 </tbody> 
</table>

**3. 创建系统数据库**

在shell中运行以下命令：

**4. 设置数据目录**

在shell中运行以下命令：

**5. 配置MySQL服务**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>cp support-files/mysql.server /etc/rc.d/init.d/<br> chmod +x /etc/rc.d/init.d/mysql.server<br> chkconfig --add mysql.server<br> </td> 
  </tr> 
 </tbody> 
</table>

**五、Cluster环境启动**

注意启动顺序：首先是管理节点，然后是数据节点，最后是SQL节点。

**1. 启动管理结点**

在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>ndb_mgmd -f /var/lib/mysql-cluster/config.ini<br> </td> 
  </tr> 
 </tbody> 
</table>

还可以使用ndb\_mgm来监听客户端，如下：

**2. 启动数据结点**

首次启动，则需要添加--initial参数，以便进行NDB节点的初始化工作。在以后的启动过程中，则是不能添加该参数的，否则ndbd程序会清除在之前建立的所有用于恢复的数据文件和日志文件。

<table> 
 <tbody> 
  <tr> 
   <td>/usr/local/mysql/bin/ndbd --initial<br> </td> 
  </tr> 
 </tbody> 
</table>

如果不是首次启动，则执行下面的命令。

<table> 
 <tbody> 
  <tr> 
   <td>/usr/local/mysql/bin/ndbd<br> </td> 
  </tr> 
 </tbody> 
</table>

**3. 启动SQL结点**

若MySQL服务没有运行，则在shell中运行以下命令：

<table> 
 <tbody> 
  <tr> 
   <td>/usr/local/mysql/bin/mysqld_safe --user=mysql &amp;<br> </td> 
  </tr> 
 </tbody> 
</table>

**4. 启动测试**

查看管理节点，启动成功：

![Image 1][]

**六、集群测试**

**1. 测试一**

现在我们在其中一个SQL结点上进行相关数据库的创建,然后到另外一个SQL结点上看看数据是否同步。

在SQL结点1（192.168.124.144）上执行：

<table> 
 <tbody> 
  <tr> 
   <td>shell&gt; /usr/local/mysql/bin/mysql -u root -p<br> mysql&gt;show databases;<br> mysql&gt;create database aa;<br> mysql&gt;use aa;<br> mysql&gt;CREATE TABLE ctest2 (i INT) ENGINE=NDB; //这里必须指定数据库表的引擎为NDB,否则同步失败<br> mysql&gt; INSERT INTO ctest2 () VALUES (1);<br> mysql&gt; SELECT * FROM ctest2;<br> </td> 
  </tr> 
 </tbody> 
</table>

然后在SQL结点2上看数据是否同步过来了

经过测试，在非master上创建数据，可以同步到master上

查看表的引擎是不是NDB，>show create table 表名；

**2. 测试二**

关闭一个数据节点 ，在另外一个节点写输入，开启关闭的节点，看数据是否同步过来。

首先把数据结点1重启，然后在结点2上添加数据

在SQL结点2(192.168.124.145)上操作如下：

<table> 
 <tbody> 
  <tr> 
   <td>mysql&gt; create database bb;<br> mysql&gt; use bb;<br> mysql&gt; CREATE TABLE ctest3 (i INT) ENGINE=NDB;<br> mysql&gt; use aa;<br> mysql&gt; INSERT INTO ctest2 () VALUES (3333);<br> mysql&gt; SELECT * FROM ctest2;<br> </td> 
  </tr> 
 </tbody> 
</table>

等数据结点1启动完毕，启动数据结点1的服务

<table> 
 <tbody> 
  <tr> 
   <td> 
    <div>
      #/usr/local/mysql/bin/ndbd --initial#service mysqld start 
    </div> 
    <div> 
     <br> 
    </div> </td> 
  </tr> 
 </tbody> 
</table>

然后登录进去查看数据

<table> 
 <tbody> 
  <tr> 
   <td> 
    <div>
      # /usr/local/mysql/bin/mysql -u root –p 
    </div> 
    <div> 
     <br> 
    </div> </td> 
  </tr> 
 </tbody> 
</table>

可以看到数据已经同步过来了，说明数据可以双向同步了。

**七、关闭集群**

1. 关闭管理节点和数据节点，只需要在管理节点（ClusterMgm--134）里执行：

<table> 
 <tbody> 
  <tr> 
   <td>shell&gt; /usr/local/mysql/bin/ndb_mgm -e shutdown<br> </td> 
  </tr> 
 </tbody> 
</table>

显示

<table> 
 <tbody> 
  <tr> 
   <td>Connected to Management Server at: localhost:1186<br> 2 NDB Cluster node(s) have shutdown.<br> Disconnecting to allow management server to shutdown.<br> </td> 
  </tr> 
 </tbody> 
</table>

2. 然后关闭Sql节点（135,136），分别在2个节点里运行：

<table> 
 <tbody> 
  <tr> 
   <td>shell&gt; /etc/init.d/mysql.server stop<br> Shutting down MySQL... SUCCESS!<br> </td> 
  </tr> 
 </tbody> 
</table>

注意：要再次启动集群，就按照第五部分的启动步骤即可，不过这次启动数据节点的时候就不要加”-initial”参数了。

[http_cdn.mysql.com_Downloads_MySQL-Cluster-7.3_mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz]: http://cdn.mysql.com/Downloads/MySQL-Cluster-7.3/mysql-cluster-gpl-7.3.4-linux-glibc2.5-x86_64.tar.gz
[Image 1]: