【实验】 2台虚拟机（ubuntu）搭建分布式数据库集群环境（一）

朱雀 2023-07-17 04:47 87阅读 0赞

[【实验】 2台虚拟机（ubuntu）搭建分布式数据库集群环境（二）][2_ubuntu]

考虑到虚拟机数量过多会影响性能，本实验使用2台linux虚拟机作为实验环境。Linux 选择Ubuntu 16.04 Server. 事先在VMware上安装linux操作系统。 安装设置Windows 与Linux虚拟机共享文件夹参考如下：  
为了方便编辑配置文件，可以先安装 vim

sudo apt-get install vim

## 1. 集群配置如下 ##

数据节点1：192.168.50.128   nodeID   11
    数据节点2：192.168.50.129   nodeID    12
    管理节点：192.168.50.129     nodeID    1
    sql节点1：192.168.50.128     nodeID   
    sql节点2：192.168.50.129     nodeID

使用2台机器进行配置，各台机器上的均配置为SQL服务节点、数据节点与sql节点；192.168.50.129上配置一个管理节点。

（如果大家有条件建立多台虚拟机，可以将管理节点和SQL服务节点分开，也可以不再所有的数据节点上配置SQL节点。）

对于MySQL-Cluster的安装包下载，下载地址见http://dev.mysql.com/downloads/cluster/，务必根据linux操作系统选择正确的版本，并下载。

如果之前安装过mysql-server，在进行此次实验之前，需要将mysql-server卸载，执行以下指令卸载mysql

sudo apt-get autoremove --purge mysql-server™
    sudo apt-get remove mysql-server
    sudo apt-get autoremove mysql-server
    sudo apt-get remove mysql-common (非常重要)

## 2. 准备（192.168.150.129) ##

安装

adduser mysql 
    usermod -aG sudo mysql

下载 mysql-cluster\_8.0.19-1ubuntu16.04\_amd64.deb-bundle.tar  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MDQyMjEyMQ_size_16_color_FFFFFF_t_70]  
并放入Windows下的共享文件夹，然后在Linux虚拟机中存取。也可以在Linux虚拟机中下载。假定已经获取mysql-cluster\_8.0.19-1ubuntu16.04\_amd64.deb-bundle.tar到mysql home目录。解压文件到install目录

mkdir install
    tar -xvf mysql-cluster_8.0.19-1ubuntu16.04_amd64.deb-bundle.tar -C install/
    cd install

在安装 MySQL server binary前，可能需要安装一些依赖包

sudo apt update
    （也许还需要 sudu apt-get update）

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MDQyMjEyMQ_size_16_color_FFFFFF_t_70 1]

sudo apt install libaio1 libmecab2

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MDQyMjEyMQ_size_16_color_FFFFFF_t_70 2]克隆一个虚拟机，按着集群配置设置IP地址。这样就有两台linux有mysql cluster包的服务器。

## 3 安装配置集群管理器 ##

用dpkg指令在Cluster Manager 服务器 (假定为 192.168.50.129)上安装 ndb\_mgmd。

sudo dpkg -i mysql-cluster-community-management-server_7.6.6-1ubuntu18.04_amd64.deb

![在这里插入图片描述][20200319165857529.png]  
在第一次运行ndb\_mgmd前需要对其进行配置，正确配置是保证数据节点正确同步和负载分配的前提。

Cluster Manager 应该是MySQL Cluster 第一个启动的组件.它需要一个配置文件来加载参数. 我门创建配置文件: /var/lib/mysql-cluster/config.ini.

在Cluster Manager 所在机器上创建 /var/lib/mysql-cluster目录:

sudo mkdir /var/lib/mysql-cluster

然后用你熟悉的编辑器编辑配置文件:

sudo vim /var/lib/mysql-cluster/config.ini

内容如下：

[ndbd default]
    # Options affecting ndbd processes on all data nodes:
    NoOfReplicas=2  # Number of replicas
    
    [ndb_mgmd]
    # Management process options:
    hostname=192.168.50.129  # Hostname of the manager
    NodeId=1
    datadir=/var/lib/mysql-cluster  # Directory for the log files
    
    [ndbd]
    hostname=192.168.50.128 # Hostname/IP of the first data node
    NodeId=11            # Node ID for this data node
    datadir=/usr/local/mysql/data   # Remote directory for the data files
    
    [ndbd]
    hostname=192.168.50.129 # Hostname/IP of the second data node
    NodeId=12            # Node ID for this data node
    datadir=/usr/local/mysql/data   # Remote directory for the data files
    
    [mysqld]
    # SQL node options:
    hostname=192.168.50.129 # MySQL server/client i manager
    
    [mysqld]
    # SQL node options:
    hostname=192.168.50.128 # MySQL server/client i manager

注意IP地址要正确

如果是生产环境，应该根据实际情况调整配置参数，参考MySQL Cluster. 你还可以增加 data nodes (ndbd) 或 MySQL server nodes (mysqld).  
现在可以启动管理器，执行:

sudo ndb_mgmd -f /var/lib/mysql-cluster/config.ini

![在这里插入图片描述][20200319165954647.png]  
检查ndb\_mgmd 使用的端口 1186：

sudo netstat -plntu

从Windows编辑config.ini可能会报错，需要在Linux系统下编辑。

在启动服务前，可能需要杀掉正在运行的服务:

sudo pkill -f ndb_mgmd

下面打开并编辑下面 systemd Unit 文件，使服务可以自动加载：:

sudo vim /etc/systemd/system/ndb_mgmd.service

键下面文件内容:

[Unit]
    Description=MySQL NDB Cluster Management Server
    After=network.target auditd.service
    
    [Service]
    Type=forking
    ExecStart=/usr/sbin/ndb_mgmd -f /var/lib/mysql-cluster/config.ini
    ExecReload=/bin/kill -HUP $MAINPID
    KillMode=process
    Restart=on-failure
    
    [Install]
    WantedBy=multi-user.target

保存并关闭文件.  
这里只是加入了如何启动、停止和重启动ndb\_mgmd 进程的最小选项集合. 想要知道更多的相关信息，参阅systemd manual.  
采用daemon-reload重新加载systemd’s manager 配置:

sudo systemctl daemon-reload

让我们刚创建的服务生效，使MySQL Cluster Manage 可以开机执行:

sudo systemctl enable ndb_mgmd

最后，启动服务：

sudo systemctl start ndb_mgmd

可以通过如下语句验证NDB Cluster Management service服务正在执行：

sudo systemctl status ndb_mgmd

输出类似下面内容:

![在这里插入图片描述][20200402142931939.png_pic_center]

这表明ndb\_mgmd MySQL Cluster Management server 作为一个系统服务运行了。  
最后一步是设置Cluster Manager 允许其它MySQL Cluster 节点连入.  
如果没有配置过ufw 防火墙,可以跳过这个操作，进入第4步…  
添加允许数据节点连入的规则：

sudo ufw allow from 192.168.50.128
    sudo ufw allow from 192.168.50.129

会见到如下输出：

Output
    Rule added

现在Cluster Manager 应该启动运行了，并且能够通过局域网与集群其它节点通信了。

## 4 配置一个数据节点(假定在192.168.50.129上进行) ##

安装依赖包

sudo apt-get –f install 
    sudo apt install libclass-methodmaker-perl
    
    安装数据节点包
    
    sudo dpkg -i mysql-cluster-community-data-node_8.0.19-1ubuntu18.04_amd64.deb

数据节点将从固定位置/etc/my.cnf获取配置文件.创建文件并编辑:

sudo vim /etc/my.cnf

[mysql_cluster]
    # Options for NDB Cluster processes:
    ndb-connectstring=192.168.50.129  # location of cluster manager

本配置设定在管理器配置数据目录为 /usr/local/mysql/data. 运行服务前要创建相关目录:

sudo mkdir -p /usr/local/mysql/data

然后就可以启动服务了：

sudo ndbd

显示如下：  
![在这里插入图片描述][20200319170023420.png]  
NDB 数据节点守护程序成功启动!!!

如果出现连接问题，请打开防火墙：

sudo ufw allow from 192.168.50.129
    sudo ufw allow from 192.168.50.128

配置数据节点服务自启动：

打开并编辑如下 systemd Unit 文件:

sudo vim /etc/systemd/system/ndbd.service

内容如下:

[Unit]
    Description=MySQL NDB Data Node Daemon
    After=network.target auditd.service
    
    [Service]
    Type=forking
    ExecStart=/usr/sbin/ndbd
    ExecReload=/bin/kill -HUP $MAINPID
    KillMode=process
    Restart=on-failure
    
    [Install]
    WantedBy=multi-user.target

这里只是加入了如何启动、停止和重启动ndbd进程的最小选项集合. 想要知道更多的相关信息，参阅systemd manual.

采用daemon-reload重新加载systemd’s manager 配置:

sudo systemctl daemon-reload

让我们刚创建的服务生效，使data node daemon 可以开机执行:

sudo systemctl enable ndbd

最后，启动服务：

sudo systemctl start ndbd

可以通过如下语句验证NDB Cluster Management service服务正在执行：

sudo systemctl status ndbd

输出类似下面内容:

ndbd.service - MySQL NDB Data Node Daemon
       Loaded: loaded (/etc/systemd/system/ndbd.service; enabled; vendor preset: enabled)
       Active: active (running) since Thu ****-**-** 20:56:29 UTC; 8s ago
      Process: 11972 ExecStart=/usr/sbin/ndbd (code=exited, status=0/SUCCESS)
     Main PID: 11984 (ndbd)
        Tasks: 46 (limit: 4915)
       CGroup: /system.slice/ndbd.service
               ├─11984 /usr/sbin/ndbd
               └─11987 /usr/sbin/ndbd

这表明MySQL Cluster 数据节点守护进程作为一个 systemd service在运行. 数据节点起作用并能够连接到MySQL Cluster Manager.

其它数据节点可以采用类似步骤配置.

[2_ubuntu]: https://blog.csdn.net/weixin_40422121/article/details/105280969
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MDQyMjEyMQ_size_16_color_FFFFFF_t_70]: /images/20230528/1df6a7f7cd8145d5b750fc6ac40145b5.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MDQyMjEyMQ_size_16_color_FFFFFF_t_70 1]: /images/20230528/6127eb3f609b4bde8c538b723dc9cbc6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MDQyMjEyMQ_size_16_color_FFFFFF_t_70 2]: /images/20230528/fab9ecaddfb342f3bb5b503edb74794c.png
[20200319165857529.png]: /images/20230528/5f381d608d9245d0a2850902bcb92a75.png
[20200319165954647.png]: /images/20230528/20586cdda98046c7a3ed5dc21bec34b1.png
[20200402142931939.png_pic_center]: /images/20230528/9e763091be8842d08199bafff1c7c549.png
[20200319170023420.png]: /images/20230528/e30a98a982174209ae14957dab2b382c.png