高性价比开源软件集群(2)--mysql集群

小咪咪 2022-09-19 14:26 244阅读 0赞

没有女朋友就写点博客吧,了以解愁,接着昨天的继续.

mysql集群由三部分组成,管理节点,存储节点,SQL节点.模型图如下图所示:

![.JPG][]

管理节点顾名思义是用来管理存储节点和SQL节点的,存储节点和SQL节点都要与管理节点通信,SQL节点用来与应用程序通信,也是对外的接口,应用程序只能也只需访问它,存储节点用来负载均衡存储数据,而所用的存储引擎只能是NDB.一个集群至少由这三部分组成,每部分至少由一个节点组成,当然也可以把这三部分配置在一台电脑上,而且也可以只运行一个mysqld,ndb\_mgmd,ndbd,mysqld三个进程在一台电脑上运行就能实现一个目的.我们继续.

mysql的安装:

网上不少资料以及mysql官网上都说要下载一个max版本的mysql,其实现在,到官网上随便下一个二进制的server版就行了,现在的server都包含了必需的工具.如果自己编译源码就比较麻烦了,默认情况下,源码编译后是不包含集群的工具的,要自己单独再下载集群需要的源码再编译才行.这里我们采用第一种方法,直接下载二进制文件.

下载后请执行下列命令:

groupadd mysql

useradd -g mysql mysql

tar -xvf mysql.tar.gz

cd mysql

scripts/mysql\_install\_db --user=mysql

chown -R root .

chown -R mysql data

chgrp -R mysql .

bin/mysqld\_safe --user=mysql &

注意,在执行上述命令或mysql命令的时候可能会出现一系列的错误,这主要有两个可能,一是权限问题,二是一定要在mysql主目录下执行scripts/mysql\_install\_db --user=mysql和bin/mysqld\_safe --user=mysql & 如果你在script或bin或下执行mysql\_install\_db --user=mysql和mysqld\_safe --user=mysql & 都可能出现错误.

配置文件:

配置文件主要有两类,一是管理节点的配置文件,二是普通节点的配置文件.这里附上我的配置文件.

config.ini(管理节点的配置文件)

my.cnf(数据节点和SQL节点的配置文件)

config.ini中,\[ndb\_mgmd\]指明管理节点的地址  \[ndbd\]指明数据节点的地址  \[mysqld\]指明SQL节点的地址

my.cnf中,\[mysql\_cluster\]指明电脑上的mysqld,ndbd都公用这个配置,当然也可以分开配置,\[ndbd\]指明ndbd进程使用这个配置,  \[mysqld\]指明mysqld进程使用这个配置.示例配置如下:

config.ini

![None.gif][] \# Example Ndbcluster storage engine config file.  
![None.gif][]\#  
![None.gif][]\[ndbd default\]  
![None.gif][]NoOfReplicas= 2  
![None.gif][]MaxNoOfConcurrentOperations= 10000  
![None.gif][]DataMemory= 80M  
![None.gif][]IndexMemory= 24M  
![None.gif][]TimeBetweenWatchDogCheck= 30000  
![None.gif][]DataDir= /var/lib/mysql-cluster  
![None.gif][]MaxNoOfOrderedIndexes= 512  
![None.gif][]  
![None.gif][]\[ndb\_mgmd default\]  
![None.gif][]DataDir= /var/lib/mysql-cluster  
![None.gif][]  
![None.gif][]\[ndb\_mgmd\]  
![None.gif][]Id=1  
![None.gif][]HostName=202.115.138.47  
![None.gif][]  
![None.gif][]\[ndbd\]  
![None.gif][]Id= 2  
![None.gif][]HostName=202.115.138.217  
![None.gif][]\#hostname=localhost  
![None.gif][]datadir=/usr/local/mysql/data  
![None.gif][]\[ndbd\]  
![None.gif][]Id= 3  
![None.gif][]HostName=202.115.138.47   
![None.gif][]datadir=/usr/local/mysql/data  
![None.gif][]\[mysqld\]  
![None.gif][]Id= 4  
![None.gif][]hostname=202.115.139.47  
![None.gif][]\[mysqld\]  
![None.gif][]Id= 5  
![None.gif][]  
![None.gif][]\[mysqld\]  
![None.gif][]Id= 6  
![None.gif][]  
![None.gif][]\[mysqld\]  
![None.gif][]Id= 7  
![None.gif][]  
![None.gif][]\# choose an unused port number  
![None.gif][]\# in this configuration 63132, 63133, and 63134  
![None.gif][]\# will be used  
![None.gif][]\[tcp default\]  
![None.gif][]PortNumber= 63132  
![None.gif][]

my.cnf

![None.gif][] \# Example MySQL config file for medium systems.  
![None.gif][]\#  
![None.gif][]\# This is for a system with little memory (32M - 64M) where MySQL plays  
![None.gif][]\# an important part, or systems up to 128M where MySQL is used together with  
![None.gif][]\# other programs (such as a web server)  
![None.gif][]\#  
![None.gif][]\# You can copy this file to  
![None.gif][]\# /etc/my.cnf to set global options,  
![None.gif][]\# mysql-data-dir/my.cnf to set server-specific options (in this  
![None.gif][]\# installation this directory is /usr/local/mysql/data) or  
![None.gif][]\# ~/.my.cnf to set user-specific options.  
![None.gif][]\#  
![None.gif][]\# In this file, you can use all long options that a program supports.  
![None.gif][]\# If you want to know which options a program supports, run the program  
![None.gif][]\# with the "--help" option.  
![None.gif][]  
![None.gif][]\# The following options will be passed to all MySQL clients  
![None.gif][]\[client\]  
![None.gif][]\#password    = your\_password  
![None.gif][]port        = 3306  
![None.gif][]socket        = /tmp/mysql.sock  
![None.gif][]  
![None.gif][]\# Here follows entries for some specific programs  
![None.gif][]  
![None.gif][]\# The MySQL server  
![None.gif][]\[mysqld\]  
![None.gif][]port        = 3306  
![None.gif][]socket        = /tmp/mysql.sock  
![None.gif][]skip-locking  
![None.gif][]key\_buffer = 16M  
![None.gif][]max\_allowed\_packet = 1M  
![None.gif][]table\_cache = 64  
![None.gif][]sort\_buffer\_size = 512K  
![None.gif][]net\_buffer\_length = 8K  
![None.gif][]read\_buffer\_size = 256K  
![None.gif][]read\_rnd\_buffer\_size = 512K  
![None.gif][]myisam\_sort\_buffer\_size = 8M  
![None.gif][]  
![None.gif][]\# Don't listen on a TCP/IP port at all. This can be a security enhancement,  
![None.gif][]\# if all processes that need to connect to mysqld run on the same host.  
![None.gif][]\# All interaction with mysqld must be made via Unix sockets or named pipes.  
![None.gif][]\# Note that using this option without enabling named pipes on Windows  
![None.gif][]\# (via the "enable-named-pipe" option) will render mysqld useless!  
![None.gif][]\#   
![None.gif][]\#skip-networking  
![None.gif][]  
![None.gif][]\# Replication Master Server (default)  
![None.gif][]\# binary logging is required for replication  
![None.gif][]log-bin=mysql-bin  
![None.gif][]  
![None.gif][]\# required unique id between 1 and 2^32 - 1  
![None.gif][]\# defaults to 1 if master-host is not set  
![None.gif][]\# but will not function as a master if omitted  
![None.gif][]server-id    = 1  
![None.gif][]  
![None.gif][]\# Replication Slave (comment out master section to use this)  
![None.gif][]\#  
![None.gif][]\# To configure this host as a replication slave, you can choose between  
![None.gif][]\# two methods :  
![None.gif][]\#  
![None.gif][]\# 1) Use the CHANGE MASTER TO command (fully described in our manual) -  
![None.gif][]\#    the syntax is:  
![None.gif][]\#  
![None.gif][]\#    CHANGE MASTER TO MASTER\_HOST= < host > , MASTER\_PORT= < port > ,  
![None.gif][]\#    MASTER\_USER= < user > , MASTER\_PASSWORD= < password >  ;  
![None.gif][]\#  
![None.gif][]\#    where you replace  < host > ,  < user > ,  < password >  by quoted strings and  
![None.gif][]\#     < port >  by the master's port number (3306 by default).  
![None.gif][]\#  
![None.gif][]\#    Example:  
![None.gif][]\#  
![None.gif][]\#    CHANGE MASTER TO MASTER\_HOST='125.564.12.1', MASTER\_PORT=3306,  
![None.gif][]\#    MASTER\_USER='joe', MASTER\_PASSWORD='secret';  
![None.gif][]\#  
![None.gif][]\# OR  
![None.gif][]\#  
![None.gif][]\# 2) Set the variables below. However, in case you choose this method, then  
![None.gif][]\#    start replication for the first time (even unsuccessfully, for example  
![None.gif][]\#    if you mistyped the password in master-password and the slave fails to  
![None.gif][]\#    connect), the slave will create a master.info file, and any later  
![None.gif][]\#    change in this file to the variables' values below will be ignored and  
![None.gif][]\#    overridden by the content of the master.info file, unless you shutdown  
![None.gif][]\#    the slave server, delete master.info and restart the slaver server.  
![None.gif][]\#    For that reason, you may want to leave the lines below untouched  
![None.gif][]\#    (commented) and instead use CHANGE MASTER TO (see above)  
![None.gif][]\#  
![None.gif][]\# required unique id between 2 and 2^32 - 1  
![None.gif][]\# (and different from the master)  
![None.gif][]\# defaults to 2 if master-host is set  
![None.gif][]\# but will not function as a slave if omitted  
![None.gif][]\#server-id       = 2  
![None.gif][]\#  
![None.gif][]\# The replication master for this slave - required  
![None.gif][]\#master-host     =    < hostname >   
![None.gif][]\#  
![None.gif][]\# The username the slave will use for authentication when connecting  
![None.gif][]\# to the master - required  
![None.gif][]\#master-user     =    < username >   
![None.gif][]\#  
![None.gif][]\# The password the slave will authenticate with when connecting to  
![None.gif][]\# the master - required  
![None.gif][]\#master-password =    < password >   
![None.gif][]\#  
![None.gif][]\# The port the master is listening on.  
![None.gif][]\# optional - defaults to 3306  
![None.gif][]\#master-port     =   < port >   
![None.gif][]\#  
![None.gif][]\# binary logging - not required for slaves, but recommended  
![None.gif][]\#log-bin=mysql-bin  
![None.gif][]  
![None.gif][]\# Point the following paths to different dedicated disks  
![None.gif][]\#tmpdir        = /tmp/          
![None.gif][]\#log-update     = /path-to-dedicated-directory/hostname  
![None.gif][]  
![None.gif][]\# Uncomment the following if you are using BDB tables  
![None.gif][]\#bdb\_cache\_size = 4M  
![None.gif][]\#bdb\_max\_lock = 10000  
![None.gif][]  
![None.gif][]\# Uncomment the following if you are using InnoDB tables  
![None.gif][]\#innodb\_data\_home\_dir = /usr/local/mysql/data/  
![None.gif][]\#innodb\_data\_file\_path = ibdata1:10M:autoextend  
![None.gif][]\#innodb\_log\_group\_home\_dir = /usr/local/mysql/data/  
![None.gif][]\#innodb\_log\_arch\_dir = /usr/local/mysql/data/  
![None.gif][]\# You can set ..\_buffer\_pool\_size up to 50 - 80 %  
![None.gif][]\# of RAM but beware of setting memory usage too high  
![None.gif][]\#innodb\_buffer\_pool\_size = 16M  
![None.gif][]\#innodb\_additional\_mem\_pool\_size = 2M  
![None.gif][]\# Set ..\_log\_file\_size to 25 % of buffer pool size  
![None.gif][]\#innodb\_log\_file\_size = 5M  
![None.gif][]\#innodb\_log\_buffer\_size = 8M  
![None.gif][]\#innodb\_flush\_log\_at\_trx\_commit = 1  
![None.gif][]\#innodb\_lock\_wait\_timeout = 50  
![None.gif][]\#add by endall  
![None.gif][]\[mysqld\]  
![None.gif][]ndbcluster  
![None.gif][]ndb-connectstring=202.115.138.217  
![None.gif][]\[mysql\_cluster\]  
![None.gif][]ndb-connectstring=202.115.138.217  
![None.gif][]  
![None.gif][]\[mysqldump\]  
![None.gif][]quick  
![None.gif][]max\_allowed\_packet = 16M  
![None.gif][]  
![None.gif][]\[mysql\]  
![None.gif][]no-auto-rehash  
![None.gif][]\# Remove the next comment character if you are not familiar with SQL  
![None.gif][]\#safe-updates  
![None.gif][]  
![None.gif][]\[isamchk\]  
![None.gif][]key\_buffer = 20M  
![None.gif][]sort\_buffer\_size = 20M  
![None.gif][]read\_buffer = 2M  
![None.gif][]write\_buffer = 2M  
![None.gif][]  
![None.gif][]\[myisamchk\]  
![None.gif][]key\_buffer = 20M  
![None.gif][]sort\_buffer\_size = 20M  
![None.gif][]read\_buffer = 2M  
![None.gif][]write\_buffer = 2M  
![None.gif][]  
![None.gif][]\[mysqlhotcopy\]  
![None.gif][]interactive-timeout  
![None.gif][]

注意.config.ini中指明了所有的数据节点和SQL节点,它将管理这些地址,数据节点和SQL节点中都指明了管理节点的地址,它们通过它进行与管理节点的通信,但SQL节点中并没有指明数据节点的地址,所以它通过管理节点来与数据节点进程通信.

mysql群的启动:

1.启动管理节点:

ndb\_mgmd -f /var/lib/config.ini

2.启动数据节点:

ndbd --initial(这个参数只有在首次运行的时候才加上)

3.启动SQL节点:

mysqld\_safe --user=mysql

4.关闭群:

ndb\_mgm -e shutdown

它将导致群中ndb\_mgm,ndb\_mgmd ,ndbd进程温和的结束.

测试:

ndb\_mgm

show

显示如图:

![mysql_.JPG][]

[.JPG]: /images/20220828/5ad28c9047134cf59d085b31c1644796.png
[None.gif]: /images/20220828/360d40f102d343af86515d64acf69bca.png
[mysql_.JPG]: /images/20220828/0ac99a8fc30940d79a7a6c82dd6ae878.png