运维笔记28 （在集群上部署ip，http，存储等）

拼搏现实的明天。 2022-07-12 06:56 183阅读 0赞

概述：

之前我们已经将集群假设好了，也部署了fence断电管理，就差把服务放上去跑跑了，我们以http服务为例子，我们的这个服务需要的资源有ip,存储，服务软件，将这些部署到集群上之后，我们再测试一下我们部署的服务是不是高可用，今天的部署主要在web界面上进行。

1.添加切换服务的域

![Center][]

选择Add，添加一个域

![Center 1][]

首先定义名字，接下来的三个选项分别是按照结点优先级去进行服务，只在选定结点内切换服务，当从一个结点切换到另一个结点的时候不再自动切换回原先的结点。最下面是选择我们要添加的结点。

![Center 2][]

显示这样的标志表示添加成功。

2.添加资源

我们的http服务，需要三种资源，分别是ip，存储，服务，我们先不管存储，直接让存储在结点上，最后再搞定存储。

![Center 3][]

点击添加资源后，在这里选择添加一个ip资源。

![Center 4][]

ip资源的设置如上。

添加apache资源，我们选择用脚本的方式配置apache

![Center 5][]

这样就添加好了两个资源

![Center 6][]

3.整合资源组

最后一步，就是让两个资源组合起来成一个服务组，添加到服务组中。而且在server1和server2上安装http服务。

![Center 7][]

给这个服务组起名字，然后勾选服务自启动，而且服务独占，选择切换域名，选择切换策略（迁移）。

添加我们刚才配置的ip，http资源。

![Center 8][]

点击上面的开始按键就开启了这个服务组。

这时候回到命令行用命令查看状态。

[root@server1 html]# clustat 
    Cluster Status for newmo @ Wed Feb 15 03:37:57 2017
    Member Status: Quorate
    
     Member Name                    ID   Status
     ------ ----                    ---- ------
     server1.mo.com                     1 Online, Local, rgmanager
     server2.mo.com                     2 Online, rgmanager
    
     Service Name          Owner (Last)          State         
     ------- ----          ----- ------          -----         
     service:apache        server2.mo.com        started

命令显示两台机器正常，而且服务在server2上运行。

[root@server1 html]# clusvcadm -e apache

这是自启并且开启apache服务

[root@server1 html]# clusvcadm -d apache

关闭apache的自启动并且关闭服务，现在测试一下是否高可用。我们将server2上的http服务手动关闭。

[root@server2 html]# /etc/init.d/httpd stop

这时候看下集群的状况。

[root@server1 html]# clustat 
    Cluster Status for newmo @ Wed Feb 15 03:41:06 2017
    Member Status: Quorate
    
     Member Name                    ID   Status
     ------ ----                    ---- ------
     server1.mo.com                     1 Online, Local, rgmanager
     server2.mo.com                     2 Online, rgmanager
    
     Service Name          Owner (Last)          State         
     ------- ----          ----- ------          -----         
     service:apache        server1.mo.com        started

已经将服务切换到了server1。

4.添加存储资源

真正环境下的服务，存储都不在结点机上，而是一台数据库服务器其他的服务器上，我们也是这样实验，现在使用server3作为存储服务器，做一个iscsi网络分享存储。

给虚拟机添加一块8G的硬盘

Disk /dev/vda: 8589 MB, 8589934592 bytes
    16 heads, 63 sectors/track, 16644 cylinders
    Units = cylinders of 1008 * 512 = 516096 bytes
    Sector size (logical/physical): 512 bytes / 512 bytes
    I/O size (minimum/optimal): 512 bytes / 512 bytes
    Disk identifier: 0x00000000

服务端scsi:

yum install scsi-target-utils.x86_64 0:1.0.24-10.el6

修改配置文件/etc/tgt/targets.conf

<target iqn.2008-09.com.example:server.target1>
        backing-store /dev/vda
        initiator-address 172.25.9.20
        initiator-address 172.25.9.21
    </target>

然后启动服务，就将这个存储分享了

[root@server3 ~]# /etc/init.d/tgtd start
    Starting SCSI target daemon:                               [  OK  ]

查看一下是否分享成功

[root@server3 ~]# tgt-admin --show
    Target 1: iqn.2008-09.com.example:server.target1
        System information:
            Driver: iscsi
            State: ready
        I_T nexus information:
        LUN information:
            LUN: 0
                Type: controller
                SCSI ID: IET     00010000
                SCSI SN: beaf10
                Size: 0 MB, Block size: 1
                Online: Yes
                Removable media: No
                Prevent removal: No
                Readonly: No
                Backing store type: null
                Backing store path: None
                Backing store flags: 
            LUN: 1
                Type: disk
                SCSI ID: IET     00010001
                SCSI SN: beaf11
                Size: 8590 MB, Block size: 512
                Online: Yes
                Removable media: No
                Prevent removal: No
                Readonly: No
                Backing store type: rdwr
                Backing store path: /dev/vda
                Backing store flags: 
        Account information:
        ACL information:
            172.25.9.20
            172.25.9.21

如上就分享成功了。

客户端iscsi:

在server1上

安装iscsi\*，也就是iscsi-initiator-utils-6.2.0.873-10.el6.x8。

发现设备

[root@server1 html]# iscsiadm -m discovery -t st -p 172.25.9.22
    Starting iscsid:                                           [  OK  ]                                                       [  OK  ]
    172.25.9.22:3260,1 iqn.2008-09.com.example:server.target1

添加设备

[root@server1 html]# iscsiadm -m node -l
    Logging in to [iface: default, target: iqn.2008-09.com.example:server.target1, portal: 172.25.9.22,3260] (multiple)
    Login to [iface: default, target: iqn.2008-09.com.example:server.target1, portal: 172.25.9.22,3260] successful.

现在查看客户端的设备，是否有分享出的设备，发现已经有了。

分区，格式化后就可使用了。之后是创建逻辑卷。

[root@server1 html]# pvcreate /dev/sdb1
      dev_is_mpath: failed to get device for 8:17
      Physical volume "/dev/sdb1" successfully created
    [root@server1 html]# pvs
      PV         VG       Fmt  Attr PSize  PFree
      /dev/sda2  VolGroup lvm2 a--  19.51g    0 
      /dev/sdb1           lvm2 a--   8.00g 8.00g

这时切换到server2，进行设备发现等后，使用pvs，看下是否有物理卷。两边如果都发现了sdb1 8G的物理卷也就成功了。

继续创建vg，lv，在server1上

[root@server1 html]# vgcreate clustervg /dev/sdb1
      Clustered volume group "clustervg" successfully created

[root@server1 html]# vgs
      VG        #PV #LV #SN Attr   VSize  VFree
      VolGroup    1   2   0 wz--n- 19.51g    0 
      clustervg   1   0   0 wz--nc  8.00g 8.00g

[root@server1 html]# lvcreate -n lvclu -L 4g clustervg

[root@server1 html]# lvs
      LV      VG        Attr       LSize   Pool Origin Data%  Move Log Cpy%Sync Convert
      lv_root VolGroup  -wi-ao----  18.54g                                             
      lv_swap VolGroup  -wi-ao---- 992.00m                                             
      lvclu   clustervg -wi-a-----   4.00g

存储创建好了，现在有两种方式来使用这个存储，一种是仍然使用Conga来用脚本管理，第二中是使用GFS文件系统，就不需要使用管理软件了。

第一种：

![Center 9][]

填写的信息如上所显示，然后将资源加入服务组，此时请注意服务的顺序，存储一定要在服务的前面，先启动存储才能有服务。

开启服务组测试，建议使用clusvcadm -e apache开启服务

[root@server1 html]# clustat 
    Cluster Status for newmo @ Wed Feb 15 04:36:34 2017
    Member Status: Quorate
    
     Member Name                    ID   Status
     ------ ----                    ---- ------
     server1.mo.com                     1 Online, Local, rgmanager
     server2.mo.com                     2 Online, rgmanager
    
     Service Name          Owner (Last)          State         
     ------- ----          ----- ------          -----         
     service:apache        server1.mo.com        started

服务已经开启， 而且通过ip命令也可以看到ip被加到了这个机器上。

2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
        link/ether 52:54:00:31:79:cb brd ff:ff:ff:ff:ff:ff
        inet 172.25.9.20/24 brd 172.25.9.255 scope global eth0
        inet 172.25.9.101/24 scope global secondary eth0
        inet6 fe80::5054:ff:fe31:79cb/64 scope link 
           valid_lft forever preferred_lft forever

这个台机器被添加了一个ip，就是我们集群加的ip。

[Center]: /images/20220711/d7058f404b9d4e45ad50e18d92943b53.png
[Center 1]: /images/20220711/bc3f41e8f4d646a594f6c3f759360978.png
[Center 2]: /images/20220711/5f13f4e2bf894c788026601284507c9b.png
[Center 3]: /images/20220711/8c2d5e4670e4443f833e42e13dd87585.png
[Center 4]: /images/20220711/8bbad7dc0ee548bd8e57cfd0ae39b1b2.png
[Center 5]: /images/20220711/ddd8bae243134504816929b061df493f.png
[Center 6]: /images/20220711/d8bc4cac2e9f47178bf778e08d1d81c3.png
[Center 7]: /images/20220711/0c6b6ba732764a24848cb7aefc9b901e.png
[Center 8]: /images/20220711/e9b709366d0b4832a437bf8baddb8fa8.png
[Center 9]: /images/20220711/5735089b7f1347e1acac3e0689b7743f.png