网络存储之ISCSI部署与实践

以你之姓@ 2022-04-25 09:04 313阅读 0赞

### 1.iscsi基本原理 ###

1 ）iscsi组成

一个简单ISCSI系统大致由以下部分构成

*  ISCSI Initiator 或者 ISCSI HBA
 *  ISCSI Target
 *  以太网交换机
 *  一台或者多台服务器

2）iscsi 实际构成

1.  iscsi服务器用来安装ISCSI驱动程序，即安装ISCSI Initiator。
2.  IP网络就是以太网。
3.  Storage Route可以是以太网交换机或者路由器。
4.  ISCSI存储设备可以是ISCSI磁盘阵列，可以是具有存储功能的PC或者服务器。

iscsi Initiator

这是安装在计算机上的软件或者硬件设备，它负责与ISCSI存储设备进行通信。这里有2种通信方式：

1.  **软件形式**  
    即ISCSI initiator软件。在iscsi服务器上安装initiator后，Initiator软件可以将以太网虚拟成ISCSI卡，进而接受和发送ISCSI服务器上，从而实现主机和ISCSI存储设备之间的ISCSI协议和TCP/IP协议传输功能。这种方式只需要以太网卡和以太网交换机，无需其他的设备，因此成本最低。但是ISCSI报文和TCP/IP报文转换需要消耗服务器的CPU资源，只有在低I/O和低带宽性能要求的应用环境中才能使用这种方式。
2.  **硬件形式**  
    使用ISCSI HBA（Host Bus Adapter），即iSCSI Initiator硬件。这种方式需要先购买ISCSI HBA卡。然后将其安装在ISCSI服务器上，从而实现ISCSI服务器与交换机之间、iSCSI服务器与存储设备之间的高效数据传输。与第一种方式比较，硬件ISCSI HBA卡方式不需要消耗ISCSI服务器的CPU资源，同时硬件设备专用的。所以基于硬件的ISCSI Initiator可以提供更好的数据传输和存储性能，但是ISCSI HBA卡毕竟昂贵，需要使用者自己在性能和成本之间权衡。

so far,iSCSI Initiator软件一般都是免费的，CentOs和Rhel都能够很好的支持。现在发行的linux系统都默认自带了iscsi initiator

ISCSI Target

一个可以用于存储数据的ISCSI磁盘阵列或者具有ISCSI功能的设备都可以被成为“ISCSI Target”，因为大多数操作系统都可以利用一些软件将系统转为一个ISCSI Target。linux下的开源ISCSI Target软件---ISCSI Enterprise Target。  
    利用ISCSI Target软件，可以将服务器存储空间分配给客户机使用，客户机可以像使用本地硬盘一样使用ISCSI磁盘。包括对齐分区，格式化以及读写等。而且每个客户端可以向ISCSI磁盘写数据，互不干扰，并且不会破坏存储到服务器中的数据。同时，ISCSI target软件对用户的权限控制非常灵活，支持配置文件。  
   我们知道，ISCSI是使用TCP/IP协议进行通信的，因此ISCSI两端连接起来，仅仅需要一个以太网络就行了，所以，以太网络的速度很大程度上绝对了ISCSI的性能，所以我们需要配置一个最好是万兆交换机，再差劲也不能低于千兆交换机，且要做好交换机冗余，避免交换机宕机造成存储无法使用。

![866977-20161113124743592-1238783346.png][]

ISCSI原理结构图：

![866977-20161113124753702-1611026801.png][]

### 2 ISCSI的配置与实现 ###

**2.1 服务端的配置**

服务端(desktop虚拟机)： 
    fdisk /dev/vdb #在/dev/vdb上新分出一个区/dev/vdb1 
    yum install targetcli #下载交互软件 
    yum start target 
    systemctl stop firewalld 
    进入共享磁盘/dev/vdb1的设定： 
    targetcli #进入iSCSI目标交互式配置模式 
    /backstores/block create westos:king /dev/vdb1 #命名块设备 
    iscsi/ create iqn.2019-05.com.westos:king #生成共享设备 
    iscsi/iqn.2019-05.com.westos:king/tpg1/luns create /backstores/block/westos:king #创造共享设备指向本地设备的链接 
    iscsi/iqn.2019-05.com.westos:king/tpg1/acls create iqn.2019-05.com.westos:key1 #创建密码 
    iscsi/iqn.2019-05.com.westos:king/tpg1/portals create 172.25.60.100 #开放对外端口 exit

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 1][]

![20190531004618662.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 2][]

**2.2客户端配置**

客户端（server虚拟机）： 
    yum search iscsi 
    yum install iscis-initiator-utils 
    iscsiadm -m discovery -t st -p 172.25.60.100 发现100主机上的对外共享的磁盘
    vim /etc/iscsi/initiatorname.iscsi 写上设定的密码 
    systemctl restart iscisd 重启服务 
    iscsiadm -m node -T iqn.2019-05.com.westos:king -p 172.25.60.100 -l (登陆)操作共享的磁盘 这时，在客户端会出现一个新的分区(/dev/sda) 就是服务端上的/dev/vdb1 
    fdisk /dev/sda -----> /dev/sda1 
    mkfs.xfs /dev/sda1 
    mount /dev/sda1 /opt 
    cd /opt 
    touch file 就相当于在服务端/dev/vdb1上进行操作
    umount 卸载之后无法访问共享磁盘

![20190531071429330.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 3][]

![20190531070915261.png][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 4][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 5][]

**2.3共享磁盘自动挂载**

blkid     自动挂载的话不要写名称，名称会发生漂移，所以写id
    vim /etc/fstab 在里面写入 
    UUID="``" /mnt xfs defaults,_netdev 0 0 
    mount -a 
    reboot

![20190531071807419.png][]

![20190531071830590.png][]

![20190531071847448.png][]

![20190531071903920.png][]

2.4**删除共享磁盘**

客户端：
    yum install tree -y           为了更直观的看出共享磁盘认证信息的关系
    tree /var/lib/iscsi/
    
    iscsiadm -m node -T iqn.2019-05.com.westos:king -p 172.25.60.100 -u 退出 
    fdisk -l 共享磁盘消失
    systemctl restart iscsi 
    fdisk -l  会重新出现/dev/sdb1
    
    
    iscsiadm -m node -T iqn.2019-05.com.westos:king -p 172.25.60.100 -u 退出登陆 iscsiadm -m node -T iqn.2019-05.com.westos:king -p 172.25.60.100 -o delete 直接删除该设备 
    tree /var/lib/iscis看不到认证信

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 6][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 7][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 8][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 9][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 10][]

服务端：

targetcli
    ls
    clearconfig confirm=True（删除设定的共享磁盘）
    exit

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 11][]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 12][]

[866977-20161113124743592-1238783346.png]: /images/20220125/ccf27f45dd0b42f49c9b017aa4224333.png
[866977-20161113124753702-1611026801.png]: /images/20220125/94157fa9acb64774a73b78be1c919a49.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70]: /images/20220125/65b4c97f114941b586df1da6c96d1a7f.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 1]: /images/20220125/1e5d333147cc481e8c9fe4088a6500eb.png
[20190531004618662.png]: /images/20220125/f2b8f7bac93548ab8598b31978d7b919.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 2]: /images/20220125/cd79ff545bab4fba96c0dda013dce42d.png
[20190531071429330.png]: /images/20220125/24880c4e785c49a9ac193ef4e8e24434.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 3]: /images/20220125/127ddcb47d2a41fa91e88de8999f8c2f.png
[20190531070915261.png]: /images/20220125/bd27a8a88652489dba3b511a1f678daa.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 4]: /images/20220125/d2c08c7f16954a9594fca5e322dc0fe7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 5]: /images/20220125/2ee2f8ce1c5c4c268a2e6873139462a3.png
[20190531071807419.png]: /images/20220125/b248b85e1e2244a4af801a790f0d4a15.png
[20190531071830590.png]: /images/20220125/75dce935aacc49789eee0fb5673085f7.png
[20190531071847448.png]: /images/20220125/cb71d1ef019d4b3e9f5a4eed9a4ce0b0.png
[20190531071903920.png]: /images/20220125/b0c6ab4cdd3a4079807826702d1dd9eb.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 6]: /images/20220125/e6e589b35a2d46a2b7a13e99da1ce925.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 7]: /images/20220125/99c4bb0706c84795a0b88dfbb6053b94.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 8]: /images/20220125/d67d9ab1578849f1b0560bd206f67602.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 9]: /images/20220125/ca18820665e147cd9290a1a8e25ac9ee.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 10]: /images/20220125/b4d9e72bd413436eb4cd7bd2684e203c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 11]: /images/20220125/a859ecef40684d63ab3173714ac1a6b4.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3ZhbnZhbl8_size_16_color_FFFFFF_t_70 12]: /images/20220125/3611f288ccec414f8c10e74fadd7767b.png