Linux系统用device-mapper multipathing driver管理V7000存储的盘

1、查看主机上光纤卡的WWN
[root@test1 host2]# pwd
/sys/class/fc_host/host2
[root@test1 host2]# cat port_name
0x5001438006342f80

2、在V7000存储上进行mapping

在存储上查看是否能看到该HBA卡的WWN，mapping后可重新扫描设备
[root@oawas2 host2]# cd /sys/class/scsi_host/host2
[root@oawas2 host2]# echo "- - -" >./scan

可以看到认到盘了
fdisk -l

3、V7000使用Linux device-mapper multipathing driver作为多路径软件
启用步骤：
step1. service multipathd stop
step2.修改/etc/multipah.conf
备份该文件cp /etc/multipath.conf /etc/bak.multipath.conf

blacklist {
 # 黑名单，就是禁止哪些设备使用multipathing driver
 # 默认情况下所以的设备都在multipath的黑名单中，所以即使启动了multipathd服务并加在了内核模块，multipath也不会对链路进行聚合，必须进行修改
 # 可以按照wwid逐一加入，也可以使用devnode的方式按照规律批量加入
        wwid 1HITACHI_D60055750023
        wwid 1HITACHI_D60055750028
        devnode "^(ram|raw|loop|fd|md|dm-|sr|scd|st)[0-9]*"
        devnode "^hd[a-z]"
}
defaults {
# 默认情况下multipath生成dm设备之后，会同时在/dev/mapper/下生成以磁盘wwid为名的符号链接指向对应的dm设备。
# 如果想生成 mpath设备，则需要打开user_friendly_names选项
      polling_interval       30
      failback               immediate
      no_path_retry          5
      rr_min_io              100
      path_checker           tur
      user_friendly_names    yes
}
devices {
# Storwize V7000  -->其实应该是SVC，因为2145是SVC的ID，V7000的ID是2076
# Note: If you are using RHEL6 or SUSE Linux Enterprise Server 10 Service Pack 2,
# use prio "alua" instead of prio_callout "/sbin/mpath_prio_alua /dev/%n" to disable
# the Using deprecated prio_callout message. This value disables only the error message
# and does not affect operations. If prio_callout "/sbin/mpath_prio_alua /dev/%n" is set
# on SUSE Linux Enterprise Server 10 Service Pack 2, the Using deprecated prio_callout message
# is issued for all devices when the multipath command is used.
# 根据Linux版本的不同，prio_callout有所不同，具体可参考information center
     device {
                vendor    "IBM"
                product   "2145"
                path_grouping_policy group_by_prio
                prio_callout   "/sbin/mpath_prio_alua /dev/%n"
        }

}
multipaths {     
#可以给multipaths取别名，这样用multipath –ll看到的就是自己取的名字了，可以用此办法避免mpath混乱，固定名字，尤其在做双机的时候         
        multipath {
        wwid    360050768028081d5d80000000000000f
        alias   nectest01
        }

        multipath {
        wwid    360050768028081d5d800000000000010
        alias   nectest02
        }

        multipath {
        wwid    360050768028081d5d800000000000011
        alias   nectest03
        }
        multipath {
        wwid    360050768028081d5d800000000000012
        alias   nectest04
        }
}

如何查看磁盘的wwid呢？通过下面两个文件夹中的内容，以及对应存储上的配置，可以找到。
ls -l /dev/disk/by-id
[root@test1 disk]# ls -l ./by-id
total 0
lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d80000000000000f -> ../../sda
lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d800000000000010 -> ../../sdf
lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d800000000000011 -> ../../sdg
lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d800000000000012 -> ../../sdd

step3.重启multipathd服务（修改multipath.conf文件之后都应该重启multipath服务）
service multipathd restart
step4.chkconfig multipathd on

4、常用的一些multipath工具
清空已有的multipath记录
multipath -F

扫描磁盘,系统中会出现链路聚合之后的dm设备，同时也会在/dev/mapper/、/dev/mpath/目录下生成相应的设备。
multipath -v2

查看multipath拓扑结构
multipath -ll

可以在/dev/mapper下看到磁盘nectest01-nectest04，用这个逻辑名字来建pv、vg

另外一个重要的文件是/var/lib/multipath/bindings，这个文件中是磁盘的别名和wwid的对应关系，
但在我们这里看不到，因为我们在multipath.conf中启用了user_friendly_names，已经显示的指定了别名与wwid的关系

如果要做集群，则要求/dev/mapper下的磁盘别名一致，只要将multipath.conf中定义的磁盘alias一致即可。