分享:linux6.4多路径配置IBM V7000存储

一、主要操作步骤:

1、查看主机上光纤卡的WWN

[root@was1 host2]# pwd

/sys/class/fc_host/host2

[root@was1 host2]# cat /sys/class/fc_host/host*/port_name

0x5001438006342f80

2、在存储上进行mapping

3、在存储上查看是否能看到该HBA卡的WWN,也可重新扫描设备

[root@was2 host2]# cd /sys/class/scsi_host/host2

[root@was2 host2]# echo "- - -" >./scan

echo "- - -" >./sys/class/scsi_host/host7/scan

echo "- - -" >./sys/class/scsi_host/host7/scan

4、可以看到认到盘了

fdisk -l

二、注意点

v7000使用Linux device-mapper multipathing driver作为多路径软件

启用步骤:

1.service multipathd stop

2.修改/etc/multipath.conf

备份该文件cp /etc/multipath.conf /etc/bak.multipath.conf

blacklist {

# 黑名单,就是禁止哪些设备使用multipathing driver

# 默认情况下所以的设备都在multipath的黑名单中,所以即使启动了multipathd服务并加在了内核模块,multipath也不会对链路进行聚合,必须进行修改

# 可以按照wwid逐一加入,也可以使用devnode的方式按照规律批量加入

        wwid 1HITACHI_D60055750023

        wwid 1HITACHI_D60055750028

        devnode "^(ram|raw|loop|fd|md|dm-|sr|scd|st)[0-9]*"

        devnode "^hd[a-z]"

}

defaults {

     # 默认情况下multipath生成dm设备之后,会同时在/dev/mapper/下生成以磁盘wwid为名的符号链接指向对应的dm设备。

     # 如果想生成 mpath设备,则需要打开user_friendly_names选项

      polling_interval       30

      failback               immediate

      no_path_retry          5

      rr_min_io              100

      path_checker           tur

      user_friendly_names    yes

}

devices {

     # Storwize V7000  -->其实应该是SVC,因为2145是SVC的ID,V7000的ID是2076

     # Note: If you are using RHEL6 or SUSE Linux Enterprise Server 10 Service Pack 2,

     # use prio "alua" instead of prio_callout "/sbin/mpath_prio_alua /dev/%n" to disable

     # the Using deprecated prio_callout message. This value disables only the error message

     # and does not affect operations. If prio_callout "/sbin/mpath_prio_alua /dev/%n" is set

     # on SUSE Linux Enterprise Server 10 Service Pack 2, the Using deprecated prio_callout message

     # is issued for all devices when the multipath command is used.

     # 具体可参考information center

     device {

                vendor    "IBM"

                product   "2145"

                path_grouping_policy group_by_prio

                prio_callout   "/sbin/mpath_prio_alua /dev/%n"

        }

}

multipaths {      

        #可以给multipaths取别名,这样用multipath –ll看到的就是自己取的名字了,可以用此办法避免mpath混乱,固定名字,尤其在做双机的时候         

        multipath {

        wwid    360050768028081d5d80000000000000f

        alias   nectest01

        }

        multipath {

        wwid    360050768028081d5d800000000000010

        alias   nectest02

        }

        multipath {

        wwid    360050768028081d5d800000000000011

        alias   nectest03

        }

        multipath {

        wwid    360050768028081d5d800000000000012

        alias   nectest04

        }

}

三、其他说明:

1、如何查看磁盘的wwid呢?通过下面两个文件夹中的内容,以及对应存储上的配置,可以找到。

ls -l /dev/disk/by-id

[root@was1 disk]# ls -l ./by-id

total 0

lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d80000000000000f -> ../../sda

lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d800000000000010 -> ../../sdf

lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d800000000000011 -> ../../sdg

lrwxrwxrwx 1 root root 9 Apr  6 17:00 scsi-360050768028081d5d800000000000012 -> ../../sdd

2.重启multipathd服务(修改multipath.conf文件之后都应该重启multipath服务)

service multipathd restart

service multipathd reload

chkconfig multipathd on

systemctl restart multipathd.service     (REDHAT 7.1)

systemctl status multipathd.service

systemctl enable multipathd.service

3、清空已有的multipath记录

multipath -F

扫描磁盘,系统中会出现链路聚合之后的dm设备,同时也会在/dev/mapper/、/dev/mpath/目录下生成相应的设备。

multipath -v2

查看multipath拓扑结构

multipath -ll

4、可以在/dev/mapper下看到磁盘nectest01-nectest04,用这个逻辑名字来建pv、vg

另外一个重要的文件是/var/lib/multipath/bindings,这个文件中是磁盘的别名和wwid的对应关系,

但在我们这里看不到,因为我们在multipath.conf中启用了user_friendly_names,已经显示的指定了别名与wwid的关系

如果要做集群,则要求/dev/mapper下的磁盘别名一致,只要将multipath.conf中定义的磁盘alias一致即可。

参与5

2同行回答

wuxianyuwuxianyu系统运维工程师华胜信泰信息产业发展有限公司
真的好详细  得实验下 显示全部

真的好详细  得实验下

收起
系统集成 · 2016-09-09
浏览5193
lzg21stlzg21st存储工程师brcb
恩,很详细,其他存储也是大同小异显示全部

恩,很详细,其他存储也是大同小异

收起
银行 · 2016-09-09
浏览5707

提问者

zhoujia8218
系统运维工程师浙商银行
擅长领域: 服务器存储灾备

问题来自

相关问题

相关资料

相关文章

问题状态

  • 发布时间:2016-09-09
  • 关注会员:3 人
  • 问题浏览:9840
  • 最近回答:2016-09-09
  • X社区推广