linux配置存储与多路径

多路径（multi-path）软件的介绍普通的电脑主机都是一个硬盘挂接到一个总线上，这里是一对一的关系。

而到了有光纤组成的SAN环境，由于主机和存储通过了光纤交换机连接，这样的话，就构成了多对多的关系。

也就是说，主机到存储可以有多条路径可以选择。

主机到存储之间的IO由多条路径可以选择，如下图：根据上图所示，每个主机到所对应的存储可以经过几条不同的路径，如果是同时使用的话，I/O 流量如何分配？其中一条路径坏掉了，如何处理？还有在操作系统的角度来看，每条路径，操作系统会认为是一个实际存在的物理盘，但实际上只是通向同一个物理盘的不同路径而已，这样是在使用的时候，就给用户带来了困惑。

多路径软件就是为了解决上面的问题应运而生的。

多路径的主要功能就是和存储设备一起配合实现如下功能：1. 故障的切换和恢复2. IO流量的负载均衡3. 磁盘的虚拟化由于多路径软件是需要和存储在一起配合使用的，不同的厂商基于不同的操作系统，都提供了不同的版本。

并且有的厂商，软件和硬件也不是一起卖的，如果要使用多路径软件的话，可能还需要向厂商购买license才行。

比如EMC公司基于linux下的多路径软件，就需要单独的购买license。

好在，RedHat和Suse的2.6的内核中都自带了免费的多路径软件包，并且可以免费使用，同时也是一个比较通用的包，可以支持大多数存储厂商的设备，即使是一些不是出名的厂商，通过对配置文件进行稍作修改，也是可以支持并运行的很好的。

本文一下的部分将专门针对Linux下多路径软件的配置安装，以及一些结合实际的操作进行详细的介绍（以下操作均在Suse10 SP1下进行）多路径软件包的构成device-m apper-1.02.13-6.9.i586.rpm该软件运行在底层，主要进行设备虚拟化和映射。

multipath-tools-0.4.7-34.18.i586.rpm，这个软件包可以在多路径的管理和监控工具，主要进行路径状态的检测，管理工作多路径软件包的安装Rpm –ivh device-m apper-1.02.13-6.9.i586.rpmRpm –ivh multipath-tools-0.4.7-34.18.i586.rpm安装完成后，使用命令modprobe dm_multipath来加载相应的模块，可以使用lsmod |grep dm_multipath来检查安装是否正常。

服务器多路径挂载FC存储一、物理连接1、打开服务器，将HBA卡插入插槽，并将光线连接到光线交换机。

注意光线如果插反会无法正常通信，也不会亮。

二、存储设置2、进入存储管理界面，进行分配存储空间与映射三、服务器设置rpm常用命令参数说明：rpm -e xxxxx --nodeps ##### RPM强制卸载rpm -ivh xxxxxx --replacepkgs ##### RPM将忽略软件包已被安装强行安装rpm -ivh xxxxxx --replacefiles ##### RPM将忽略文件冲突强行安装[root@DCXZM-SR43-NF5270M3 home]# rpm -e kpartx-0.4.9-87.el6.x86_64 –nodeps[root@DCXZM-SR43-NF5270M3 home]# rpm -ivh kpartx-0.4.9-93.el6.x86_64.rpm Preparing... ########################################### [100%]1:kpartx ########################################### [100%][root@DCXZM-SR43-NF5270M3 home]# rpm -ivh device-mapper-multipath-libs-0.4.9-93. el6.x86_64.rpmPreparing... ########################################### [100%]1:device-mapper-multipath########################################### [100%][root@DCXZM-SR43-NF5270M3 home]# rpm -ivh device-mapper-multipath-0.4.9-93.el6.x 86_64.rpmPreparing... ########################################### [100%]1:device-mapper-multipath########################################### [100%][root@DCXZM-SR43-NF5270M3 home]# service multipathd statusmultipathd is stopped[root@DCXZM-SR43-NF5270M3 home]# service multipathd startStarting multipathd daemon: [ OK ][root@DCXZM-SR43-NF5270M3 home]# chkconfig multipathd on通过mulitpath –l查看磁盘所有路径，然后通过multipath –f删除磁盘。

配置环境：存储厂家：Infortrend主机系统：CentOS6.0目录1、关闭防火墙步 (2)2、彻底关闭SELinux (2)3、开机网卡启动, 设置固定IP (3)4、开启SSh (4)5、device-mapper-multipath 安装与配置 (4)5.1 挂载光驱 (4)5.2 多路径安装： (4)5.3 检查安装情况 (5)5.5 创建多路径文件 (5)5.6 将多路径软件multipath 设置为开机启动 (6)5.7 修改多路径配置文件： (6)5.8 格式化mpathap1 和mpathap2 (8)5.9 挂在分区： (9)6、DD 测试 (9)1、关闭防火墙步关闭命令：service iptables stop永久关闭防火墙：chkco nfig iptables off两个命令同时运行，运行完成后查看防火墙关闭状态[root@localhost 〜]# service iptables stop iptables :清除防火墙规则：[确定]iptables :将链设置为政策ACCEPT : filter [确定] iptables :正在卸载模块：[确定][root@localhost ~]# chkc onfig iptables off [root@localhost ~]# service iptables status iptables :未运行防火墙。

[root@localhost ~]# :service iptables statusLroat^E oca 1 host service lptab les stop iptables：火塩规则七[确定]Iptablesj将縫设査为政策ACCEPT S filter [请危] iptables*正毎旳戟債块,[再走][raat^l acai host chkconfig iptabigs off[root©!o匚-]# service iptables status i ptables；未运行防火境•[roor^l ocal host2、彻底关闭SELinux[root@localhost etc]# vi /etc/seli nux/config# This file controls the state of SELinux on the system.# SELINUX= can take one of these three values:# enforcing - SELinux security policy is enforced.# permissive - SELinux prints warnings instead of enforcing.# disabled - No SELinux policy is loaded.#SELINUX=enforcing ----------------------------------------# SELINUXTYPE= can take one of these two values:前面加个#号注释掉它# targeted - Targeted processes are protected,# mls - Multi Level Security protection.SELINUXTYPE=disabled 修改为disabled "selinux/config" 13L, 458C written[root@localhost etc]#保存，退岀，重启系统，搞定。

ISCSI存储多路径配置1.安装openfiler（要求：主机需要至少两个以上的网卡设备并且分配有ip）提示最好在安装openfiler的时候就配置好2.添加一个IQN注意：只是先添加一个IQN 不可以映射LUN 要求是空的IQN3.打开控制台或者使用SSH控制台输入命令：[root@localhost ~]# iscsiadm -m discovery -t sendtargets -p 192.168.62.246 如图：介绍：这句命令是找出没有映射LUN的IQN 并指定访问IP地址。

里面包括我刚才新建的“192.168.62.246:3260,1 iqn.iscsimpio”指定访问IP为192.168.62.246然后我们再把这个IQN指定新的ip：192.168.62.247把同样的命令再写一遍换一下ip即可[root@localhost ~]# iscsiadm -m discovery -t sendtargets -p 192.168.62.247这样我们便配置好了一个多路径访问的IQN：iqn.iscsimpio同时指配两个IP 246和247我们可以用命令检查一下：[root@localhost ~]# iscsiadm -m node可以看到iqn.iscsimpio有两条记录并且ip是不同的4.修改配置文件：/etc/multipath.confblacklist {devnode "^sda"}## Use user friendly names, instead of using WWIDs as names.defaults {user_friendly_names yesudev_dir /devpath_grouping_policy multibusfailback immediateno_path_retry fail}重启multipathd服务[root@localhost ~]# service multipathd restart5.然后我们再去将这个IQN映射LUN即可参考资料：/view/22c0b428647d27284b735149.html太贵了下不下来。

RHEL系统带有iSCSI initiator软件，下面描述如何配置iSCSI Initiator实现对ISCSI卷的访问1.Linux iscsi 介绍（这一条介绍了linux iscsi的基本原理和相关命令，具体配置时可略过）在Linux内核中提供了iscsi驱动，iSCSI 驱动（driver）使主机拥有了通过IP网络访问存储的能力，驱动在主机（Initiator）和服务端（Target）间使用iSCSI协议在TCP/IP 网上传输SCSI请求和响应，在构建上，iSCSI驱动与TCP/IP栈、网络驱动和网络接口卡（NIC）结合，其等同于SCSI或光纤通道卡适配器驱动对主机总线卡（HBA）的作用。

驱动采用采用模块的方式，具体模块包括iscsi_tcp, libiscsi, libiscsi_tcp。

Initiator守护进程介绍：/etc/iscsi/iscsid.conf --initiator配置文件/sbin/iscsiadm --initiator管理工具open-iscsi包括两个守护进程iscsid和iscsi，其中iscsid是主进程，iscsi进程则主要负责根据配置，在系统启动时进行发起端（Initiator）到服务端（target）的登录，建立发起端与服务端的会话，使主机在启动后即可使用通过iSCSI提供服务的存储设备。

iscsid 进程实现iSCSI协议的控制路径以及相关管理功能。

例如守护进程（指iscsid）可配置为在系统启动时基于持久化的iSCSI数据库内容，自动重新开始发现（discovery）目标设备。

Initiator配置介绍（前提是已经安装iSCSI initiator）1> iSCSI initiator 名称设置initiator名称用来唯一标识一个iSCSI Initiator端。

保存此名称的配置文件为 /etc/iscsi/initiatorname.iscsi，命名规则可采用iqn-type格式，利用 iscsi-iname命令可产出一个名称，将此名称输入到initiatorname.iscsi配置文件即可。

Red Hat Enterprise Linux 7DM 多路径Configuring and managing Device Mapper MultipathLast Updated: 2023-03-25Red Hat Enterprise Linux 7 DM 多路径Configuring and managing Device Mapper Multipath Steven LevineRed Hat Customer Content Services******************. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .目录第 1 章 设备映射器多路径1.1. NEW AND CHANGED FEATURES 1.2. OVERVIEW OF DM MULTIPATH 1.3. 存储阵列支持1.4. DM MULTIPATH COMPONENTS1.5. DM MULTIPATH SETUP OVERVIEW 第 2 章 多路径设备2.1. 多路径设备识别器2.2. 在群集中保持多路径设备名称一致2.3. 多路径设备属性2.4. 逻辑卷中的多路径设备第 3 章 SETTING UP DM MULTIPATH 3.1. SETTING UP DM MULTIPATH 3.2. 在生成多路径设备时忽略逻辑磁盘3.3. CONFIGURING STORAGE DEVICES 3.4. SETTING UP MULTIPATHING IN THE INITRAMFS FILE SYSTEM 第 4 章 THE DM MULTIPATH CONFIGURATION FILE 4.1. 配置文件总览4.2. 配置文件黑名单4.3. 配置文件默认设置4.4. 多路径设备配置属性4.5. 配置文件设备4.6. ISCSI AND DM MULTIPATH OVERRIDES 第 5 章 DM MULTIPATH ADMINISTRATION AND TROUBLESHOOTING5.1. AUTOMATIC CONFIGURATION FILE GENERATION WITH MULTIPATH HELPER 5.2. RESIZING AN ONLINE MULTIPATH DEVICE 5.3. MOVING ROOT FILE SYSTEMS FROM A SINGLE PATH DEVICE TO A MULTIPATH DEVICE 5.4. MOVING SWAP FILE SYSTEMS FROM A SINGLE PATH DEVICE TO A MULTIPATH DEVICE 5.5. THE MULTIPATH DAEMON 5.6. ISSUES WITH QUEUE_IF_NO_PATH FEATURE 5.7. MULTIPATH COMMAND OUTPUT 5.8. MULTIPATH QUERIES WITH MULTIPATH COMMAND 5.9. MULTIPATH COMMAND OPTIONS 5.10. 使用 DMSETUP 命令确定设备映射器条目5.11. THE MULTIPATHD COMMANDS 5.12. TROUBLESHOOTING WITH THE MULTIPATHD INTERACTIVE CONSOLE 5.13. CLEANING UP MULTIPATH FILES ON PACKAGE REMOVAL 附录 A. 修订记录索引335778999101012121314151616172031364345454545474747484949505051525354目录1DM 多路径2第 1 章设备映射器多路径3DM 多路径4第 1 章设备映射器多路径5DM 多路径6第 1 章设备映射器多路径在这个配置中，可将 I/O分布到那四条路径中。

LINUX下多路径（multi-path）介绍及使用一、什么是多路径普通的电脑主机都是一个硬盘挂接到一个总线上，这里是一对一的关系。

而到了有光纤组成的SAN环境，或者由iSCSI组成的IPSAN环境，由于主机和存储通过了光纤交换机或者多块网卡及IP来连接，这样的话，就构成了多对多的关系。

也就是说，主机到存储可以有多条路径可以选择。

主机到存储之间的IO由多条路径可以选择。

每个主机到所对应的存储可以经过几条不同的路径，如果是同时使用的话，I/O流量如何分配？其中一条路径坏掉了，如何处理？还有在操作系统的角度来看，每条路径，操作系统会认为是一个实际存在的物理盘，但实际上只是通向同一个物理盘的不同路径而已，这样是在使用的时候，就给用户带来了困惑。

多路径软件就是为了解决上面的问题应运而生的。

多路径的主要功能就是和存储设备一起配合实现如下功能：1.故障的切换和恢复2.IO流量的负载均衡3.磁盘的虚拟化由于多路径软件是需要和存储在一起配合使用的，不同的厂商基于不同的操作系统，都提供了不同的版本。

并且有的厂商，软件和硬件也不是一起卖的，如果要使用多路径软件的话，可能还需要向厂商购买license才行。

比如EMC公司基于linux下的多路径软件，就需要单独的购买license。

好在， RedHat和Suse的2.6的内核中都自带了免费的多路径软件包，并且可以免费使用，同时也是一个比较通用的包，可以支持大多数存储厂商的设备，即使是一些不是出名的厂商，通过对配置文件进行稍作修改，也是可以支持并运行的很好的。

二、Linux下multipath介绍，需要以下工具包：在CentOS 5中，最小安装系统时multipath已经被安装，查看multipath是否安装如下：1、device-mapper-multipath：即multipath-tools。

主要提供multipathd和multipath 等工具和 multipath.conf等配置文件。

普通的电脑主机都是一个硬盘挂接到一个总线上，这里是一对一的关系。

而到了有光纤组成的SAN环境，由于主机和存储通过了光纤交换机连接，这样的话，就构成了多对多的关系。

也就是说，主机到存储可以有多条路径可以选择。

主机到存储之间的IO由多条路径可以选择，如下图：根据上图所示，每个主机到所对应的存储可以经过几条不同的路径，如果是同时使用的话，I/O流量如何分配？其中一条路径坏掉了，如何处理？还有在操作系统的角度来看，每条路径，操作系统会认为是一个实际存在的物理盘，但实际上只是通向同一个物理盘的不同路径而已，这样是在使用的时候，就给用户带来了困惑。

多路径软件就是为了解决上面的问题应运而生的。

多路径的主要功能就是和存储设备一起配合实现如下功能：1.故障的切换和恢复2.IO流量的负载均衡3.磁盘的虚拟化由于多路径软件是需要和存储在一起配合使用的，不同的厂商基于不同的操作系统，都提供了不同的版本。

并且有的厂商，软件和硬件也不是一起卖的，如果要使用多路径软件的话，可能还需要向厂商购买license 才行。

比如EMC公司基于linux下的多路径软件，就需要单独的购买license。

好在，RedHat和Suse 的2.6的内核中都自带了免费的多路径软件包，并且可以免费使用，同时也是一个比较通用的包，可以支持大多数存储厂商的设备，即使是一些不是出名的厂商，通过对配置文件进行稍作修改，也是可以支持并运行的很好的。

---Linux 内置HBA 驱动程序和内置多路径计划(HP)从Red Hat RHEL 5.2 和Novell SLES 10 SP2 开始的惠普支持的客户选项选项一：惠普提供的Emulex HBA 驱动程序和Multipulse 故障转移，或者惠普提供的Emulex HBA 驱动程序和内置Device Mapper Multipathing选项二：惠普提供的QLogic HBA 驱动程序和QLogic 故障转移，或者惠普提供的单一路径模式QLogic HBA 驱动程序和内置Device Mapper Multipathing选项三：内置HBA 驱动程序和内置Device Mapper Multipathing。