新装 linux 服务器，挂载原有多路径下lvm磁盘

先用fdisk -l 查看目前磁盘挂载情况

尝试挂载 /dev/xvdb 到 /data 目录

mkdir /data

mount /dev/xvdb /data

如果报错：

mount:you must specify the filesystem type

就格式化当前的设备

mkfs.ext4 /dev/xvdb

注意：首先 df -T -h 查看当前被挂载的设备的文件系统类型

Filesystem    Type    Size  Used Avail Use% Mounted on

/dev/mapper/VolGroup-lv_root

ext4     16G  795M   14G   6% /

tmpfs        tmpfs    5.8G     0  5.8G   0% /dev/shm

/dev/xvda1    ext4    485M   32M  429M   7% /boot

如果其他的硬盘是 ext3 就使用 mkfs.ext3 /dev/xvdb

如果是ext4 就使用 mkfs.ext3 /dev/xvdb然后再次尝试挂载设备

mount /dev/xvdb /data

注意：这种挂在为临时挂在，在系统重启之后挂载信息就会丢失，为了解决这个问题就必须要修改/etc/fstab 这个文件，添加信息进去

/dev/xvdb                    /opt                   ext4    defaults        1 2

fstab中存放了与分区有关的重要信息，其中每一行为一个分区记录，每一行又可分为六个部份，下面以/dev/hda7 / ext2 defaults 1 1为例逐个说明：

第一项是您想要mount的储存装置的实体位置，如hdb或如上例的/dev/hda7。设备名或者设备卷标名，（/dev/sda10 或者 LABEL=/）[源设备位置]

2. 第二项就是您想要将其加入至哪个目录位置，如/home或如上例的/,这其实就是在安装时提示的挂入点。设备挂载目录（例如上面的“/”或者“/mnt/D/”）[将要挂载到的位置]

3. 第三项就是所谓的local filesystem，其包含了以下格式：如ext、ext2、msdos、iso9660、nfs、swap等，或如上例的ext2，可以参见 /prco/filesystems说明。设备文件系统（例如上面的“ext3”或者“vfat”）[源设备的文件系统格式】、       4. 第四项就是mount时，所要设定的状态，如ro（只读）或如上例的defaults（包括了其它参数如rw, suid, dev, exec, auto, nouser, and async），可以参见「mount nfs」。（看帮助man mount）

对于已经挂载好的设备，例如上面的/dev/sda2，现在要改变挂载参数，这时可以不用卸载该设备，而可以使用下面的命令（没有挂载的设 备，remount 这个参数无效）#mount /mnt/D/ -o remount,ro   （改defaults为ro）为了安全起见，可以指明其他挂载参数，例如：

noexec（不允许可执行文件可执行，但千万不要把根分区挂为noexec，那就无法使用系统了，连mount 命令都无法使用了，这时只有重新做系统了！nodev（不允许挂载设备文件）nosuid,nosgid（不允许有suid和sgid属 性）nouser（不允许普通用户挂载）

5. 第五项是提供DUMP功能，在系统DUMP时是否需要BACKUP的标志位，其内定值是0。指明是否要备份，（0为不备份，1为要备份，一般根分区要备份）

6. 第六项是设定此filesystem是否要在开机时做check的动作，除了root的filesystem其必要的check为1之外，其它皆可视需要 设定，内定值是0。指明自检顺序。 （0为不自检，1或者2为要自检，如果是根分区要设为1，其他分区只能是2）</ol>

Linux下HDS存储多路径查看

在Redhat下确定需要划分的存储空间。在本例中需要进行划分的空间是从HDS AMS2000上划分到服务器的多路径存储空间。其中sddlmad为ycdb1上需要进行划分的空间，sddlmah为ycdb2上需要进行划分的空间。具体如下：

查看环境

# rpm -qa|grep device-mapper

device-mapper-event-1.02.32-1.el5

device-mapper-multipath-0.4.7-30.el5

device-mapper-1.02.32-1.el5

# rpm -qa|grep lvm2 lvm2-2.02.46-8.el5

查看空间

#fdisk -l

Disk /dev/sddlmad: 184.2 GB, 184236900352 bytes 255 heads, 63 sectors/track, 22398 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/sddlmah: 184.2 GB, 184236900352 bytes

255 heads, 63 sectors/track, 22398 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes

查看存储

#cd /opt/DynamicLinkManager/bin/

#./dlnkmgr view -lu

Product : AMS

SerialNumber : 83041424 LUs : 8

iLU HDevName DevicePathID Status

0000 sddlmaa /dev/sdb 000000 Online

/dev/sdj 000008 Online

/dev/sdr 000016 Online

/dev/sdz 000017 Online

0001 sddlmab /dev/sdc 000001 Online

/dev/sdk 000009 Online

/dev/sds 000018 Online

/dev/sdaa 000019 Online

0002 sddlmac /dev/sdd 000002 Online

/dev/sdl 000010 Online

/dev/sdt 000020 Online

/dev/sdab 000021 Online

0003 sddlmad /dev/sde 000003 Online

/dev/sdm 000011 Online

/dev/sdu 000022 Online

/dev/sdac 000023 Online

0004 sddlmae /dev/sdf 000004 Online

/dev/sdn 000012 Online

/dev/sdv 000024 Online

/dev/sdad 000025 Online

0005 sddlmaf /dev/sdg 000005 Online

/dev/sdo 000013 Online

/dev/sdw 000026 Online

/dev/sdae 000027 Online

0006 sddlmag /dev/sdh 000006 Online

/dev/sdp 000014 Online

/dev/sdx 000028 Online

/dev/sdaf 000029 Online

0007 sddlmah /dev/sdi 000007 Online

/dev/sdq 000015 Online

/dev/sdy 000030 Online

/dev/sdag 000031 Online

##############################################################

4. lvm.conf的修改

为了能够正确的使用LVM，需要修改其过滤器：

#cd /etc/lvm #vi lvm.conf

# By default we accept every block device

# filter = [ "a/.*/" ]

filter = [ "a|sddlm[a-p][a-p]|.*|","r|dev/sd|" ]

例：

[root@bsrunbak etc]# ls -l lvm*

[root@bsrunbak etc]# cd lvm

[root@bsrunbak lvm]# ls

archive backup cache lvm.conf

[root@bsrunbak lvm]# more lvm.conf

[root@bsrunbak lvm]# pvs

Last login: Fri Jul 10 11:17:21 2015 from 172.17.99.198

[root@bsrunserver1 ~]#

[root@bsrunserver1 ~]#

[root@bsrunserver1 ~]# df -h

FilesystemSize Used Avail Use% Mounted on

/dev/sda4 30G 8.8G 20G 32% /

tmpfs 95G 606M 94G 1% /dev/shm

/dev/sda2 194M 33M 151M 18% /boot

/dev/sda1 200M 260K 200M 1% /boot/efi

/dev/mapper/datavg-oraclelv

50G 31G 17G 65% /oracle

172.16.110.25:/Tbackup

690G 553G 102G 85% /Tbackup

/dev/mapper/tmpvg-oradatalv

345G 254G 74G 78% /oradata

/dev/mapper/datavg-lvodc

5.0G 665M 4.1G 14% /odc

[root@bsrunserver1 ~]# pvs

PV VG Fmt Attr PSize PFree

/dev/sda5datavg lvm2 a-- 208.06g 153.06g

/dev/sddlmba tmpvg lvm2 a-- 200.00g 49.99g

/dev/sddlmbb tmpvg lvm2 a-- 200.00g 0

[root@bsrunserver1 ~]# cd /etc/lvm

[root@bsrunserver1 lvm]# more lvm.conf

# Don't have more than one filter line active at once: only one gets

used.

# Run vgscan after you change this parameter to ensure that

# the cache file gets regenerated (see below).

# If it doesn't do what you expect, check the output of 'vgscan -vvvv'.

# By default we accept every block device:

# filter = [ "a/.*/" ]

# Exclude the cdrom drive

# filter = [ "r|/dev/cdrom|" ]

# When testing I like to work with just loopback devices:

# filter = [ "a/loop/", "r/.*/" ]

# Or maybe all loops and ide drives except hdc:

# filter =[ "a|loop|", "r|/dev/hdc|", "a|/dev/ide|", "r|.*|" ]

# Use anchors if you want to be really specific

# filter = [ "a|^/dev/hda8$|", "r/.*/" ]

filter = [ "a|/dev/sddlm.*|", "a|^/dev/sda5$|", "r|.*|" ]

[root@bsrunserver1 lvm]# df

Filesystem 1K-blocks Used Available Use% Mounted on

/dev/sda4 30963708 9178396 20212448 32% /

tmpfs 99105596620228 98485368 1% /dev/shm

/dev/sda2 198337 33546154551 18% /boot

/dev/sda1 204580 260204320 1% /boot/efi

/dev/mapper/datavg-oraclelv

51606140 31486984 17497716 65% /oracle

172.16.110.25:/Tbackup

722486368 579049760 106736448 85% /Tbackup

/dev/mapper/tmpvg-oradatalv

361243236 266027580 76865576 78% /oradata

/dev/mapper/datavg-lvodc

5160576680684 4217748 14% /odc

[root@bsrunserver1 lvm]#

You have new mail in /var/spool/mail/root

[root@bsrunserver1 lvm]#

[root@bsrunserver1 lvm]# pvs

PV VG Fmt Attr PSize PFree

/dev/sda5datavg lvm2 a-- 208.06g 153.06g

/dev/sddlmba tmpvg lvm2 a-- 200.00g 49.99g

/dev/sddlmbb tmpvg lvm2 a-- 200.00g 0

[root@bsrunserver1 lvm]#

进入文件：

[root@bsrunbak lvm]# cd /opt/D*/bin

or

[root@bsrunbak bin]# pwd

/opt/DynamicLinkManager/bin

显示HDS存储卷：

[root@bsrunbak lvm]# ./dlnkmgr view -lu

Linux多路径指的是除了主机和硬盘一条路径的连接，还包括了主机和网络服务器的连接形成的主机一对多的路径连接关系。通过多路径的连接，实现了磁盘的虚拟化。

1、安装多路径软件包：

device-mapper-1.02.67-2.el5

device-mapper-event-1.02.67.2.el5

device-mapper-multipath-0.4.7-48.el5

［root@RKDB01 Server］# rpm -ivh device-mapper-1.02.67-2.el5.x86_64.rpm

warning： device-mapper-1.02.67-2.el5.x86_64.rpm： Header V3 DSA signature： NOKEY， key ID 37017186

Preparing.。。 ########################################### ［100%］

package device-mapper-1.02.67-2.el5.x86_64 is already installed

［root@RKDB01 Server］# rpm -ivh device-mapper-event-1.02.67-2.el5.x86_64.rpm

warning： device-mapper-event-1.02.67-2.el5.x86_64.rpm： Header V3 DSA signature： NOKEY， key ID 37017186

Preparing.。。 ########################################### ［100%］

package device-mapper-event-1.02.67-2.el5.x86_64 is already installed

［root@RKDB01 Server］# rpm -ivh device-mapper-multipath-0.4.7-48.el5.x86_64.rpm

warning： device-mapper-multipath-0.4.7-48.el5.x86_64.rpm： Header V3 DSA signature： NOKEY， key ID 37017186

Preparing.。。 ########################################### ［100%］

package device-mapper-multipath-0.4.7-48.el5.x86_64 is already installed

2、设置开机启动，并检查安装包是否正常：

chkconfig --level 345 multipathd on

lsmod |grep dm_multipath

［root@RKDB01 Server］# chkconfig --level 345 multipathd on

［root@RKDB01 Server］# lsmod |grep dm_multipath

dm_multipath 58969 0

scsi_dh 42561 1 dm_multipath

dm_mod 102417 4 dm_mirror，dm_multipath，dm_raid45，dm_log

［root@RKDB01 Server］#

3、配置multipathd 使其正常工作，编辑/etc/multipath.conf，开放如下内容：

defaults {

udev_dir /dev

polling_interval 10

selector “round-robin 0”

path_grouping_policy multibus

getuid_callout “/sbin/scsi_id -g -u -s /block/%n”

prio_callout none

path_checker readsector0

rr_min_io 100

max_fds 8192

rr_weight priorities

failback immediate

no_path_retry fail

user_friendly_names yes

}

blacklist {

wwid 26353900f02796769

devnode “^（ram|raw|loop|fd|md|dm-|sr|scd|st）［0-9］*”

devnode “^hd［a-z］”

}

4、并关闭如下内容

#blacklist {

# devnode “*”

#}

#defaults {

27 # user_friendly_names yes

28 #}

5、完成之后执行如下命令发现多路径：

［root@RKDB01 Server］# modprobe dm-multipath

［root@RKDB01 Server］# multipath -F

［root@RKDB01 Server］# multipath dm-multipath

［root@RKDB01 Server］# multipath dm-round-robin

［root@RKDB01 Server］# service multipathd restart

正在关闭multipathd 端口监控程序： ［确定］

正在启动守护进程multipathd： ［确定］

［root@RKDB01 Server］# multipath -v2

［root@RKDB01 Server］# multipath -v2

［root@RKDB01 Server］# multipath -ll

mpath1 （3600d02310000011b16a5d57c6a1bd99a） dm-0 TOYOU，NetStor_iSUM510

［size=3.3T］［features=0］［hwhandler=0］［rw］

\_ round-robin 0 ［prio=2］［ena bled］

\_ 1:0：0:0 sdb 8:16 ［failed］［ready］

\_ 1:0：1:0 sdc 8:32 ［failed］［ready］

［root@RKDB01 Server］#

6、重启服务器后，可以看到多路径信息了：

［root@RKDB01 ~］# ll /dev/mapper/

总计 0

crw------- 1 root root 10， 60 11-05 22:35 control

brw-rw---- 1 root disk 253， 0 11-05 22:35 mpath1

brw-rw---- 1 root disk 253， 1 11-05 22:35 mpath2

［root@RKDB01 ~］# multipath -ll

mpath2 （3600d02310000011b76128b9c63138cf4） dm-1 TOYOU，NetStor_iSUM510

［size=3.2T］［features=0］［hwhandler=0］［rw］

\_ round-robin 0 ［prio=2］［active］

\_ 1:0：0:1 sdc 8:32 ［active］［ready］

\_ 1:0：1:1 sde 8:64 ［active］［ready］

mpath1 （3600d02310000011b16a5d57c6a1bd99a） dm-0 TOYOU，NetStor_iSUM510

［size=20G］［features=0］［hwhandler=0］［rw］

\_ round-robin 0 ［prio=2］［active］

\_ 1:0：0:0 sdb 8:16 ［active］［ready］

\_ 1:0：1:0 sdd 8:48 ［active］［ready］

7、通过fdisk 看可以生成了DM-0/DM-1两个盘，正是上面sdc/sde，sdb/sdd多路径后出来的：

［root@RKDB01 ~］# fdisk -l

Disk /dev/sda： 299.4 GB， 299439751168 bytes

255 heads， 63 sectors/track， 36404 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Device Boot Start End Blocks Id System

/dev/sda1 * 1 38 305203+ 83 Linux

/dev/sda2 39 13092 104856255 83 Linux

/dev/sda3 13093 19619 52428127+ 83 Linux

/dev/sda4 19620 36404 134825512+ 5 Extended

/dev/sda5 19620 26146 52428096 83 Linux

/dev/sda6 26147 28757 20972826 83 Linux

/dev/sda7 28758 30324 12586896 82 Linux swap / Solaris

/dev/sda8 30325 36404 48837568+ 83 Linux

Disk /dev/sdb： 21.4 GB， 21474836480 bytes

255 heads， 63 sectors/track， 2610 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/sdb doesn‘t contain a valid partition table

Disk /dev/sdc： 3568.4 GB， 3568429957120 bytes

255 heads， 63 sectors/track， 433836 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/sdc doesn’t contain a valid partition table

Disk /dev/sdd： 21.4 GB， 21474836480 bytes

255 heads， 63 sectors/track， 2610 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/sdd doesn‘t contain a valid partition table

Disk /dev/sde： 3568.4 GB， 3568429957120 bytes

255 heads， 63 sectors/track， 433836 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/sde doesn’t contain a valid partition table

Disk /dev/dm-0： 21.4 GB， 21474836480 bytes

255 heads， 63 sectors/track， 2610 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-0 doesn‘t contain a valid partition table

Disk /dev/dm-1： 3568.4 GB， 3568429957120 bytes

255 heads， 63 sectors/track， 433836 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Disk /dev/dm-1 doesn’t contain a valid partition table

Disk /dev/sdf： 4009 MB， 4009754624 bytes

255 heads， 63 sectors/track， 487 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Device Boot Start End Blocks Id System

/dev/sdf4 * 1 488 3915744+ b W95 FAT32

Partition 4 has different physical/logical endings：

phys=（486， 254， 63） logical=（487， 125， 22）

［root@RKDB01 ~］#

8、同时也可以在/dev/mapper目录中查看到多路径映射的信息：

［root@RKDB01 ~］# ll /dev/mapper/

总计 0

crw------- 1 root root 10， 60 11-06 00:49 control

brw-rw---- 1 root disk 253， 2 11-06 00:49 data-data001

brw-rw---- 1 root disk 253， 0 11-06 00:49 mpath1

brw-rw---- 1 root disk 253， 1 11-06 00:49 mpath2

---