linux做软raid5

2021-11-03

主机：192.168.20.63

总磁盘：50G

磁盘树形结构：lsblk

目标 ：把sda、sdb、sdc、sdd、sde、sdf这六块盘合起来做成raid5

1.对每块盘进行分区

其他的sdb、sdc、sdd、sde、sdf盘一次做以上的 *** 作

fdisk -l | grep fd#查看磁盘raid情况

软raid设置成功，如下

注意： 若磁盘标签类型为gpt，在做软raid时可能会失败，可将GPT转成MBR再做raid5

删除raid5

磁盘阵列软RAID实例.

前言：raid0, 容量倍增，加速。 raid1, 安全镜像备份。 raid5, 奇偶数据校验保证安全，磁盘利用率(n-1)。

****************************************

1. 准备硬盘分区。

****************************************

raid5 至少需要3快硬盘，我手上只有一块闲置硬盘，就拿它练手。

在一块硬盘上实现raid 是没有意义的，这里仅是为了实验，知道其过程。

分区如下:

主分区 /sdb1, 扩展分区/sdb10 随便干别的事情。

扩展分区/sdb{5..9} 做raid5

----------------------------------------

[root@hjj ~]# fdisk -l /dev/sdb

----------------------------------------

Disk /dev/sdb: 160.0 GB, 160041885696 bytes

255 heads, 63 sectors/track, 19457 cylinders

Units = cylinders of 16065 * 512 = 8225280 bytes

Sector size (logical/physical): 512 bytes / 512 bytes

I/O size (minimum/optimal): 512 bytes / 512 bytes

Disk identifier: 0x86ea33f5

Device Boot Start End Blocks Id System

/dev/sdb1 1324126033301 83 Linux

/dev/sdb23242 19457 1302550205 Extended

/dev/sdb53242648226033301 fd Linux raid autodetect

/dev/sdb66483972326033301 fd Linux raid autodetect

/dev/sdb79724 1296426033301 fd Linux raid autodetect

/dev/sdb8 12965 1620526033301 fd Linux raid autodetect

/dev/sdb9 16206 1944626033301 fd Linux raid autodetect

/dev/sdb10 19447 19457 88326 83 Linux

----------------------------------------

[root@hjj ~]# partprobe /dev/sdb

----------------------------------------

重新检测分区要通过， 可能需要重启系统。

****************************************

2. 创建raid5 设备/dev/md0

****************************************

raid 设备文件名，习惯上用md0, md1....等命名

注意: 创建需要内核支持， 选中相应的raid 选项，重编译内核，否则该命令不能通过,错误为invalid parameter

2.1 创建

--------------------------------------------------------------------------------

[root@hjj ~]# mdadm -C /dev/md0 -a yes -l 5 -n 4 -x 1 /dev/sdb{5..9}

--------------------------------------------------------------------------------

mdadm: Defaulting to version 1.2 metadata

解释一下:

-C --->create

-a --->autodetected

-l --->level raid5

-n --->raid devices 4 (使用)

-x --->spare devices 1(备用）

给一个参考多硬盘命令

[root@hjj ~]# mdadm -C /dev/md0 -a yes -l 5 -n 3 /dev/sd[bcd]1

2.2: 设备名称查询

[root@hjj ~]# ll /dev/md* -d

drwxr-xr-x 2 root root 60 Nov 7 01:51 /dev/md

brw-rw---- 1 root disk 9, 0 Nov 7 01:52 /dev/md0

2.3: 设备信息查询

----------------------------------------

[root@hjj ~]# mdadm --detail /dev/md0

----------------------------------------

/dev/md0:

Version : 1.2

Creation Time : Thu Nov 7 01:14:01 2013

Raid Level : raid5

Array Size : 78096384 (74.48 GiB 79.97 GB)

Used Dev Size : 26032128 (24.83 GiB 26.66 GB)

Raid Devices : 4

Total Devices : 5

Persistence : Superblock is persistent

Update Time : Thu Nov 7 01:43:21 2013

State : clean, degraded, recovering

Active Devices : 3

Working Devices : 5

Failed Devices : 0

Spare Devices : 2

Layout : left-symmetric

Chunk Size : 512K

Rebuild Status : 63% complete

Name : hjj.localdomain:0 (local to host hjj.localdomain)

UUID : 9dee9c47:58dfe491:5c8db1c6:9686eba5

Events : 25

Number Major Minor RaidDevice State

0 8 210 active sync /dev/sdb5

1 8 221 active sync /dev/sdb6

2 8 232 active sync /dev/sdb7

5 8 243 spare rebuilding /dev/sdb8

4 8 25- spare /dev/sdb9

****************************************

3: 格式化raid 设备(磁盘）

[root@hjj ~]# mkfs -t ext4 /dev/md0

****************************************

mke2fs 1.41.12 (17-May-2010)

Filesystem label=

OS type: Linux

Block size=4096 (log=2)

Fragment size=4096 (log=2)

Stride=128 blocks, Stripe width=384 blocks

4882432 inodes, 19524096 blocks

976204 blocks (5.00%) reserved for the super user

First data block=0

Maximum filesystem blocks=4294967296

596 block groups

32768 blocks per group, 32768 fragments per group

8192 inodes per group

Superblock backups stored on blocks:

32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,

4096000, 7962624, 11239424

Writing inode tables: done

Creating journal (32768 blocks):

done

Writing superblocks and filesystem accounting information:

done

This filesystem will be automatically checked every 34 mounts or

180 days, whichever comes first. Use tune2fs -c or -i to override.

****************************************

4. 挂载及使用raid 磁盘

****************************************

[root@hjj ~]# mount /dev/md0 /mnt

[root@hjj ~]# cd /mnt

[root@hjj /mnt]# ls

lost+found

使用raid 设备(虚拟盘)

[root@hjj /mnt]# echo "haha" >abc.txt

[root@hjj /mnt]# cat abc.txt

haha

[root@hjj ~]# df

Filesystem 1K-blocks Used Available Use% Mounted on

/dev/mapper/VolGroup-lv_root

51475068 40659416 8177828 84% /

tmpfs 1015868 224 1015644 1% /dev/shm

/dev/sda1 487652 67236390720 15% /boot

/dev/mapper/VolGroup-lv_home

97521332 10652080 81892408 12% /home

/dev/md0 76739624 53016 72765408 1% /mnt

****************************************

5. 设置开机启动RAID

****************************************

[root@hjj ~]# mdadm --detail --scan

ARRAY /dev/md0 metadata=1.2 spares=2 name=hjj.localdomain:0 UUID=9dee9c47:58dfe491:5c8db1c6:9686eba5

[root@hjj ~]# mdadm --detail --scan >/etc/mdadm.conf

经以上 *** 作，系统重启时自动命名为md0, 否则会是md127 等等值, 不固定。

[root@hjj ~]# vim /etc/fstab

添加:

/dev/md0/mntext4defaults0 0

****************************************

6. 其它：停用设备，插拔磁盘

更详细文档： man mdadm

****************************************

停用raid 盘：

[root@hjj ~]# mdadm --stop /dev/md0

查询

[root@hjj ~]# ll /dev/md* , 无设备

mdadm 还可模拟拔出硬盘，修复硬盘，插入硬盘

[root@hjj ~]# mdadm /dev/md0 --remove /dev/sdb5

验证:

[root@hjj ~]# mdadm --zero-superblock --force /dev/md0

[root@hjj ~]# mdadm /dev/md0 --add /dev/sdb5

验证:

验证方法:

[root@hjj ~]# mdadm --detail /dev/md0

删除该raid 设备， 完整的 *** 作过程如下示例。 比较规范，系统无错误。

当然，不按规范删除也可以。反正你也不要设备上的所有数据了。

mdadm /dev/md0 --fail /dev/sdb5 --remove /dev/sdb5

mdadm /dev/md0 --fail /dev/sdb6 --remove /dev/sdb6

mdadm /dev/md0 --fail /dev/sdb7 --remove /dev/sdb7

mdadm /dev/md0 --fail /dev/sdb8 --remove /dev/sdb8

mdadm /dev/md0 --fail /dev/sdb9 --remove /dev/sdb9

mdadm --remove /dev/md0

mdadm --stop /dev/md0

mdadm --misc --zero-superblock /dev/sdb5

mdadm --misc --zero-superblock /dev/sdb6

mdadm --misc --zero-superblock /dev/sdb7

mdadm --misc --zero-superblock /dev/sdb8

mdadm --misc --zero-superblock /dev/sdb9

即： 先删除RAID中的所有设备，然后停止,删除该RAID即可

为了防止系统启动时候启动raid, 应检查，修改相应的配置。

例如mdadm.conf, fstab 等

---