软RAID管理命令mdadm详解<p>mdadm是linux下用于创建和管理软件RAID的命令，是一个模式化命令。但由于现在服务器一般都带有RAID阵列卡，并且RAID阵列卡也很廉价，且由于软件RAID的自身缺陷（不能用作启动分区、使用CPU实现，降低CPU利用率），因此在生产环境下并不适用。但为了学习和了解RAID原理和管理，因此仍然进行一个详细的讲解：</p>
<h2>一、创建模式</h2>
选项：-C<br />
专用选项：<br />
-l 级别<br />
-n 设备个数<br />
-a {yes|no} 自动为其创建设备文件<br />
-c 指定数据块大小（chunk）<br />
-x 指定空闲盘（热备磁盘）个数，空闲盘（热备磁盘）能在工作盘损坏后自动顶替<br />
注意：创建阵列时，阵列所需磁盘数为-n参数和-x参数的个数和<br />
<img alt="参数详解" class="img-thumbnail" src="/assets/upload/blog/thumbnail/2018-01/84c8ea6c57434a7087703e666a4337f7.png" /><br />
示例：
<h3>前置条件:</h3>
<ol>
<li><strong>使用fdisk创建/dev/sdb1 /dev/sdc2分区</strong></li>
<li><strong>创建的分区必须是主分区fdisk /dev/sd? 进入后 n然后选择p）</strong></li>
<li><strong>设置分区文件类型为fd（fdisk /dev/sd? 进入后 t然后fd）</strong></li>
</ol>
<h3>1、创建raid0：</h3>
<p><strong>1.1 创建raid</strong></p>
<pre>
<code class="language-html">mdadm -C /dev/md0 -a yes -l 0 -n 2 /dev/sdb{1,2}
mdadm -C /dev/md0 -a yes -l 0 -n 2 /dev/sdb1 /dev/sdc2</code></pre>
<img class="img-thumbnail" src="data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==" /><img class="img-thumbnail" src="data:image/gif;base64,R0lGODlhAQABAPABAP///wAAACH5BAEKAAAALAAAAAABAAEAAAICRAEAOw==" style="height:15px; width:15px" title="点击并拖拽以移动" /><br />
注意：用于创建raid的磁盘分区类型需为fd<br />
<strong> 1.2 格式化：</strong>
<pre>
<code class="language-html">mkfs.ext4 /dev/md0</code></pre>
注意：在格式化时，可以指定-E选项下的stride参数指定条带是块大小的多少倍，有在一定程度上提高软RAID性能，如块默认大小为4k，而条带大小默认为64k，则stride为16，这样就避免了RAID每次存取数据时都去计算条带大小，如：
<pre>
<code class="language-html">mkfs.ext4 -E stride=16 -b 4096 /dev/md0</code></pre>
<br />
其中stride=chunk/block，为2的n次方
<h3>2、创建raid1：</h3>
<strong>2.1 创建raid</strong>
<pre>
<code class="language-html">[root@localhost ~]# mdadm -C /dev/md1 -a yes -n 2 -l 1 /dev/sdb{5,6}
mdadm: Note: this array has metadata at the start and
may not be suitable as a boot device. If you plan to
store '/boot' on this device please ensure that
your boot-loader understands md/v1.x metadata, or use
--metadata=0.90
Continue creating array? y
mdadm: Defaulting to version 1.2 metadata
mdadm: array /dev/md1 started.</code></pre>
<br />
<strong>注意：</strong>这个提示是说软raid不能用作启动分区。<br />
<strong> 2.2 格式化：</strong>
<pre>
<code class="language-html">[root@localhost ~]# mkfs.ext4 /dev/md1</code></pre>
<h3><br />
3、创建raid5：</h3>
由于没有磁盘空间，我将原来做raid1的测试磁盘全部删除后重新建立四个分区用于raid5测试，分别为sdb5-8<br />
<strong>3.1 创建raid5</strong>
<pre>
<code class="language-html">[root@localhost ~]# mdadm -C /dev/md2 -a yes -l 5 -n 3 /dev/sdb{5,6,7}
mdadm: /dev/sdb5 appears to be part of a raid array:
level=raid1 devices=2 ctime=Sun Jul 14 09:14:25 2013
mdadm: /dev/sdb6 appears to be part of a raid array:
level=raid1 devices=2 ctime=Sun Jul 14 09:14:25 2013
mdadm: /dev/sdb7 appears to be part of a raid array:
level=raid1 devices=2 ctime=Sun Jul 14 09:14:25 2013
Continue creating array? y
mdadm: Defaulting to version 1.2 metadata
mdadm: array /dev/md2 started.</code></pre>
<br />
<strong>注意：</strong>由于我的分区刚才在raid1上使用过，因此有此提示。<br />
<strong>3.2 格式化：</strong>
<pre>
<code class="language-html">[root@localhost ~]# mkfs.ext4 /dev/md2</code></pre>
<br />
<strong>3.3 增加热备磁盘：</strong>
<pre>
<code class="language-html">[root@localhost ~]# mdadm /dev/md2 -a /dev/sdb8</code></pre>
<h3><br />
<strong>4、查看md状态：</strong></h3>
<strong>4.1 查看RAID阵列的详细信息：</strong><br />
<strong>选项：</strong> -D = --detail
<pre>
<code class="language-html">mdadm -D /dev/md# 查看指定RAID设备的详细信息</code></pre>
<br />
<strong>4.2 查看raid状态</strong>
<pre>
<code class="language-html">[root@localhost ~]# cat /proc/mdstat
Personalities : [raid0] [raid1]
md0 : active raid0 sdb2[1] sdb1[0]
4206592 blocks super 1.2 512k chunks
md1 : active raid1 sdb6[1] sdb5[0]
2103447 blocks super 1.2 [2/2] [UU]
unused devices: <none></code></pre>
<br />
<strong>注意：</strong>在创建raid前，应该先查看磁盘是否被识别，如果内核还为识别，创建Raid时会报错：
<pre>
<code class="language-html">cat /proc/partitions</code></pre>
<br />
如果没有被识别，可以执行命令：
<pre>
<code class="language-html">kpartx /dev/sdb或者partprobe/dev/sdb</code></pre>
<h5><strong>5.挂载raid到目录</strong></h5>
创建一个测试的挂载目录
<pre>
<code class="language-html">#mkdir /md</code></pre>
挂载上面的raid（这里挂载md0）
<pre>
<code class="language-html">#mount /dev/md0 /md</code></pre>
<br />
设置开机自动挂载<br />
编辑/etc/fstab
<pre>
<code>#vi /etc/fstab</code></pre>
添加下方最后一行
<pre>
<code class="language-html">#
# /etc/fstab
# Created by anaconda on Tue Apr 10 21:05:33 2018
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=7d9131a9-9b81-4e04-8beb-f6c834e1ac41 / xfs defaults 0 0
UUID=10d14473-dfd4-4a5d-a4e9-bd66117b450c /boot xfs defaults 0 0
UUID=9ad8d627-7699-4b7a-8c70-f03fcc63180e swap swap defaults 0 0
#mount RAID
/dev/md0 /md ext4 defaults 0 0
</code></pre>
如果挂载多个就按格式写多个<br />
<h2>二、管理模式</h2>
<strong>选项：</strong>-a(--add)，-d(--del),-r(--remove),-f(--fail)
<h3><strong>1、模拟损坏：</strong></h3>
<pre>
<code class="language-html">mdadm /dev/md1 -f /dev/sdb5</code></pre>
<h3><br />
<strong>2、移除损坏的磁盘：</strong></h3>
<pre>
<code class="language-html">mdadm /dev/md1 -r /dev/sdb5</code></pre>
<h3><br />
<strong>3、添加新的硬盘到已有阵列：</strong></h3>
<pre>
<code class="language-html">mdadm /dev/md1 -a /dev/sdb7</code></pre>
<br />
<strong>注意：</strong><br />
3.1、新增加的硬盘需要与原硬盘大小一致<br />
3.2、如果原有阵列缺少工作磁盘（如raid1只有一块在工作，raid5只有2块在工作），这时新增加的磁盘直接变为工作磁盘，如果原有阵列工作正常，则新增加的磁盘为热备磁盘。
<h3><strong>4、停止阵列：</strong></h3>
<p>选项：-S = --stop</p>
<pre>
<code class="language-html">mdadm -S /dev/md1</code></pre>
<h2>三、监控模式</h2>
选项：-F<br />
不常用，不做详细说明。
<h2>四、增长模式，用于增加磁盘，为阵列扩容：</h2>
<strong>选项：</strong>-G
<h3>示例，将上述raid5的热备磁盘增加到阵列工作磁盘中</h3>
<pre>
<code class="language-html">[root@localhost ~]# mdadm -G /dev/md2 -n 4</code></pre>
<br />
<strong>注意：</strong>-n 4 表示使用四块工作磁盘<br />
再次使用-D选项查看阵列详细信息如下：
<pre>
<code class="language-html">[root@localhost ~]# mdadm -D /dev/md2
……此处略掉部分信息……
Number Major Minor RaidDevice State
0 8 21 0 active sync /dev/sdb5
1 8 22 1 active sync /dev/sdb6
3 8 23 2 active sync /dev/sdb7
4 8 24 3 active sync /dev/sdb8</code></pre>
<h2>五、装配模式，软RAID是基于系统的，当原系统损坏了，需要重新装配RAID</h2>
<strong>选项：</strong>-A
<h3>示例：将上述已经停止的阵列重新装配：</h3>
<pre>
<code class="language-html">mdadm -A /dev/md1 /dev/sdb5 /dev/sdb6</code></pre>
<h3><br />
实现自动装配：</h3>
<p>mdadm运行时会自动检查/etc/mdadm.conf 文件并尝试自动装配，因此第一次配置raid后可以将信息导入到/etc/mdadm.conf 中，命令如下：</p>
<pre>
<code class="language-html">[root@localhost ~]# mdadm -Ds >/etc/mdadm.conf</code></pre>
<h2>六、常见情况操作说明</h2>
<h3><strong>案例1</strong>：</h3>
现在有A/B两块硬盘<br />
<br />
A盘分区情况:<br />
分一个区作为系统分区（sda1）100GB；<br />
分一个区作为raid分区（sdb2）600GB;<br />
<br />
B盘分区情况<br />
分一个区作为raid分区（sdb1）600GB<br />
<br />
情况①：硬盘B完全损坏<br />
raid恢复方案:<br />
新增一块硬盘大小大于600GB，分一个raid区（假如分区为sdb1）600GB<br />
执行命令:
<pre>
<code class="language-html">#mdadm /dev/md1 -a /dev/sdb1</code></pre>
执行后就会自动开始同步数据到sdc1模块上。可以通过以下命令查看进度
<pre>
<code class="language-html">#mdadm -D /dev/md1 </code></pre>
<pre>
<code>[root@localhost ~]# mdadm -D /dev/md1
/dev/md1:
Version : 1.2
Creation Time : Thu Jan 25 07:15:06 2018
Raid Level : raid1
Array Size : 629014528 (599.88 GiB 644.11 GB)
Used Dev Size : 629014528 (599.88 GiB 644.11 GB)
Raid Devices : 2
Total Devices : 2
Persistence : Superblock is persistent
Intent Bitmap : Internal
Update Time : Sun May 27 07:04:57 2018
State : clean, degraded, recovering
Active Devices : 1
Working Devices : 2
Failed Devices : 0
Spare Devices : 1
Consistency Policy : unknown
Rebuild Status : 1% complete
Name : localhost.localdomain:1 (local to host localhost.localdomain)
UUID : 401d70fc:1d8675af:2adb9bb4:0b9b37e6
Events : 16931
Number Major Minor RaidDevice State
0 8 33 0 active sync /dev/sdc1
2 8 17 1 spare rebuilding /dev/sdb1
[root@localhost ~]#
</code></pre>
等到完全进度100%即可。恢复完成。<br />
<br />
情况② 硬盘A完全坏掉<br />
注意：系统也在A盘的分区中。所以只能新增一块硬盘，并且新装一个系统。在装好系统后检查mdadm是否安装。如果没有安装则安装该软件。<br />
安装完成后将硬盘B插入系统中。此时在/dev/目录下就可以看到md1的raid盘。通过mdadm -D命令查看可以看到是一个降级的raid。这里只要再从新装的盘中分一个区或者再加一块硬盘分一个区进行重组即可。重组步骤<br />
1>新建一个raid分区（600G）<br />
2>执行命令添加热备盘即可 mdadm /dev/md1 -a /dev/sd?1<br />
<br />
<br />