ソフトウェアraid故障時の対応

ソフトウェアRAID故障時の対応

あらかじめ下記のコマンドの結果を残しておく

yum install -y hdparm
cat /proc/mdstat
hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
mdadm -E /dev/sd*|egrep "(^/dev|Role)"
for i in /dev/sd? ; do parted $i unit B print; done

また、/etc/mdadm.conf のMAILADDRの項目を編集して、ステータスに変化があったらメールを飛ばすようにする。(ただし、メールサーバによっては拒否されることもあるので注意。2017年4月の時点ではgmailは大丈夫そうだけど、hotmailは無理そう。)

例えば

echo MAILADDR akyoshita@g.ecc.u-tokyo.ac.jp >> /etc/mdadm.conf
sudo systemctl restart mdmonitor

m128bなどは使っている。RAIDカードは単にHDDを1台ずつ提示するだけにしておく場合、Linux側でソフトウェアRAIDを行う。その場合StorCLIをインストールしておいて、下記のコマンドを実行してHDDのシリアルを表示させ、壊れた場合、どのHDDかわかるようにしておく。

/usr/local/MegaRAID\ Storage\ Manager/StorCLI/storcli64 /c0/eALL/sALL show all|egrep 'Device attributes|SN = |WWN = '|paste - - -
mdadm --fail /dev/md127 /dev/sdi1
mdadm --remove /dev/md127 /dev/sdi1

とやってRAIDからディスクを削除。

そして、壊れてしまったら新しく付け替えたディスクのデバイス名(例えば/dev/sdiとする)を指定してパーティションを作成

i=sdi; parted --script /dev/$i 'mklabel gpt'; parted --script /dev/$i 'mkpart hoge 0% 100%'; parted --script /dev/$i 'set 1 raid on'
#OS起動時ではなく、自前で組んだRAIDであれば、mkpart以降も必要と思う。OS起動時に組んだRAIDであればmkpart以降は不要かも。

複数のパーティションに分けている場合

for i in /dev/sd? ; do sudo parted $i unit B print; done
#とやって他のディスクの割り当てサイズをメモしておく

parted /dev/sda
(parted) mklabel gpt
(parted) unit B
(parted) mkpart
パーティションの名前?  []?
ファイルシステムの種類?  [ext2]? xfs
開始? 1048576
終了? 2998978740223
(parted) mkpart
開始? 2998978740224 3000052482047
(parted) mkpart
開始? 3000052482048 3000592498687
(parted) set 1 raid on
(parted) set 2 raid on
(parted) set 3 lvm on
(parted) q

そして、RAIDに組み込むため、下記のコマンドを入力してRAIDに追加 (RAIDのデバイスをmd0, 新しいディスクのシリアル番号をZ1F2C7N9とすると)

#mdadm /dev/md127 --add /dev/sdi #OSインストール時に構築したRAIDならこれで良い?GPTが破損していて再起動時にRAIDに組み込まれなさそう。
mdadm /dev/md0 --add /dev/sdi1
#もし微妙にディスクサイズが小さくてaddに失敗したら、partedをやり直して、開始位置を足りない分前にずらすと良い。

LVMの修復

pvscan
lvs
等で状況を確認した後、物理ディスクをLVMに追加する
pvcreate /dev/sda3
vgextend cl(ボリューム名) /dev/sda3
#LV->VGの名前を調べる
sudo lvdisplay
#VG->PG(HDD ID)を調べる
sudo pvdisplay
#HDD ID->HDD serialを調べる
sudo hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
[root@m128y yoshitake.kazutoshi]# gdisk /dev/sdb
GPT fdisk (gdisk) version 0.8.10

Partition table scan:
  MBR: protective
  BSD: not present
  APM: not present
  GPT: present

Found valid GPT with protective MBR; using GPT.

Command (? for help): p
Disk /dev/sdb: 15628053168 sectors, 7.3 TiB
Logical sector size: 512 bytes
Disk identifier (GUID): B2A89333-ED1F-4B7D-823A-B42B5BC631FA
Partition table holds up to 128 entries
First usable sector is 34, last usable sector is 15628053134
Partitions will be aligned on 2048-sector boundaries
Total free space is 4717 sectors (2.3 MiB)

Number  Start (sector)    End (sector)  Size       Code  Name
   1            2048         2101247   1.0 GiB     FD00
   2         2101248     15628050431   7.3 TiB     FD00

Command (? for help): n
Partition number (3-128, default 3):
First sector (34-15628053134, default = 15628050432) or {+-}size{KMGTP}: 34
Last sector (34-2047, default = 2047) or {+-}size{KMGTP}: 2047
Current type is 'Linux filesystem'
Hex code or GUID (L to show codes, Enter = 8300): EF02
Changed type of partition to 'BIOS boot partition'

Command (? for help): p
Disk /dev/sdb: 15628053168 sectors, 7.3 TiB
Logical sector size: 512 bytes
Disk identifier (GUID): B2A89333-ED1F-4B7D-823A-B42B5BC631FA
Partition table holds up to 128 entries
First usable sector is 34, last usable sector is 15628053134
Partitions will be aligned on 2048-sector boundaries
Total free space is 2703 sectors (1.3 MiB)

Number  Start (sector)    End (sector)  Size       Code  Name
   1            2048         2101247   1.0 GiB     FD00
   2         2101248     15628050431   7.3 TiB     FD00
   3              34            2047   1007.0 KiB  EF02  BIOS boot partition

Command (? for help): w

Final checks complete. About to write GPT data. THIS WILL OVERWRITE EXISTING
PARTITIONS!!

Do you want to proceed? (Y/N): y
OK; writing new GUID partition table (GPT) to /dev/sdb.
Warning: The kernel is still using the old partition table.
The new table will be used at the next reboot.
The operation has completed successfully.
reboot
sudo grub2-install /dev/sdb
起動した後で/bootパーティションが壊れた時の手順
# gdisk
Command (? for help): p
Disk /dev/sdg: 5860533168 sectors, 2.7 TiB
Logical sector size: 512 bytes
Disk identifier (GUID): E4A53E90-8035-47C5-9814-5B5C1944F1C9
Partition table holds up to 128 entries
First usable sector is 34, last usable sector is 5860533134
Partitions will be aligned on 8-sector boundaries
Total free space is 1948463450 sectors (929.1 GiB)

Number  Start (sector)    End (sector)  Size       Code  Name
   1            1953      3908203125   1.8 TiB     FD00
   2      3908245260      3912111824   1.8 GiB     0700

Command (? for help): n
Partition number (3-128, default 3):
First sector (34-5860533134, default = 3912111832) or {+-}size{KMGTP}: 34
Information: Moved requested sector from 34 to 40 in
order to align on 8-sector boundaries.
Use 'l' on the experts' menu to adjust alignment
Last sector (40-1952, default = 1952) or {+-}size{KMGTP}:
Current type is 'Linux filesystem'
Hex code or GUID (L to show codes, Enter = 8300): ef02
Changed type of partition to 'BIOS boot partition'

Command (? for help): p
Disk /dev/sdg: 5860533168 sectors, 2.7 TiB
Logical sector size: 512 bytes
Disk identifier (GUID): E4A53E90-8035-47C5-9814-5B5C1944F1C9
Partition table holds up to 128 entries
First usable sector is 34, last usable sector is 5860533134
Partitions will be aligned on 8-sector boundaries
Total free space is 1948463450 sectors (929.1 GiB)

Number  Start (sector)    End (sector)  Size       Code  Name
   1            1953      3908203125   1.8 TiB     FD00
   2      3908245260      3912111824   1.8 GiB     0700
   3              40            1952   956.5 KiB   EF02  BIOS boot partition
   
# grub2-install /dev/sdg
Installing for i386-pc platform.
Installation finished. No error reported.

##/dev/sdg2を/bootにマウントしておいて
grub2-mkconfig -o /boot/grub2/grub.cfg   

一旦再起動させて、 cat /proc/mdstat ですべてのディスクのステータスが[s]になっていることを確認。

mdadm --example /dev/sda1 などで物理ディスクに異常がなさそうなことを確認

https://raid.wiki.kernel.org/index.php/RAID_Recovery

mdadm --examine /dev/sd[a-z]1 |grep Events 各ディスクのRAID更新状況を表示させてイベントの数に差がないことを確認。50までなら問題ないみたい。

mdadm --stop --scan; mdadm --asssemble --scan では復旧せず。

mdadm --assemble --force --scan を2回実行するとアレイが復活。ただし、リビルドが走らないように必要最低限のディスクを指定して mdadm --assemble --force /dev/md0 /dev/sda1 /dev/sdb1 などとしたほうが良さそう。

まだマウントできなかったので、 xfs_repair -v /dev/md0 で修復するも修復せず、 xfs_repair -L -v /dev/md0 で復旧。ただし、半分以上のファイルが

XXXにアクセスできません: 構造体を内容消去する必要があります

となってしまった。

[root@m8b ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : active raid5 sde1[2] sdb1[0] sda1[1] sdd1[4]
      8790402048 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]
      bitmap: 0/22 pages [0KB], 65536KB chunk

unused devices: <none>
[root@m8b ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       Hitachi HDS5C3030ALA630
        Serial Number:      MJ1313YNG4TK0C
/dev/sdb:
        Model Number:       Hitachi HDS5C3030ALA630
        Serial Number:      MJ1313YNG4S9YC
/dev/sdc:
        Model Number:       ST250DM000-1BD141
        Serial Number:      Z3TNEE16
/dev/sdd:
        Model Number:       TOSHIBA DT01ACA300
        Serial Number:      Y3CB5NHGS
/dev/sde:
        Model Number:       Hitachi HDS5C3030ALA630
        Serial Number:      MJ1313YNG4UTNC
[root@m8b ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sdc1.
mdadm: No md superblock detected on /dev/sdc2.
/dev/sda:
/dev/sda1:
   Device Role : Active device 1
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 0
/dev/sdc:
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 3
/dev/sde:
/dev/sde1:
   Device Role : Active device 2
[root@m8b ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA Hitachi HDS5C303 (scsi)
ディスク /dev/sda: 3000592982016B
セクタサイズ (論理/物理): 512B/512B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  3000592498687B  3000591450112B                          raid

モデル: ATA Hitachi HDS5C303 (scsi)
ディスク /dev/sdb: 3000592982016B
セクタサイズ (論理/物理): 512B/512B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  3000592498687B  3000591450112B                          raid

モデル: ATA ST250DM000-1BD14 (scsi)
ディスク /dev/sdc: 250059350016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: msdos
ディスクフラグ:

番号  開始         終了           サイズ         タイプ   ファイルシステム  フラグ
 1    1048576B     1074790399B    1073741824B    primary  xfs               boot
 2    1074790400B  250059161599B  248984371200B  primary                    lvm

モデル: ATA TOSHIBA DT01ACA3 (scsi)
ディスク /dev/sdd: 3000592982016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  3000592498687B  3000591450112B                          raid

モデル: ATA Hitachi HDS5C303 (scsi)
ディスク /dev/sde: 3000592982016B
セクタサイズ (論理/物理): 512B/512B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  3000592498687B  3000591450112B                          raid

[root@m16 ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sdb1[5] sdf1[3] sda1[2] sdd1[1] sde1[0]
      31255568384 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/4] [UUUU_]
      [>....................]  recovery =  0.1% (12796544/7813892096) finish=10630.4min speed=12230K/sec
      bitmap: 1/59 pages [4KB], 65536KB chunk

unused devices: <none>
[root@m16 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZR13J18F
/dev/sdb:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZR13J1PW
/dev/sdc:
        Model Number:       TOSHIBA MD04ACA400
        Serial Number:      66NAKLELFSAA
/dev/sdd:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZR13J13Z
/dev/sde:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZR13J0XF
/dev/sdf:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZR13J1HW
[root@m16 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sdc1.
mdadm: No md superblock detected on /dev/sdc2.
mdadm: No md superblock detected on /dev/sdc3.
/dev/sda:
/dev/sda1:
   Device Role : Active device 2
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 4
/dev/sdc:
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 1
/dev/sde:
/dev/sde1:
   Device Role : Active device 0
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 3
[root@m16 ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sda: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdb: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA TOSHIBA MD04ACA4 (scsi)
ディスク /dev/sdc: 4000787030016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始         終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B     2097151B        1048576B                                bios_grub
 2    2097152B     1075838975B     1073741824B     xfs
 3    1075838976B  4000786153471B  3999710314496B                          lvm

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdd: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sde: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdf: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid
[root@m24 yoshitake]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : active raid5 sda2[0] sdb1[1] sdc1[3]
      966146048 blocks super 1.2 level 5, 512k chunk, algorithm 2 [3/3] [UUU]
      bitmap: 4/4 pages [16KB], 65536KB chunk

unused devices: <none>
[root@m24 yoshitake]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       WDC WD5000AAKS-00A7B2
        Serial Number:      WD-WMASY7805526
/dev/sdb:
        Model Number:       ST3500418AS
        Serial Number:      5VM8934X
/dev/sdc:
        Model Number:       ST3500418AS
        Serial Number:      5VM80ZL5
/dev/sdd:
        Model Number:       SSI H/W RAID5
        Serial Number:      6ZYZHUH5NZX6CFIH5LST
[root@m24 yoshitake]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sda1.
mdadm: No md superblock detected on /dev/sda3.
mdadm: No md superblock detected on /dev/sdb2.
mdadm: No md superblock detected on /dev/sdc2.
mdadm: No md superblock detected on /dev/sdd1.
/dev/sda:
/dev/sda2:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 1
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 2
/dev/sdd:

[root@m24 ~]# fdisk -l

Disk /dev/sdb: 500.1 GB, 500107862016 bytes, 976773168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト
Disk label type: dos
ディスク識別子: 0x00087065

デバイス ブート      始点        終点     ブロック   Id  システム
/dev/sdb1            2048   966410239   483204096   fd  Linux raid autodetect
/dev/sdb2       966410240   976773119     5181440   8e  Linux LVM

Disk /dev/sda: 500.1 GB, 500107862016 bytes, 976773168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト
Disk label type: dos
ディスク識別子: 0x0002f3aa

デバイス ブート      始点        終点     ブロック   Id  システム
/dev/sda1   *        2048     2099199     1048576   83  Linux
/dev/sda2         2099200   968507391   483204096   fd  Linux raid autodetect
/dev/sda3       968507392   976773119     4132864   8e  Linux LVM

Disk /dev/sdc: 500.1 GB, 500107862016 bytes, 976773168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト
Disk label type: dos
ディスク識別子: 0x000f18ab

デバイス ブート      始点        終点     ブロック   Id  システム
/dev/sdc1            2048   966410239   483204096   fd  Linux raid autodetect
/dev/sdc2       966410240   976773119     5181440   8e  Linux LVM
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdd: 12002.2 GB, 12002185445376 bytes, 23441768448 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048  23441766399   10.9T  Microsoft basic

Disk /dev/md127: 989.3 GB, 989333553152 bytes, 1932292096 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 524288 バイト / 1048576 バイト


Disk /dev/mapper/cl_m24-swap: 14.8 GB, 14826864640 bytes, 28958720 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト
[root@m32s ~]# cat /proc/mdstat
Personalities : [raid0] [raid6] [raid5] [raid4]
md0 : active raid0 nvme1n1p1[1] nvme2n1p1[2] nvme4n1p1[4] nvme3n1p1[3] nvme8n1p1[8] nvme0n1p1[0] nvme6n1p1[6] nvme7n1p1[7] nvme5n1p1[5]
      18002377728 blocks super 1.2 512k chunks

md127 : active raid6 sdd1[8] sdh1[7] sdc1[2] sde1[0] sdf1[1] sdi1[3] sdb1[9] sdg1[6]
      46883358720 blocks super 1.2 level 6, 512k chunk, algorithm 2 [8/7] [UUUU_UUU]
      [>....................]  recovery =  0.0% (910848/7813893120) finish=1858.4min speed=70065K/sec
      bitmap: 57/59 pages [228KB], 65536KB chunk

unused devices: <none>
[root@m32s ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       ST3000DM008-2DM166
        Serial Number:      Z5054K6L
/dev/sdb:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WSC1CG9X
/dev/sdc:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT2LY61
/dev/sdd:
        Model Number:       ST8000DM004-2U9188
        Serial Number:      ZR14J007
/dev/sde:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT37GKX
/dev/sdf:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT333VK
/dev/sdg:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT37GX2
/dev/sdh:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT37FYJ
/dev/sdi:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT384Y0
[root@m32s ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sda1.
mdadm: No md superblock detected on /dev/sda2.
mdadm: No md superblock detected on /dev/sda3.
/dev/sda:
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 5
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 2
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 4
/dev/sde:
/dev/sde1:
   Device Role : Active device 0
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 1
/dev/sdg:
/dev/sdg1:
   Device Role : Active device 6
/dev/sdh:
/dev/sdh1:
   Device Role : Active device 7
/dev/sdi:
/dev/sdi1:
   Device Role : Active device 3
[root@m32s ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA ST3000DM008-2DM1 (scsi)
ディスク /dev/sda: 3000592982016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始         終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B     2097151B        1048576B                                bios_grub
 2    2097152B     1075838975B     1073741824B     xfs
 3    1075838976B  3000592498687B  2999516659712B                          lvm

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdb: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                    hoge  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdc: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                          raid

モデル: ATA ST8000DM004-2U91 (scsi)
ディスク /dev/sdd: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                    hoge  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sde: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdf: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdg: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdh: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdi: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                          raid
[root@m64g yoshitake.kazutoshi]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sde1[5] sdd1[2] sdc1[0] sdb1[1] sda1[3]
      31255568384 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/4] [UUUU_]
      [>....................]  recovery =  0.0% (4079388/7813892096) finish=701.9min speed=185426K/sec
      bitmap: 7/59 pages [28KB], 65536KB chunk

unused devices: <none>
mdadm -E /dev/sd*|egrep "(^/dev|Role)"
[root@m64g yoshitake.kazutoshi]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
for i in /dev/sd? ; do parted $i unit B print; done/dev/sda:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT0V572
/dev/sdb:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT0V4MT
/dev/sdc:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT0V07K
/dev/sdd:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT0V4SY
/dev/sde:
        Model Number:       ST8000DM005-2EH112
        Serial Number:      ZA158WBR
/dev/sdf:
        Model Number:       Micron_1100_MTFDDAK1T0TBN
        Serial Number:      1719191C5F53
[root@m64g yoshitake.kazutoshi]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
/dev/sda:
/dev/sda1:
   Device Role : Active device 3
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 1
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 0
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 2
mdadm: No md superblock detected on /dev/sdf1.
mdadm: No md superblock detected on /dev/sdf2.
/dev/sde:
/dev/sde1:
   Device Role : Active device 4
/dev/sdf:
[root@m64g yoshitake.kazutoshi]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sda: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdb: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdc: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdd: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM005-2EH1 (scsi)
ディスク /dev/sde: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA Micron_1100_MTFD (scsi)
ディスク /dev/sdf: 1024209543168B
セクタサイズ (論理/物理): 512B/512B
パーティションテーブル: msdos
ディスクフラグ:

番号  開始         終了            サイズ          タイプ   ファイルシステム  フラグ
 1    1048576B     1074790399B     1073741824B     primary  xfs               boot
 2    1074790400B  1024209190911B  1023134400512B  primary                    lvm

[root@m64k ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sde1[1] sdd1[3] sdc1[5] sdb1[0] sdf1[2]
      15627542528 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/5] [UUUUU]
      bitmap: 2/30 pages [8KB], 65536KB chunk

unused devices: <none>
[root@m64k ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       INTEL SSDSC2CW480A3
        Serial Number:      CVCV22940032480DGN
/dev/sdb:
        Model Number:       ST4000DM004-2CV104
        Serial Number:      ZFN0C4ER
/dev/sdc:
        Model Number:       ST4000DM004-2CV104
        Serial Number:      ZFN0C5FF
/dev/sdd:
        Model Number:       ST4000DM004-2CV104
        Serial Number:      ZFN0C53F
/dev/sde:
        Model Number:       ST4000DM004-2CV104
        Serial Number:      ZFN0C4H7
/dev/sdf:
        Model Number:       ST4000DM004-2CV104
        Serial Number:      ZFN0C4W9
[root@m64k ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sda1.
mdadm: No md superblock detected on /dev/sda2.
/dev/sda:
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 0
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 4
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 3
/dev/sde:
/dev/sde1:
   Device Role : Active device 1
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 2

[root@m64k ~]# fdisk -l

Disk /dev/sda: 480.1 GB, 480103981056 bytes, 937703088 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト
Disk label type: dos
ディスク識別子: 0x000c776b

デバイス ブート      始点        終点     ブロック   Id  システム
/dev/sda1   *        2048     2099199     1048576   83  Linux
/dev/sda2         2099200   937701375   467801088   8e  Linux LVM
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdb: 4000.8 GB, 4000787030016 bytes, 7814037168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048   7814035455    3.7T  Linux RAID      primary
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdc: 4000.8 GB, 4000787030016 bytes, 7814037168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048   7814035455    3.7T  Linux RAID      primary
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdd: 4000.8 GB, 4000787030016 bytes, 7814037168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048   7814035455    3.7T  Linux RAID      primary
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdf: 4000.8 GB, 4000787030016 bytes, 7814037168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048   7814035455    3.7T  Linux RAID      primary
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sde: 4000.8 GB, 4000787030016 bytes, 7814037168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048   7814035455    3.7T  Linux RAID      primary

Disk /dev/mapper/cl-root: 445.2 GB, 445200203776 bytes, 869531648 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト


Disk /dev/mapper/cl-swap: 33.8 GB, 33822867456 bytes, 66060288 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O サイズ (最小 / 推奨): 512 バイト / 512 バイト


Disk /dev/md0: 16002.6 GB, 16002603548672 bytes, 31255085056 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 524288 バイト / 2097152 バイト
[root@m96 ~]# cat /proc/mdstat
egrep "(^/dev|Role)Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sde1[6] sdf1[3] sdd1[0] sdc1[1] sdb1[5]
      39065214976 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/5] [UUUUU]
      [==============>......]  check = 70.1% (6855165824/9766303744) finish=579.6min speed=83704K/sec
      bitmap: 0/73 pages [0KB], 65536KB chunk

unused devices: <none>
[root@m96 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       Hitachi HDS721050DLE630
        Serial Number:      MSKE215H0KSDLG
/dev/sdb:
        Model Number:       ST10000VN0008-2PJ103
        Serial Number:      ZS513V1V
/dev/sdc:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA214ZT7
/dev/sdd:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA214XYP
/dev/sde:
        Model Number:       ST10000VN0008-2PJ103
        Serial Number:      ZS512Y4X
/dev/sdf:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA215S0C
[root@m96 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sda1.
mdadm: No md superblock detected on /dev/sda2.
/dev/sda:
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 4
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 1
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 0
/dev/sde:
/dev/sde1:
   Device Role : Active device 2
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 3
[root@m96 ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA Hitachi HDS72105 (scsi)
ディスク /dev/sda: 500107862016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: msdos
ディスクフラグ:

番号  開始         終了           サイズ         タイプ   ファイルシステム  フラグ
 1    1048576B     1074790399B    1073741824B    primary  xfs               boot
 2    1074790400B  498999492607B  497924702208B  primary                    lvm

モデル: ATA ST10000VN0008-2P (scsi)
ディスク /dev/sdb: 10000831348736B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  10000830300159B  10000829251584B                    hoge  raid

モデル: ATA ST10000VN0004-1Z (scsi)
ディスク /dev/sdc: 10000831348736B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  10000830300159B  10000829251584B                          raid

モデル: ATA ST10000VN0004-1Z (scsi)
ディスク /dev/sdd: 10000831348736B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  10000830300159B  10000829251584B                          raid

モデル: ATA ST10000VN0008-2P (scsi)
ディスク /dev/sde: 10000831348736B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  10000830300159B  10000829251584B                    hoge  raid

モデル: ATA ST10000VN0004-1Z (scsi)
ディスク /dev/sdf: 10000831348736B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  10000830300159B  10000829251584B                          raid
[root@m48 ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sdb1[0] sdd1[5] sdf1[1] sde1[2] sdc1[3]
      39065214976 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/5] [UUUUU]
      bitmap: 2/73 pages [8KB], 65536KB chunk

unused devices: <none>
[root@m48 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       Hitachi HDS721050DLE630
        Serial Number:      MSKE215H0L663G
/dev/sdb:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA212CKK
/dev/sdc:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA214VVE
/dev/sdd:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA216SNT
/dev/sde:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA214MC5
/dev/sdf:
        Model Number:       ST10000VN0004-1ZD101
        Serial Number:      ZA214AAQ
[root@m48 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sda1.
mdadm: No md superblock detected on /dev/sda2.
/dev/sda:
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 0
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 3
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 4
/dev/sde:
/dev/sde1:
   Device Role : Active device 2
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 1
   
[root@m48 ~]# fdisk -l
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdb: 10000.8 GB, 10000831348736 bytes, 19532873728 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048  19532871679    9.1T  Linux RAID
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdc: 10000.8 GB, 10000831348736 bytes, 19532873728 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048  19532871679    9.1T  Linux RAID

Disk /dev/sda: 500.1 GB, 500107862016 bytes, 976773168 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: dos
ディスク識別子: 0x000e3a56

デバイス ブート      始点        終点     ブロック   Id  システム
/dev/sda1   *        2048     2099199     1048576   83  Linux
/dev/sda2         2099200   976773119   487336960   8e  Linux LVM
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdd: 10000.8 GB, 10000831348736 bytes, 19532873728 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048  19532871679    9.1T  Linux RAID
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sde: 10000.8 GB, 10000831348736 bytes, 19532873728 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048  19532871679    9.1T  Linux RAID
WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

Disk /dev/sdf: 10000.8 GB, 10000831348736 bytes, 19532873728 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト
Disk label type: gpt


#         Start          End    Size  Type            Name
 1         2048  19532871679    9.1T  Linux RAID

Disk /dev/mapper/cl_m48-root: 486.3 GB, 486342131712 bytes, 949886976 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト


Disk /dev/mapper/cl_m48-swap: 12.7 GB, 12683575296 bytes, 24772608 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 4096 バイト / 4096 バイト


Disk /dev/md0: 40002.8 GB, 40002780135424 bytes, 78130429952 sectors
Units = sectors of 1 * 512 = 512 bytes
Sector size (logical/physical): 512 bytes / 4096 bytes
I/O サイズ (最小 / 推奨): 524288 バイト / 2097152 バイト
[root@m256y ~]# cat /proc/mdstat
Personalities : [raid1] [raid6] [raid5] [raid4]
md126 : active raid5 sda1[0] sdc1[2] sdd1[4] sdb1[1]
      23441676288 blocks super 1.2 level 5, 512k chunk, algorithm 2 [4/4] [UUUU]
      bitmap: 0/59 pages [0KB], 65536KB chunk

md127 : active raid1 sdm2[0] sdn1[1]
      1047552 blocks super 1.2 [2/2] [UU]
      bitmap: 0/1 pages [0KB], 65536KB chunk

md0 : active raid6 sdh1[12] sdp1[13] sdo1[8] sdk1[14] sdm3[0] sde1[10] sdj1[15] sdi1[9] sdn2[1] sdf1[5] sdl1[4] sdg1[11]
      78128424960 blocks super 1.2 level 6, 512k chunk, algorithm 2 [12/11] [UU_UUUUUUUUU]
      [>....................]  recovery =  0.0% (459008/7812842496) finish=4538.5min speed=28688K/sec
      bitmap: 9/59 pages [36KB], 65536KB chunk

unused devices: <none>
[root@m256y ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT1F1MZ
/dev/sdb:
        Model Number:       ST8000DM005-2EH112
        Serial Number:      ZA14PDA2
/dev/sdc:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT1EYSJ
/dev/sdd:
        Model Number:       TOSHIBA MD05ACA800
        Serial Number:      X9P7K30AFYZD
/dev/sde:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT1F1H5
/dev/sdf:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT21FMW
/dev/sdg:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT1GGQ0
/dev/sdh:
        Model Number:       ST8000DM004-2U9188
        Serial Number:      ZR14WTZN
/dev/sdi:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT1EXYR
/dev/sdj:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT3ESNK
/dev/sdk:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT2FCSR
/dev/sdl:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT21FJ2
/dev/sdm:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT21FMS
/dev/sdn:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT21H90
/dev/sdo:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      WCT21HGQ
/dev/sdp:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT1F1LV
[root@m256y ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
/dev/sda:
/dev/sda1:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 1
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 2
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 3
/dev/sde:
/dev/sde1:
   Device Role : Active device 10
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 5
/dev/sdg:
/dev/sdg1:
   Device Role : Active device 11
/dev/sdh:
/dev/sdh1:
   Device Role : Active device 2
/dev/sdi:
/dev/sdi1:
   Device Role : Active device 9
/dev/sdj:
/dev/sdj1:
   Device Role : Active device 3
/dev/sdk:
/dev/sdk1:
   Device Role : Active device 7
mdadm: No md superblock detected on /dev/sdm1.
/dev/sdl:
/dev/sdl1:
   Device Role : Active device 4
/dev/sdm:
/dev/sdm2:
   Device Role : Active device 0
/dev/sdm3:
   Device Role : Active device 0
/dev/sdn:
/dev/sdn1:
   Device Role : Active device 1
/dev/sdn2:
mdadm: No md superblock detected on /dev/sdn3.
   Device Role : Active device 1
/dev/sdo:
/dev/sdo1:
   Device Role : Active device 8
/dev/sdp:
/dev/sdp1:
   Device Role : Active device 6
[root@m256y ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ST8000DM 004-2CX188 (scsi)
ディスク /dev/sda: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001562222591B  8001561174016B                    primary  raid

モデル: ST8000DM 005-2EH112 (scsi)
ディスク /dev/sdb: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001562222591B  8001561174016B                    primary  raid

モデル: ST8000DM 004-2CX188 (scsi)
ディスク /dev/sdc: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001562222591B  8001561174016B                    primary  raid

モデル: TOSHIBA MD05ACA800 (scsi)
ディスク /dev/sdd: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001562222591B  8001561174016B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sde: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdf: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8000487030783B  8000485982208B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdg: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2U91 (scsi)
ディスク /dev/sdh: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8001562869759B  8001561821184B                    hoge  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdi: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdj: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdk: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdl: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8000487030783B  8000485982208B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdm: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始         終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B     2097151B        1048576B                                bios_grub
 2    2097152B     1076887551B     1074790400B                             raid
 3    1076887552B  8001562869759B  8000485982208B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdn: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始         終了            サイズ          ファイルシステム  名前                 フラグ
 3    17408B       1048575B        1031168B                          BIOS boot partition  bios_grub
 1    1048576B     1075838975B     1074790400B                                            raid
 2    1075838976B  8001561821183B  8000485982208B                                         raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdo: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8000487030783B  8000485982208B                          raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdp: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid
[root@m384 ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid6 sdi1[8] sdh1[7] sdg1[6] sdf1[5] sde1[4] sdd1[3] sdc1[2] sdb1[1] sda1[0]
      95705738240 blocks super 1.2 level 6, 512k chunk, algorithm 2 [9/9] [UUUUUUUUU]
      [=============>.......]  resync = 69.7% (9534563840/13672248320) finish=2933.9min speed=23504K/sec
      bitmap: 32/102 pages [128KB], 65536KB chunk

md127 : inactive sdj4[8](S)
      3613855231 blocks super 1.2

unused devices: <none>
[root@m384 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X070A09RFW5G
/dev/sdb:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X070A08WFW5G
/dev/sdc:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X050A00QFW5G
/dev/sdd:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X050A018FW5G
/dev/sde:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X070A097FW5G
/dev/sdf:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A08XFW5G
/dev/sdg:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X070A018FW5G
/dev/sdh:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A0ALFW5G
/dev/sdi:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A089FW5G
/dev/sdj:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT2FXBS
[root@m384 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: Unknown keyword INACTIVE-ARRAY
/dev/sda:
/dev/sda1:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 1
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 2
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 3
/dev/sde:
/dev/sde1:
   Device Role : Active device 4
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 5
/dev/sdg:
/dev/sdg1:
   Device Role : Active device 6
/dev/sdh:
/dev/sdh1:
mdadm: No md superblock detected on /dev/sdj1.
mdadm: No md superblock detected on /dev/sdj2.
mdadm: No md superblock detected on /dev/sdj3.
   Device Role : Active device 7
/dev/sdi:
/dev/sdi1:
   Device Role : Active device 8
/dev/sdj:
/dev/sdj4:
   Device Role : Active device 0
[root@m384 ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sda: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdb: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdc: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdd: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sde: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdf: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdg: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdh: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdi: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdj: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始            終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B        2097151B        1048576B                                bios_grub
 2    2097152B        1075838975B     1073741824B     xfs
 3    1075838976B     4300341247999B  4299265409024B                          lvm
 4    4300341248000B  8001063222271B  3700721974272B                          raid
[root@m512 ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : inactive sda4[7](S)
      2189900800 blocks super 1.2

md0 : active raid5 sdb1[0] sdd1[2] sdc1[1] sdf1[5] sde1[3]
      54688993280 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/5] [UUUUU]
      bitmap: 20/102 pages [80KB], 65536KB chunk

unused devices: <none>
[root@m512 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       ST3000DM008-2DM166
        Serial Number:      Z504LC17
/dev/sdb:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A0FCFW5G
/dev/sdc:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X080A00QFW5G
/dev/sdd:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A08YFW5G
/dev/sde:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X0A0A03ZFW5G
/dev/sdf:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A0EDFW5G
[root@m512 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sda1.
mdadm: No md superblock detected on /dev/sda2.
mdadm: No md superblock detected on /dev/sda3.
/dev/sda:
/dev/sda4:
   Device Role : Active device 1
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 0
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 1
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 2
/dev/sde:
/dev/sde1:
   Device Role : Active device 3
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 4
[root@m512 ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA ST3000DM008-2DM1 (scsi)
ディスク /dev/sda: 3000592982016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始           終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B       2097151B        1048576B                                bios_grub
 2    2097152B       1075838975B     1073741824B     xfs
 3    1075838976B    756992180223B   755916341248B                           lvm
 4    757999861760B  3000592498687B  2242592636928B                          raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdb: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdc: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdd: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sde: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdf: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid
[root@m256 yoshitake.kazutoshi]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sdf1[5] sdd1[3] sdc1[2] sdb1[1] sda1[0]
      31255572480 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/4] [UUUU_]
      [>....................]  recovery =  2.4% (191041664/7813893120) finish=2380.3min speed=53372K/sec
      bitmap: 2/59 pages [8KB], 65536KB chunk

unused devices: <none>
[root@m256 yoshitake.kazutoshi]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       TOSHIBA MD05ACA800
        Serial Number:      Y9BVK31AFYZD
/dev/sdb:
        Model Number:       TOSHIBA MD05ACA800
        Serial Number:      Y9BVK31EFYZD
/dev/sdc:
        Model Number:       TOSHIBA MD05ACA800
        Serial Number:      Y9BVK31DFYZD
/dev/sdd:
        Model Number:       TOSHIBA MD05ACA800
        Serial Number:      Y9BVK316FYZD
/dev/sde:
        Model Number:       INTEL SSDSA2CW600G3
        Serial Number:      CVPR1216047B600FGN
/dev/sdf:
        Model Number:       TOSHIBA MD05ACA800
        Serial Number:      Y9B5K3SFFYZD
[root@m256 yoshitake.kazutoshi]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
/dev/sda:
/dev/sda1:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 1
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 2
/dev/sdd:
/dev/sdd1:
mdadm: No md superblock detected on /dev/sde1.
mdadm: No md superblock detected on /dev/sde2.
   Device Role : Active device 3
/dev/sde:
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 4
[root@m256 yoshitake.kazutoshi]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA TOSHIBA MD05ACA8 (scsi)
ディスク /dev/sda: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA TOSHIBA MD05ACA8 (scsi)
ディスク /dev/sdb: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA TOSHIBA MD05ACA8 (scsi)
ディスク /dev/sdc: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA TOSHIBA MD05ACA8 (scsi)
ディスク /dev/sdd: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA INTEL SSDSA2CW60 (scsi)
ディスク /dev/sde: 600127266816B
セクタサイズ (論理/物理): 512B/512B
パーティションテーブル: msdos
ディスクフラグ:

番号  開始         終了           サイズ         タイプ   ファイルシステム  フラグ
 1    1048576B     1074790399B    1073741824B    primary  xfs               boot
 2    1074790400B  600126259199B  599051468800B  primary                    lvm

モデル: ATA TOSHIBA MD05ACA8 (scsi)
ディスク /dev/sdf: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

[root@m512i ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : inactive sdf3[4](S)
      2930134016 blocks super 1.2

md0 : active raid5 sdb1[7] sda1[6] sdd1[3] sdc1[2] sde1[5]
      54688997376 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/4] [U_UUU]
      [>....................]  recovery =  0.0% (1287296/13672249344) finish=2300.9min speed=99022K/sec
      bitmap: 1/102 pages [4KB], 65536KB chunk

unused devices: <none>
[root@m512i ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       TOSHIBA MN07ACA14T
        Serial Number:      52Q0A01TFEPG
/dev/sdb:
        Model Number:       TOSHIBA MN07ACA14T
        Serial Number:      52Q0A03AFEPG
/dev/sdc:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X070A0ALFW5G
/dev/sdd:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A0A6FW5G
/dev/sde:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      51V0A0JCFW5G
/dev/sdf:
        Model Number:       TOSHIBA MD04ACA500
        Serial Number:      345AK05MFS9A
[root@m512i ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
/dev/sda:
/dev/sda1:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 1
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 2
/dev/sdd:
/dev/sdd1:
mdadm: No md superblock detected on /dev/sdf1.
mdadm: No md superblock detected on /dev/sdf2.
mdadm: No md superblock detected on /dev/sdf4.
   Device Role : Active device 3
/dev/sde:
/dev/sde1:
   Device Role : Active device 4
/dev/sdf:
/dev/sdf3:
   Device Role : Active device 4
[root@m512i ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA TOSHIBA MN07ACA1 (scsi)
ディスク /dev/sda: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  14000518594559B  14000517545984B                    hoge  raid

モデル: ATA TOSHIBA MN07ACA1 (scsi)
ディスク /dev/sdb: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  14000518594559B  14000517545984B                    hoge  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdc: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdd: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sde: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前  フラグ
 1    1048576B  14000518594559B  14000517545984B                    hoge  raid

モデル: ATA TOSHIBA MD04ACA5 (scsi)
ディスク /dev/sdf: 5000981078016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始            終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B        2097151B        1048576B                                bios_grub
 2    2097152B        1075838975B     1073741824B     xfs
 3    1075838976B     3001667289087B  3000591450112B                          raid
 4    3001667289088B  5000980856831B  1999313567744B                          lvm

m768bのHDD交換時は、HDDのソケットには他のサーバのようにきちんとSATAのボードがないため、ちゃんとサーバのケースを取り外してからHDDを交換すること。また、MegaRAIDに刺さっているHDDを不用意に抜いたまま起動してしまうと、「(foreign) Unconfigured Good」という状態になって最悪そのディスクを初期化することになるので、不用意に抜かないこと。

[root@m768b ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : active raid6 sdl1[1] sdk1[12] sdi1[9] sdj1[10] sdh1[11] sdf1[7] sde1[6] sdd1[5] sdc1[4] sdb1[3] sda1[0]
      70320079872 blocks super 1.2 level 6, 512k chunk, algorithm 2 [11/9] [U__UUUUUUUU]
      [>....................]  recovery =  0.1% (7900416/7813342208) finish=1802.9min speed=72154K/sec
      bitmap: 19/59 pages [76KB], 65536KB chunk

unused devices: <none>
[root@m768b ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0d 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0d 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0d 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0d 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0d 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
/dev/sda:
/dev/sdb:
/dev/sdc:
/dev/sdd:
/dev/sde:
/dev/sdf:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT2HAPJ
/dev/sdg:
        Model Number:       INTEL SSDSC2CW480A3
        Serial Number:      CVCV233000KU480DGN
/dev/sdh:
        Model Number:       TOSHIBA MN06ACA800
        Serial Number:      6050A0CJF5CG
/dev/sdi:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT2CYJA
/dev/sdj:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT2HTBR
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0d 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0d 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
/dev/sdk:
/dev/sdl:
[root@m768b ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
/dev/sda:
/dev/sda1:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 3
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 4
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 5
mdadm: No md superblock detected on /dev/sdg1.
mdadm: No md superblock detected on /dev/sdg2.
mdadm: No md superblock detected on /dev/sdg3.
/dev/sde:
/dev/sde1:
   Device Role : Active device 6
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 7
/dev/sdg:
/dev/sdh:
/dev/sdh1:
   Device Role : Active device 8
/dev/sdi:
/dev/sdi1:
   Device Role : Active device 9
/dev/sdj:
/dev/sdj1:
   Device Role : Active device 10
/dev/sdk:
/dev/sdk1:
   Device Role : Active device 1
/dev/sdl:
/dev/sdl1:
   Device Role : Active device 2
[root@m768b ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: SMC SMC2108 (scsi)
ディスク /dev/sda: 8000999784448B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8000998735871B  8000997687296B                    primary  raid

モデル: SMC SMC2108 (scsi)
ディスク /dev/sdb: 8000999784448B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8000998735871B  8000997687296B                    primary  raid

モデル: SMC SMC2108 (scsi)
ディスク /dev/sdc: 8000999784448B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8000998735871B  8000997687296B                    primary  raid

モデル: SMC SMC2108 (scsi)
ディスク /dev/sdd: 8000999784448B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8000998735871B  8000997687296B                    primary  raid

モデル: SMC SMC2108 (scsi)
ディスク /dev/sde: 8000999784448B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8000998735871B  8000997687296B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdf: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA INTEL SSDSC2CW48 (scsi)
ディスク /dev/sdg: 480103981056B
セクタサイズ (論理/物理): 512B/512B
パーティションテーブル: msdos
ディスクフラグ:

番号  開始           終了           サイズ         タイプ   ファイルシステム  フラグ
 1    1048576B       1074790399B    1073741824B    primary  xfs               boot
 2    1074790400B    445743366143B  444668575744B  primary  xfs
 3    445743366144B  480103104511B  34359738368B   primary  linux-swap(v1)

モデル: ATA TOSHIBA MN06ACA8 (scsi)
ディスク /dev/sdh: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdi: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdj: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: SMC SMC2108 (scsi)
ディスク /dev/sdk: 8000999784448B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  8000998735871B  8000997687296B                    hoge  raid

モデル: SMC SMC2108 (scsi)
ディスク /dev/sdl: 8000999784448B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8000998735871B  8000997687296B                    primary  raid
[0322_010004:yoshitake.kazutoshi@m768b ~]$ sudo /usr/local/MegaRAID\ Storage\ Manager/StorCLI/storcli64 /c0/eALL/sALL show all|egrep ' Onln | Failed |Device attributes|SN = |WWN = '|paste - - - -
252:1    42 Onln   0 7.276 TB SATA HDD N   N  512B ST8000DM004-2CX188 U  -      Drive /c0/e252/s1 Device attributes :   SN =             ZCT2R0T0       WWN = 5000c500c6626a03
252:2    43 Onln   6 7.276 TB SATA HDD N   N  512B ST8000DM004-2CX188 U  -      Drive /c0/e252/s2 Device attributes :   SN =             ZCT2QQ6D       WWN = 5000c500c660b6cc
252:3    44 Onln   5 7.276 TB SATA HDD N   N  512B ST8000DM004-2CX188 U  -      Drive /c0/e252/s3 Device attributes :   SN =             ZCT1XPDQ       WWN = 5000c500c4698fe9
252:4    45 Onln   1 7.276 TB SATA HDD N   N  512B ST8000DM004-2CX188 U  -      Drive /c0/e252/s4 Device attributes :   SN =             ZCT2R12W       WWN = 5000c500c66260f2
252:5    46 Onln   2 7.276 TB SATA HDD N   N  512B ST8000DM004-2CX188 U  -      Drive /c0/e252/s5 Device attributes :   SN =             ZCT2R1JT       WWN = 5000c500c6624c4b
252:6    47 Onln   3 7.276 TB SATA HDD N   N  512B ST8000DM004-2CX188 U  -      Drive /c0/e252/s6 Device attributes :   SN =             ZCT2R0HA       WWN = 5000c500c66277c6
252:7    48 Onln   4 7.276 TB SATA HDD N   N  512B ST8000DM004-2CX188 U  -      Drive /c0/e252/s7 Device attributes :   SN =             ZCT2R12G       WWN = 5000c500c66260b0


a=`sudo smartctl --scan|grep megaraid`; for i in `seq 1 $(echo "$a"|wc -l)`; do echo "##"`echo "$a"|head -n $i|tail -n 1`; eval sudo smartctl --info `echo "$a"|head -n $i|tail -n 1`; done

MegaRAIDのstorcli64を使わずに上記のコマンドでも下記のような情報は取れる

##/dev/bus/0 -d megaraid,42 # /dev/bus/0 [megaraid_disk_42], SCSI device
smartctl 7.0 2018-12-30 r4883 [x86_64-linux-3.10.0-1127.18.2.el7.x86_64] (local build)
Copyright (C) 2002-18, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Seagate Barracuda Compute
Device Model:     ST8000DM004-2CX188
Serial Number:    ZCT2R0T0
LU WWN Device Id: 5 000c50 0c6626a03
Firmware Version: 0001
User Capacity:    8,001,563,222,016 bytes [8.00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    5425 rpm
Form Factor:      3.5 inches
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ACS-3 T13/2161-D revision 5
SATA Version is:  SATA 3.1, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is:    Tue Mar 22 00:47:39 2022 JST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

ただし、どちらにしても/dev/sdaなどとslotの対応はわからなかった。slot 1-7の順にsda-sdgか? Failedとなったステータスのディスクを交換すればよいか。

交換後は
/usr/local/MegaRAID\ Storage\ Manager/startupui.sh
user: root
pass: suikou
で作業すればよいか。
[root@m1536 ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md127 : inactive sdc4[2](S)
      3906884608 blocks super 1.2

md0 : active raid6 sdh1[6] sdj1[8] sdi1[7] sdb1[1] sdd1[2] sda1[0] sdg1[5] sdf1[4] sde1[3]
      95705745408 blocks super 1.2 level 6, 512k chunk, algorithm 2 [9/9] [UUUUUUUUU]
      [>....................]  resync =  2.8% (386352256/13672249344) finish=4532.0min speed=48858K/sec
      bitmap: 100/102 pages [400KB], 65536KB chunk

unused devices: <none>
[root@m1536 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A099FW5G
/dev/sdb:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      90T0A00PFW5G
/dev/sdc:
        Model Number:       WDC WD60EFRX-68MYMN1
        Serial Number:      WD-WXC1H3438826
/dev/sdd:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      90Q0A004FW5G
/dev/sde:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X070A078FW5G
/dev/sdf:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      90Q0A008FW5G
/dev/sdg:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X010A01CFW5G
/dev/sdh:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A0AFFW5G
/dev/sdi:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A08SFW5G
/dev/sdj:
        Model Number:       TOSHIBA MN08ACA14T
        Serial Number:      X020A0AGFW5G
[root@m1536 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: Unknown keyword INACTIVE-ARRAY
mdadm: No md superblock detected on /dev/sdc1.
mdadm: No md superblock detected on /dev/sdc2.
mdadm: No md superblock detected on /dev/sdc3.
mdadm: No md superblock detected on /dev/sdc5.
/dev/sda:
/dev/sda1:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 1
/dev/sdc:
/dev/sdc4:
   Device Role : Active device 2
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 2
/dev/sde:
/dev/sde1:
   Device Role : Active device 3
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 4
/dev/sdg:
/dev/sdg1:
   Device Role : Active device 5
/dev/sdh:
/dev/sdh1:

   Device Role : Active device 6
/dev/sdi:
/dev/sdi1:
   Device Role : Active device 7
/dev/sdj:
/dev/sdj1:
   Device Role : Active device 8
[root@m1536 ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sda: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdb: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA WDC WD60EFRX-68M (scsi)
ディスク /dev/sdc: 6001175126016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ: pmbr_boot

番号  開始            終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B        2097151B        1048576B                                bios_grub
 2    2097152B        3145727B        1048576B                                bios_grub
 3    3145728B        1002438655B     999292928B      xfs
 4    1002438656B     4001786494975B  4000784056320B                          raid
 5    4001786494976B  6001174511615B  1999388016640B                          lvm

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdd: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sde: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdf: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdg: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdh: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdi: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

モデル: ATA TOSHIBA MN08ACA1 (scsi)
ディスク /dev/sdj: 14000519643136B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了             サイズ           ファイルシステム  名前     フラグ
 1    1048576B  14000518594559B  14000517545984B                    primary  raid

[root@r311 ~]# cat /proc/mdstat
Personalities : [raid6] [raid5] [raid4]
md0 : active raid6 sdf1[7] sde1[1] sdb1[2] sdc1[5] sdi1[4] sdh1[3] sda1[0] sdg1[6]
      46883352576 blocks super 1.2 level 6, 512k chunk, algorithm 2 [8/8] [UUUUUUUU]
      [>....................]  resync =  2.8% (220589440/7813892096) finish=2159.7min speed=58596K/sec
      bitmap: 58/59 pages [232KB], 65536KB chunk

unused devices: <none>
[root@r311 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
/dev/sda:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT2QF2B
/dev/sdb:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT3C7XC
/dev/sdc:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT3C94M
/dev/sdd:
        Model Number:       OCZ-VERTEX2 3.5
        Serial Number:      OCZ-4Q79SVHP9IT92QZG
/dev/sde:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT3C76W
/dev/sdf:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT3D2V7
/dev/sdg:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT3CA05
/dev/sdh:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT3C7YP
/dev/sdi:
        Model Number:       ST8000DM004-2CX188
        Serial Number:      ZCT3C8P4
[root@r311 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
mdadm: No md superblock detected on /dev/sdd1.
mdadm: No md superblock detected on /dev/sdd2.
/dev/sda:
/dev/sda1:
   Device Role : Active device 0
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 2
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 5
/dev/sdd:
/dev/sde:
/dev/sde1:
   Device Role : Active device 1
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 7
/dev/sdg:
/dev/sdg1:
   Device Role : Active device 6
/dev/sdh:
/dev/sdh1:
   Device Role : Active device 3
/dev/sdi:
/dev/sdi1:
   Device Role : Active device 4
[root@r311 ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sda: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdb: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdc: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA OCZ-VERTEX2 3.5 (scsi)
ディスク /dev/sdd: 180045766656B
セクタサイズ (論理/物理): 512B/512B
パーティションテーブル: msdos
ディスクフラグ:

番号  開始         終了           サイズ         タイプ   ファイルシステム  フラグ
 1    1048576B     1074790399B    1073741824B    primary  xfs               boot
 2    1074790400B  180045742079B  178970951680B  primary                    lvm

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sde: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdf: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdg: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdh: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid

モデル: ATA ST8000DM004-2CX1 (scsi)
ディスク /dev/sdi: 8001563222016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前     フラグ
 1    1048576B  8001561821183B  8001560772608B                    primary  raid
[root@m50v251n3 ~]# cat /proc/mdstat
-I /dev/sd?|egrep "(^/dev|Personalities : [raid6] [raid5] [raid4]
md0 : active raid5 sdf1[5] sde1[3] sdd1[2] sdc1[1] sdb1[0]
      15627538432 blocks super 1.2 level 5, 512k chunk, algorithm 2 [5/4] [UUUU_]
      [>....................]  recovery =  0.9% (37671680/3906884608) finish=466.6min speed=138198K/sec
      bitmap: 0/30 pages [0KB], 65536KB chunk

unused devices: <none>
Model|[root@m50v251n3 ~]# hdparm -I /dev/sd?|egrep "(^/dev|Model|Serial Number)"
m -E /dev/sd*|egrep "(^/dev|Role)SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 0a 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
"
for SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 07 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 07 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
i in /deSG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 07 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 07 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
v/sd? ;SG_IO: bad/missing sense data, sb[]:  70 00 05 00 00 00 00 07 00 00 00 00 20 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00
 /dev/sda:
do part/dev/sdb:
/dev/sdc:
/dev/sdd:
/dev/sde:
/dev/sdf:
[root@m50v251n3 ~]# mdadm -E /dev/sd*|egrep "(^/dev|Role)"
ed $i unit B print; donemdadm: No md superblock detected on /dev/sda2.
mdadm: No md superblock detected on /dev/sda3.
/dev/sda:
/dev/sda1:
/dev/sdb:
/dev/sdb1:
   Device Role : Active device 0
/dev/sdc:
/dev/sdc1:
   Device Role : Active device 1
/dev/sdd:
/dev/sdd1:
   Device Role : Active device 2
/dev/sde:
/dev/sde1:
   Device Role : Active device 3
/dev/sdf:
/dev/sdf1:
   Device Role : Active device 4
[root@m50v251n3 ~]# for i in /dev/sd? ; do parted $i unit B print; done
モデル: Msft Virtual Disk (scsi)
ディスク /dev/sda: 1073741824000B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始         終了            サイズ          ファイルシステム  名前                  フラグ
 1    1048576B     210763775B      209715200B      fat16             EFI System Partition  boot
 2    210763776B   1284505599B     1073741824B     xfs
 3    1284505600B  1073740775423B  1072456269824B                                          lvm

モデル: TOSHIBA MD04ACA400 (scsi)
ディスク /dev/sdb: 4000787030016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  4000786153471B  4000785104896B                    hoge  raid

モデル: TOSHIBA MD04ACA400 (scsi)
ディスク /dev/sdc: 4000787030016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  4000786153471B  4000785104896B                    hoge  raid

モデル: WDC WD40EFRX-68WT0N0 (scsi)
ディスク /dev/sdd: 4000787030016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  4000786153471B  4000785104896B                    hoge  raid

モデル: TOSHIBA MD04ACA400 (scsi)
ディスク /dev/sde: 4000787030016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  4000786153471B  4000785104896B                    hoge  raid

モデル:  ST4000DM000-1F21 (scsi)
ディスク /dev/sdf: 4000787030016B
セクタサイズ (論理/物理): 512B/4096B
パーティションテーブル: gpt
ディスクフラグ:

番号  開始      終了            サイズ          ファイルシステム  名前  フラグ
 1    1048576B  4000786153471B  4000785104896B                    hoge  raid

PS C:\Users\suikou> wmic diskdrive
Availability  BytesPerSector  Capabilities  CapabilityDescriptions                 Caption               CompressionMethod  ConfigManagerErrorCode  ConfigManagerUserConfig  CreationClassName  DefaultBlockSize  Description        DeviceID            ErrorCleared  ErrorDescription  ErrorMethodology  FirmwareRevision  Index  InstallDate  InterfaceType  LastErrorCode  Manufacturer             MaxBlockSize  MaxMediaSize  MediaLoaded  MediaType              MinBlockSize  Model                 Name                NeedsCleaning  NumberOfMediaSupported  Partitions  PNPDeviceID                                                  PowerManagementCapabilities  PowerManagementSupported  SCSIBus  SCSILogicalUnit  SCSIPort  SCSITargetId  SectorsPerTrack  SerialNumber     Signature  Size           Status  StatusInfo  SystemCreationClassName  SystemName       TotalCylinders  TotalHeads  TotalSectors  TotalTracks  TracksPerCylinder
              512             {3, 4}        {"Random Access", "Supports Writing"}  CT2000BX500SSD1                          0                       FALSE                    Win32_DiskDrive                      ディスク ドライブ  \\.\PHYSICALDRIVE5                                                    M6CR030           5                   IDE                           (標準ディスク ドライブ)                              TRUE         Fixed hard disk media                CT2000BX500SSD1       \\.\PHYSICALDRIVE5                                         3           SCSI\DISK&VEN_&PROD_CT2000BX500SSD1\5&1A6DD71F&0&050000                                                             5        0                2         0             63               2022E2A66C0C                2000396321280  OK                  Win32_ComputerSystem     DESKTOP-IUJGVO8  243201          255         3907024065    62016255     255
              512             {3, 4}        {"Random Access", "Supports Writing"}  TOSHIBA MD04ACA400                       0                       FALSE                    Win32_DiskDrive                      ディスク ドライブ  \\.\PHYSICALDRIVE0                                                    FP1A              0                   IDE                           (標準ディスク ドライブ)                              TRUE         Fixed hard disk media                TOSHIBA MD04ACA400    \\.\PHYSICALDRIVE0                                         0           SCSI\DISK&VEN_TOSHIBA&PROD_MD04ACA400\5&1393E3FE&0&000000                                                           0        0                0         0             63               54UHK2IPFSAA                4000784417280  OK                  Win32_ComputerSystem     DESKTOP-IUJGVO8  486401          255         7814032065    124032255    255
              512             {3, 4}        {"Random Access", "Supports Writing"}  WDC WD40EFRX-68WT0N0                     0                       FALSE                    Win32_DiskDrive                      ディスク ドライブ  \\.\PHYSICALDRIVE1                                                    82.00A82          1                   IDE                           (標準ディスク ドライブ)                              TRUE         Fixed hard disk media                WDC WD40EFRX-68WT0N0  \\.\PHYSICALDRIVE1                                         0           SCSI\DISK&VEN_WDC&PROD_WD40EFRX-68WT0N0\5&1393E3FE&0&010000                                                         1        0                0         0             63               WD-WCC4E5KC8S4J             4000784417280  OK                  Win32_ComputerSystem     DESKTOP-IUJGVO8  486401          255         7814032065    124032255    255
              512             {3, 4}        {"Random Access", "Supports Writing"}  TOSHIBA MD04ACA400                       0                       FALSE                    Win32_DiskDrive                      ディスク ドライブ  \\.\PHYSICALDRIVE2                                                    FP1A              2                   IDE                           (標準ディスク ドライブ)                              TRUE         Fixed hard disk media                TOSHIBA MD04ACA400    \\.\PHYSICALDRIVE2                                         0           SCSI\DISK&VEN_TOSHIBA&PROD_MD04ACA400\5&1393E3FE&0&040000                                                           4        0                0         0             63               64A2K44PFSAA                4000784417280  OK                  Win32_ComputerSystem     DESKTOP-IUJGVO8  486401          255         7814032065    124032255    255
              512             {3, 4}        {"Random Access", "Supports Writing"}  TOSHIBA MD04ACA400                       0                       FALSE                    Win32_DiskDrive                      ディスク ドライブ  \\.\PHYSICALDRIVE3                                                    FP1A              3                   IDE                           (標準ディスク ドライブ)                              TRUE         Fixed hard disk media                TOSHIBA MD04ACA400    \\.\PHYSICALDRIVE3                                         0           SCSI\DISK&VEN_TOSHIBA&PROD_MD04ACA400\5&1393E3FE&0&050000                                                           5        0                0         0             63               54U1K1R2FSAA                4000784417280  OK                  Win32_ComputerSystem     DESKTOP-IUJGVO8  486401          255         7814032065    124032255    255
              512             {3, 4}        {"Random Access", "Supports Writing"}  ST4000DM000-1F2168                       0                       FALSE                    Win32_DiskDrive                      ディスク ドライブ  \\.\PHYSICALDRIVE4                                                    CC52              4                   IDE                           (標準ディスク ドライブ)                              TRUE         Fixed hard disk media                ST4000DM000-1F2168    \\.\PHYSICALDRIVE4                                         0           SCSI\DISK&VEN_&PROD_ST4000DM000-1F21\5&1A6DD71F&0&040000                                                            4        0                2         0             63               Z300VV12                    4000784417280  OK                  Win32_ComputerSystem     DESKTOP-IUJGVO8  486401          255         7814032065    124032255    255

Hyper-V上のハードドライブの追加順
物理ドライブディスク->linuxでのパス
0->/dev/sdb
2->/dev/sdc
1->/dev/sdd
3->/dev/sde
4->/dev/sdf
  • ソフトウェアraid故障時の対応.1689048758.txt.gz
  • 最終更新: 2023/07/11 04:12
  • by 220.110.251.0