Bagaimana cara memeriksa RAID 'mdadm' saat menjalankan?

Saya mulai mendapatkan koleksi komputer di rumah dan untuk mendukung mereka, saya memiliki "server" linux box saya yang menjalankan array RAID.

Saat ini mdadm RAID-1, akan RAID-5sekali saya memiliki lebih banyak drive (dan kemudian RAID-6saya berharap). Namun saya telah mendengar berbagai cerita tentang data yang rusak pada satu drive dan Anda tidak pernah memperhatikan karena drive lain sedang digunakan, sampai pada titik ketika drive pertama gagal, dan Anda menemukan drive kedua Anda juga kacau (dan 3, 4 , Drive ke-5).

Jelas cadangan itu penting dan saya juga mengatasinya, namun saya tahu saya sebelumnya pernah melihat skrip yang mengklaim dapat membantu mengatasi masalah ini dan memungkinkan Anda untuk memeriksa RAID Anda saat sedang berjalan. Namun mencari skrip ini lagi sekarang saya merasa sulit untuk menemukan apa pun yang tampaknya mirip dengan apa yang saya jalankan sebelumnya dan saya merasa saya ketinggalan zaman dan tidak memahami apa pun yang telah berubah.

Bagaimana Anda memeriksa RAID yang sedang berjalan untuk memastikan semua disk masih terbentuk normal?

Saya memantau SMART pada semua drive dan juga telah mdadmmengatur untuk mengirim email kepada saya jika terjadi kegagalan, tetapi saya ingin mengetahui drive saya sesekali "memeriksa" diri mereka juga.

Inti dari RAID dengan redundansi adalah ia akan terus berjalan selama mungkin, tetapi jelas ia akan mendeteksi kesalahan yang memasukkannya ke mode terdegradasi, seperti disk yang gagal. Anda dapat menampilkan status array saat ini dengan mdadm -D:

# mdadm -D /dev/md0
<snip>
       0       8        5        0      active sync   /dev/sda5
       1       8       23        1      active sync   /dev/sdb7

Lebih jauh lagi, status pengembalian mdadm -Dbukan nol jika ada masalah seperti komponen yang gagal (1 menunjukkan kesalahan yang dikompensasi oleh mode RAID, dan 2 menunjukkan kegagalan total).

Anda juga bisa mendapatkan ringkasan cepat dari semua status perangkat RAID dengan melihatnya /proc/mdstat. Anda dapat memperoleh informasi tentang perangkat RAID /sys/class/block/md*/md/*juga; lihat Documentation/md.txtdi dokumentasi kernel. Beberapa /sysentri juga dapat ditulisi; misalnya Anda dapat memicu pemeriksaan lengkap md0dengan echo check >/sys/class/block/md0/md/sync_action.

Selain pemeriksaan spot ini, mdadm dapat memberi tahu Anda segera setelah sesuatu yang buruk terjadi. Pastikan bahwa Anda memiliki MAILADDR rootdi /etc/mdadm.conf(beberapa distribusi (misalnya Debian) mengatur ini secara otomatis). Kemudian Anda akan menerima pemberitahuan email segera setelah kesalahan (array yang rusak) terjadi .

Pastikan Anda menerima pengiriman email ke root pada mesin lokal (beberapa distribusi modern mengabaikannya, karena mereka menganggap bahwa semua email melewati penyedia eksternal - tetapi menerima email lokal diperlukan untuk administrator sistem yang serius). Uji ini dengan mengirimkan email akar: echo hello | mail -s test root@localhost. Biasanya, penyetelan email yang benar membutuhkan dua hal:

• Jalankan MTA di mesin lokal Anda. MTA harus diatur setidaknya untuk memungkinkan pengiriman surat lokal. Semua distribusi datang dengan MTA yang sesuai, pilih apa saja (tetapi bukan nullmailer jika Anda ingin email dikirimkan secara lokal).

• Alihkan surat ke akun sistem (setidaknya root) ke alamat yang Anda baca secara teratur. Ini bisa berupa akun Anda di mesin lokal, atau alamat email eksternal. Dengan sebagian besar MTA, alamat dapat dikonfigurasi dalam /etc/aliases; Anda harus memiliki garis seperti

  root: djsmiley2k
  

  untuk pengiriman lokal, atau

  root: [email protected]
  

  untuk pengiriman jarak jauh. Jika Anda memilih pengiriman jarak jauh, pastikan MTA Anda dikonfigurasi untuk itu. Bergantung pada MTA Anda, Anda mungkin perlu menjalankan newaliasesperintah setelah mengedit /etc/aliases.

Anda dapat memaksa pemeriksaan seluruh array saat online. Misalnya, untuk memeriksa larik /dev/md0, jalankan sebagai root:

echo check > /sys/block/md0/md/sync_action

Saya juga memiliki pekerjaan cron yang menjalankan perintah berikut sebulan sekali:

tar c /dir/of/raid/filesystem > /dev/null

Ini bukan pemeriksaan menyeluruh dari drive itu sendiri, tetapi itu memaksa sistem untuk secara berkala memverifikasi bahwa (hampir) setiap file dapat dibaca dengan sukses dari disk. Ya, beberapa file akan dibaca dari cache memori, bukan disk. Tapi saya pikir jika file tersebut ada dalam cache memori, maka file itu baru-baru ini berhasil dibaca dari disk, atau akan ditulis ke disk, dan salah satu dari operasi itu juga akan mengungkap kesalahan drive. Bagaimanapun, menjalankan pekerjaan ini menguji kriteria paling penting dari array RAID ("Bisakah saya berhasil membaca data saya?") Dan dalam tiga tahun saya telah menjalankan array saya, satu kali saya memiliki drive yang rusak, itu adalah perintah ini yang menemukannya.

Satu peringatan kecil adalah jika sistem file Anda besar, maka perintah ini akan memakan waktu lama; sistem saya membutuhkan sekitar 6 jam / TiB. Saya menjalankannya menggunakan ionicesehingga sisa sistem tidak terhenti selama cek drive:

ionice -c3 tar c /dir/of/raid/filesystem > /dev/null

paket Debian dan Ubuntu 'mdadm' berisi file tersebut

/etc/cron.d/mdadm

yang pada gilirannya minggu pertama setiap bulan akan menjalankan perintah

/usr/share/mdadm/checkarray --cron --all --idle --quiet

yang akan memeriksa semua array Anda untuk konsistensi (kecuali jika Anda mengatur AUTOCHECK menjadi false di / etc / default / mdadm ). Laporan akan dikirim ke pengguna 'root' (pastikan Anda menerima email seperti itu).

Saya menggunakan fungsi sederhana ini untuk memeriksa /proc/mdstat:

#Health of RAID array
raid() { awk '/^md/ {printf "%s: ", $1}; /blocks/ {print $NF}'  /proc/mdstat; }