Rebuild Sırasında Disk Düştü: Ne Yapmalı?

Laboratuvarımıza gelen RAID vakalarının en sık senaryosu şudur: bir disk arızalanır, yerine yeni disk takılır, rebuild başlatılır ve rebuild sırasında ikinci bir disk düşer. RAID 5 dizisi bu noktada tamamen erişilemez hale gelir.

Neden tam da rebuild sırasında oluyor?

Rebuild, dizideki tüm diskleri baştan sona okumak zorundadır. Eksik diskin içeriği, kalan disklerdeki veri ve parite bloklarından hesaplanır. Bu, sistemin normal çalışmada asla yaşamadığı bir yük anlamına gelir.

Buna iki etken eklenir. Birincisi, dizideki diskler genellikle aynı anda satın alınmış, aynı partiden gelmiş ve aynı süre çalışmıştır; yani ömürlerinin sonuna yakın noktalara birlikte gelirler. İkincisi, normal kullanımda hiç okunmayan bölgelerdeki sessiz hatalar ancak baştan sona okuma yapıldığında ortaya çıkar.

Sonuç olarak rebuild, zayıf diskleri ortaya çıkaran bir stres testine dönüşür. Disk ne kadar büyükse rebuild o kadar uzun sürer ve risk penceresi o kadar genişler.

İkinci disk düştü — ilk yapılacak

Sistemi kapatın ve başka hiçbir şey yapmayın. Bu cümle abartı değil; bu noktadan sonra yapılan müdahalelerin çoğu geri alınamaz.

Dizi şu anda erişilemez ama çoğu durumda veri hâlâ diskler üzerindedir. Kurtarma, dizinin yapısını çözüp eksik parçaları hesaplayarak yapılır. Bu ancak diskler üzerine yeni bir şey yazılmadıysa mümkündür.

Kesinlikle yapmayın

• Rebuild'i tekrar başlatmayın. Her deneme yarım kalmış yazma işlemleriyle veriyi biraz daha bozar. Bu, en sık gördüğümüz ve en çok zarar veren hatadır.
• Düşen diski zorla çevrimiçi yapmayın. Eski veri taşıyan bir disk güncel disklerle karıştığında tutarsız sonuç üretir.
• Yeni dizi oluşturmayın. "Create New Array", eski düzeni geri getirmez; yeni bir imza yazar ve bu işlem geri alınamaz.
• Diskleri initialize etmeyin.
• chkdsk veya fsck çalıştırmayın. Eksik diskli dizide tutarsızlığı kalıcılaştırır.
• Yedeği bozuk diziye geri yazmayın. Kurtarma öncesi tek kanıt kaybolur.

Yapılması gerekenler

1. Sunucuyu kapatın.
2. Denetleyici ekranındaki mesajı fotoğraflayın. Hangi disklerin ne durumda olduğu kurtarmanın başlangıç noktasıdır.
3. Hangi diskin ne zaman düştüğünü not edin. İlk düşen disk eski veri taşır; bu bilgi olmadan hangi diskin güncel olduğu ayırt edilemez.
4. Diskleri yuva numarasıyla etiketleyip çıkarın.
5. Dizinin tamamını laboratuvara ulaştırın — düşen diskler dahil.

Kurtarma şansı ne kadar?

Hiçbir müdahale yapılmamış, iki disk düşmüş bir RAID 5 dizisinde kurtarma şansı genellikle yüksektir; çünkü sorun fiziksel değil mantıksaldır. Buna karşılık defalarca rebuild denenmiş bir dizide şans belirgin şekilde düşer. Farkı yaratan şey arızanın büyüklüğü değil, arızadan sonra yapılanlardır.

Bir daha yaşamamak için

Rebuild penceresi, RAID 5'in yapısal zayıflığıdır. 6 diski aşan veya 8 TB üzeri disk kullanan dizilerde RAID 6 tercih edin — çift parite, rebuild sırasında ikinci arızaya dayanır. Ayrıca denetleyici uyarılarını e-postayla alacak şekilde yapılandırın; çoğu vakada ilk disk aylar önce düşmüş ama kimse fark etmemiştir.

Rebuild başarısız olduysa sistemi kapatın ve bize ulaşın.