Ugrás a tartalomhoz30 dakikada aylık felaket kurtarma tatbikatı: neler yapıyoruz, neler yapmıyoruz
Bir felaket kurtarma tatbikatı tam günlük bir etkinlik olamaz. Olursa asla yapılmaz. 30 dakika, kesinlikle.
Her ay pratiği yapılmayan bir felaket kurtarma tatbikatı plan değil, kâğıttır.
Pek çok şirket 6 ayda bir felaket kurtarma tatbikatının yeterli olduğunu düşünür. Bu tehlikelidir — 6 ayda runbook unutulur, yeni ekip üyeleri hiç pratik yapmamıştır ve gerçek bir olay geldiğinde donup kalırlar. Biz her ay 30 dakika ayırıyoruz. Neden yalnızca 30? Çünkü daha uzun süren hiçbir şey gerçekte yapılmıyor.
30 dakikanın dağılımı
- 0–5 dk: senaryo seçilir (10 senaryo arasından zarla rastgele)
- 5–20 dk: runbook uygulanır — tam kurtarma değil, yalnızca ilk 3 adım
- 20–25 dk: ne işe yaradı, ne yaramadı, runbook'ta ne değişmeli
- 25–30 dk: gerekirse runbook güncellenir (git commit)
- İlk 3 adım 15 dakikaya sığmıyorsa runbook kötüdür — yeniden yazılır
10 senaryo: ana veritabanı çöktü, ağ bölünmesi, veri merkezinin tamamı çöktü, TLS sertifikasının süresi her yerde doldu, kimlik doğrulama sağlayıcısı çöktü, dağıtım bozuk, DNS zehirlendi, yedek bozuk, izleme kör, şifreleme anahtarı kayboldu. Her ay rastgele. 12 ayda 10 senaryonun hepsi gelir; böylece ekip hepsini çalışmış olur.
Sorun felaketin yaşanacak olması değil. Sorun, nabzın pratik yapmak için artık çok geç olduğunda yükselmesidir.