Danube Data tek bir sunucunun kapanmasıyla sekiz saatlik kesinti yaşadı
Öne çıkanlar
- İzleme sistemi arızayı 3 dakikada tespit etti ancak nöbetçi ekibe sesli alarm iletilmediği için müdahale 8 saat gecikti.
- Silme kodlama parçalarının aynı sunucudaki disklere yerleşebilmesi tek makine kaybında tüm depolama erişimini kesti.
- Şirket arızanın ardından sesli arama tabanlı nöbetçi bildirim altyapısı ve otomatik güç yönetimi yazılımı devreye aldı.
Bulut altyapı sağlayıcısı Danube Data, 17 Ağustos 2026 tarihinde bir depolama sunucusunun aniden kapanması nedeniyle sekiz saati aşan bir hizmet kesintisi yaşadı. Kesinti süresince nesne depolama, konteyner kayıt defteri ve dağıtım sistemleri devre dışı kaldı. Şirket, otomatik izleme sistemlerinin arızayı üç dakika içinde tespit edip durum sayfasına yansıtmasına rağmen nöbetçi mühendislere telefonla uyarı gönderecek bir bildirim mekanizması bulunmadığı için olaya sabah saatlerine kadar müdahale edilemediğini açıkladı.
Tek bir sunucu kaybının tüm nesne depolama hizmetini durdurmasının arkasında mimari tasarım eksiklikleri yer aldı. Şirket, silme kodlama (erasure coding) yöntemiyle verileri parçalara ayırmasına rağmen bu parçaların farklı fiziksel sunuculara dağıtılmasını zorunlu kılmadı. Aynı sunucudaki birden fazla diske denk gelen veri blokları ve depolama geçidinin ihtiyaç duyduğu yapılandırma kayıtları tek bir sunucunun kapanmasıyla erişilemez hale geldi. Çalışan mevcut uygulamalar kesintiden etkilenmedi ve herhangi bir müşteri verisi kaybolmadı.
Olayın ardından Danube Data, e-posta yerine sesli arama ve SMS ile çalışan yeni bir nöbetçi alarm altyapısını devreye aldı. Şirket ayrıca kapalı kalan sunucuları bağımsız sinyalleri doğrulayarak uzaktan çalıştırabilen bir gözetleme yazılımı (watchdog) geliştirdi. Depolama parçalarını farklı fiziksel sunuculara dağıtacak küme mimarisi güncellemesinin ise ek donanım yatırımlarıyla tamamlanacağı bildirildi.
Bu özet yapay zekâ ile hazırlanmıştır; ayrıntılar ve doğrulama için orijinal kaynağa başvurun.