Microsoft, geçtiğimiz gün çok sayıda bulut hizmetini etkileyen Microsoft 365 kesintisinin planlı bakım sırasında oluşan otomasyon hatasından kaynaklandığını doğruladı. Şirketin yayımladığı ilk olay değerlendirme raporuna göre ağ bakım sistemi, yanlış yapılandırma nedeniyle hedeflenenden daha fazla ağ cihazındaki IP yönlendirmelerini kaldırdı. Sorunun giderilmesinin ardından Microsoft 365 ve Azure hizmetleri kademeli olarak yeniden normale döndü.
Otomatik Bakım Süreci Beklenmeyen Ağ Değişikliğini Tetikledi
Microsoft, olayın ABD’deki West US Azure bölgesinde yürütülen rutin ağ bakım çalışması sırasında başladığını açıkladı. Şirketin bakım sistemi normal koşullarda mühendislerin taleplerini otomatik olarak işleyerek ağ üzerinde güvenli değişiklikler gerçekleştiriyor. Yapılan ilk inceleme ise bu otomasyon zincirindeki yazılım hatasının bakım kapsamını yanlış hesapladığını ortaya koydu.
Hata nedeniyle bakım işlemiyle ilgisi bulunmayan ek ağ cihazları da aynı süreç içerisine dahil edildi. Sonuç olarak Microsoft’un West US veri merkezi ile geniş alan ağı (WAN) arasındaki çok sayıda IP yönlendirme kaydı beklenmedik şekilde kaldırıldı. Doğrudan cevap vermek gerekirse kesintinin nedeni siber saldırı değil, Microsoft’un otomatik bakım altyapısındaki yazılım hatası oldu. Microsoft, şirket içi telemetri verileriyle mühendislik incelemelerini karşılaştırdıktan sonra problemin son ağ değişikliğinden kaynaklandığını belirledi ve ilgili yapılandırmayı geri almaya başladı.
Ağ yönlendirmelerinin silinmesi, West US Azure bölgesine giren veya bu bölgeden çıkan veri trafiğini doğrudan etkiledi. Bölge içerisindeki yerel trafik çalışmayı sürdürürken farklı bölgeler arasındaki bağlantılar kesintiye uğradı. Bu nedenle kullanıcılar bazı hizmetlere erişebilse de birçok Microsoft bulut servisi kararsız çalıştı.
Kesinti süresince SharePoint Online kullanıcıları hata mesajları aldı, OneDrive erişiminde kopmalar yaşandı, Microsoft Teams sohbetleri yavaşladı ve görseller yüklenemedi. Microsoft 365 Yönetim Merkezi, Power Automate, Copilot Chat, Microsoft Loop, Windows 365, Power BI, Microsoft Defender, Microsoft Graph, Azure Kubernetes Service, Azure Monitor, Azure Firewall ve Microsoft Sentinel gibi çok sayıda platform da aynı ağ probleminden etkilendi.
Microsoft Defender tarafında çalışan bazı güvenlik analizleri ile otomatik olay müdahale süreçleri de gecikmeler yaşadı. Özellikle Threat Explorer ve Advanced Hunting üzerinden başlatılan bazı işlemler beklenen şekilde tamamlanamadı. Bu durum, kurumsal güvenlik operasyonlarını doğrudan etkileyen hizmetlerin de kesintiden pay aldığını gösterdi.
Microsoft mühendisleri, kesintinin başlamasının ardından ilk olarak ağ trafiğini alternatif bağlantı yollarına yönlendirmeye çalıştı. Bu geçici çözüm bazı müşterilerin hizmetlere yeniden erişmesini sağladı ancak asıl sorun bakım değişikliğinin geri alınmasıyla giderildi. Şirket, ilgili yapılandırmayı geri alma işlemini tamamladıktan sonra sistem telemetrisi ile müşteri geri bildirimlerinin hizmetlerin normale döndüğünü doğruladığını bildirdi.
Şirket, yayımladığı ön olay inceleme raporunda bakım otomasyonunda kullanılan güvenlik kontrolleri ile değişiklik doğrulama süreçlerini kapsamlı biçimde yeniden analiz edeceğini açıkladı. Microsoft ayrıca bakım taleplerini otomatik komutlara dönüştüren altyapının ek güvenlik doğrulamalarından geçirileceğini belirtti.
Bulut altyapılarında ağ yönlendirme tabloları, veri merkezleri arasındaki trafiğin temelini oluşturuyor. Bu nedenle yönlendirme kayıtlarında oluşan küçük bir otomasyon hatası bile Microsoft 365, Azure, Power Platform ve güvenlik servisleri gibi yüzlerce bulut hizmetini aynı anda etkileyebiliyor. Microsoft’un nihai olay değerlendirme raporunu soruşturmanın tamamlanmasının ardından yaklaşık iki hafta içinde yayımlaması bekleniyor.
