Cloudflare küresel altyapısında yer alan veritabanı izinlerinde yapılan değişiklik büyük bir arıza zincirini tetikledi. Şirket yaklaşık altı saat boyunca geniş çaplı hizmet kesintisi yaşadı. Sorunun kaynağı açıklanınca küresel trafiğin neden durma noktasına geldiği daha net ortaya çıktı.
Cloudflare Ağındaki İzin Hatası Kesintiyi Derinleştirdi
Cloudflare’in küresel ağı, 120’den fazla ülkede konumlanan veri merkezleriyle internet trafiğini yönetiyor. Bu altyapı, içerik dağıtım ağı hizmetlerinden siber güvenlik çözümlerine kadar geniş bir operasyonel yelpazeye destek veriyor.
Şirkette gerçekleştirilen rutin bir izin güncellemesi, Bot Management sisteminin kullandığı kritik bir yapılandırma dosyasını etkiledi. Dosyada oluşan fazla sütun verisi, yazılımın beklenmedik şekilde çökmesine neden oldu. Hata, küme düğümlerinde dönüşümlü olarak ortaya çıktığı için trafik akışında dalgalanmalar yaşandı ve hizmet kesintileri aralıklı olarak gözlemlendi.
Aşırı büyüyen dosya ağdaki makineler arasında yayılınca çekirdek proxy katmanı çalışamaz hâle geldi. Rust kodunda oluşan hata panik komutunu tetikledi. Sistem 5xx hataları üretince hizmetler arka arkaya devre dışı kaldı.
Mühendisler sorunu tespit edince hatalı dosyayı önceki bir sürümle değiştirdi. Çekirdek trafik 14.30 UTC itibarıyla normale döndü. Tüm hizmetler 17.06 UTC’de yeniden erişilebilir hâle geldi. Kesinti içerik dağıtım ağıyla güvenlik sistemlerini doğrudan etkiledi. Turnstile doğrulama modülü, Workers KV, e-posta güvenliğiyle panel erişimi de etkilenen hizmetler arasında yer aldı.
Cloudflare CEO’su Matthew Prince kesintinin siber saldırıyla ilgisi olmadığını açıkladı. Prince yaşanan olayın şirket için kabul edilemez olduğunu belirtti. Açıklamada en son 2019’da buna yakın büyüklükte bir kesinti yaşandığı ifade edildi.
Haziranda Cloudflare Zero Trust WARP bağlantılarında geniş çaplı arıza giderdi. O arıza Access doğrulama katmanını da etkiledi. Bu süreçte Google Cloud altyapısı da sorun yaşadı. Ekimde Amazon Web Services DNS kaynaklı arıza nedeniyle milyonlarca sitenin erişimi aksadı. Son kesinti küresel ağ tabanlı hizmetlerin ne kadar hassas yapılandığını bir kez daha gösterdi.
