Release sonrasında production sorunu çıktı

Vaka dosyası

Karar vermeden önce kanıtı ayır.

Dört görünüm aynı durumu farklı açıdan açar. Bir görünüm seçmek ilerleme kaydı oluşturmaz.

Görev

Bu durumda neyi değerlendireceksin?

Senaryo sonunda kullanıcı,

01
release sonrasında görülen bir Production sorununda önce kullanıcı etkisini ve bilinen değişikliği kanıtla görünür kılmayı,
02
Incident koordinasyonu içinde Feature Flag, Rollback veya başka mitigation seçeneklerini eksik bilgilerle birlikte değerlendirmeyi ve stabilizasyon sonrası Postmortem'i suçlama yerine öğrenme için kullanmayı değerlendirebilmelidir.

Rol ve ekip

Rolün: Bir e-ticaret ekibinde ilk ayındaki junior geliştiricisin. Son checkout release'inde küçük bir kod değişikliğin var; Production değişikliği yapma yetkin yok. Alert sonrasında ekip incident kanalına çağrıldın.
Ekip ve ürün bağlamı: Checkout API, sepet toplamını hesaplamak için ayrı bir vergi servisine istek gönderiyor. Ekip release davranışını kademeli açmak için bir Feature Flag kullanabiliyor ve kullanıcı etkili olayları kendi Incident ölçütleriyle yönetiyor. Belirli bir araç, rol adı veya severity numarası senaryonun zorunlu koşulu değil.

Kanıt sınırı

Bildiğin: Production deployment kaydı, çalışan version, Feature Flag değeri, checkout başarı oranı ve örnek trace bilgisi erişilebilir. Bir önceki artifact saklanıyor. Ekipte escalation ve incident çalışma kaydı için tanımlı bir kanal var.
Kasıtlı olarak eksik bırakılan: İlk anda hataların flag cohort'una göre dağılımı, eski yolun güncel sağlığı, database değişikliğinin eski version ile uyumu, harici vergi servisinin genel durumu, kalıcı veri etkisi ve hangi mitigation'ın en düşük riskli olduğu bilinmiyor.

Temsili kayıt

Temsili artefact · Incident özetiGerçek bir şirket kaydı, ekran görüntüsü veya alıntı değildir.

Temsili incident özeti — gerçek bir şirket kaydı, dashboard çıktısı veya ekip alıntısı değildir.

INC-58 — Checkout başarı oranı release sonrasında düştü

Durum: Değerlendiriliyor

Etki başlangıcı: 14:11

Kullanıcı etkisi:

Checkout başarı oranı beş dakikada %99,2'den %91,6'ya düştü.
Hata oranı %0,8'den %8,4'e yükseldi.
Bütün kullanıcıların mı, belirli bir cohort'un mu etkilendiği henüz bilinmiyor.

Son değişiklik:

14:07 — checkout-api v2026.07.20.3 Production deployment tamamlandı.
Deployment kaydı application artifact'i, configuration güncellemesi ve

tax_quote_version adlı nullable kolon migration'ını listeliyor.

Bir önceki artifact mevcut; eski version'ın yeni schema ile uyumu henüz

doğrulanmadı.

Feature Flag:

new-tax-routing değeri saat 14:08'de trafiğin %35'i için on yapıldı.
off davranışının şu an sağlıklı olup olmadığı ve flag öncesinde oluşmuş

yan etkiler bilinmiyor.

Telemetry:

Error-rate metriği etkiyi gösteriyor.
On iki örnek trace, vergi servisi adımında timeout gösteriyor.
Trace örneklerinin flag cohort'u ve harici servisin genel sağlık durumu

henüz ilişkilendirilmedi.

Koordinasyon:

Incident kanalı açıldı; koordinasyon rolü henüz kayda geçmedi.
Denenmiş bir mitigation ve ölçülmüş sonucu yok.

Bu özet değişiklik ile etki arasında zaman yakınlığı gösterir; tek başına kök neden, güvenli Rollback veya flag kapatmanın yeterli olduğunu kanıtlamaz.

Bölüm 1 / 4