> tpl_ops_008
Uyarı Kataloğu, Yönlendirme ve Nöbet Planı
Belirti tabanlı alarm eşiklerini, ciddiyet-bildirim yollarını, alarm yorgunluğunu önleme politikalarını ve adil nöbetçi tazminat modellerini tanımlayan kapsamlı mühendislik alarm kataloğu, yönlendirme matrisi ve sürdürülebilir nöbet rotasyon planı.
Belirti tabanlı çağrıları, yönlendirme kurallarını, eskalasyon yollarını ve sürdürülebilir nöbetçi tazminatını düzenleyen SRE alarm çerçevesi.
Önemli Teknik Doküman Şablonu ve Hukuki Uyarı
TinyCTO.tv Teknik Doküman Şablon Bildirimi: Bu şablon genel eğitim ve operasyon amaçlı bir başlangıç materyalidir. Hukuki, vergisel, muhasebesel, yatırım, satın alma, mevzuat, güvenlik veya sertifikasyon danışmanlığı değildir. Gereklilikler ülkeye, kuruma, sözleşmeye ve riske göre değişir. Kullanmadan önce yetkin uzmanlarla gözden geçirip uyarlayın.
Çözülen Üretim Problemi
Mühendislik ekipleri, gece 03:00'te asılsız alarmlarla personeli uyandıran gürültülü ve aksiyonsuz bildirimler nedeniyle ağır alarm yorgunluğu yaşar; gerçek kesintilerin gözden kaçmasına ve tükenmişliğe yol açar.
Ne Zaman Kullanılmalı?
- •Dağıtık mühendislik ekipleri için yeni bir 7/24 veya güneşi takip eden (follow-the-sun) nöbet rotasyonu kurarken
- •Prometheus Alertmanager, Datadog veya PagerDuty üzerindeki alarm kurallarını denetleyip temizlerken
- •Nöbet vardiyaları için adil tazminat, telafi izni ve devir protokolleri oluştururken
Ne Zaman Kullanılmamalı?
- •Canlı bir Sev-1 kriz odasını yönetirken (TPL-OPS-007 kullanın)
- •Üst düzey kurumsal mimari telemetri tasarımında (TPL-ARC-013 kullanın)
5 Şablon Bölümü ve Yapısal İskelet
Dahili nedenler (CPU %85) yerine doğrudan kullanıcıyı etkileyen belirtilere (5xx hata oranı yüksek, ödeme başarısız) alarm kurarak gürültüyü %90 azaltma.
P1 (Nöbetçiye acil telefon/çağrı), P2 (Mesai saatlerinde acil Slack uyarısı), P3 (Otomatik Jira bileti) ve P4 (Bilgilendirici günlükleme).
Her P1/P2 çağrısının doğrudan adım adım müdahale rehberine ve ilgili izleme paneline bağlantı içermesi zorunluluğu.
Mühendis başına 6-8 haftada en fazla 1 hafta nöbet, vardiya devir teslim kontrol listeleri ve izolasyonu önleyen birincil/ikincil eşleşme.
Çağrı cihazı taşıma ücreti, aktif müdahale için saatlik fazla mesai ve telafi dinlenme izinlerini (TOIL) içeren şeffaf ücret yapısı.
Doldurma ve Uygulama Yönergeleri
Bağımsız İnceleme ve Onay Kontrol Listesi
- Tüm zorunlu bölümler dolduruldu
- Gizli anahtar veya parola içermiyor
- Yönetici sponsor onayı alındı
Uyarı Kataloğu, Yönlendirme ve Nöbet Planı - Örnek Vaka Analizi
Örnek Organizasyon: Sovereign Ödemeler 7/24 Küresel Nöbet Rotasyonu ve Alarm Modernizasyonu
Sovereign Ödemeler 7/24 Küresel Nöbet Rotasyonu ve Alarm Modernizasyonu için eksiksiz operasyonel uygulamayı gösteren gerçek dünya vaka analizi.
- •140 ham altyapı alarmı 12 belirti tabanlı SLO alarmına dönüştürülerek asılsız çağrıların %78'i temizlendi
- •Londra ve Singapur arasında güneşi takip eden nöbet düzeni kurularak gece uykudan uyandıran çağrılar %92 azaltıldı
- •Şirket genelinde kabul gören şeffaf icap tazminat politikası ile nöbet stresi kaynaklı işten ayrılmalar sıfıra indirildi
Sıkça Sorulan Sorular
Google SRE'nin "Belirtilere Karşı Nedenlere Alarm Kurma" kuralı nedir?
Nedenler içeride olan bitendir (CPU %92 veya disk IOPS yüksek). Belirtiler ise kullanıcının yaşadığı sorundur (ödeme API'si 500 hatası veriyor veya sayfa açılışı >2 saniye). Nedenlere çağrı kurmak büyük gürültü yaratır çünkü sistemler kullanıcıyı etkilemeden yüksek CPU ile çalışabilir. Yalnızca belirtilere çağrı kurun.
Sektör standartlarına göre "Sağlıklı Bir Nöbet Vardiyası" nasıl tanımlanır?
Sağlıklı bir vardiya, 12 saatlik dönemde en fazla iki çağrı üretir ve bu çağrıların hiçbiri asılsız değildir. Bir mühendis her gece defalarca uyandırılıyorsa nöbet düzeni çökmüştür ve derhal teknik borç temizliğine öncelik verilmelidir.
Her P1 alarmı neden zorunlu olarak bir işletim rehberi bağlantısı içermelidir?
Bir mühendis gece 03:30'da uyandırıldığında, uyku sersemliği nedeniyle bilişsel karar alma yetisi ciddi şekilde zayıflar. Doğrulanmış tanılama komutları ve geri alma adımları içeren açık bir rehber, paniğe kapılarak küçük bir arızanın tam bir felakete dönüştürülmesini önler.
Teknik Doküman Şablon Paketi
Giriş GerekliTüm boş şablonları, işlenmiş senaryoları ve doğrulama manifestolarını tek bir arşivde indirin.
Yetkili Standartlar ve Kaynaklar
- Google SRE Workbook: Being On-CallGoogle SRE • OFFICIAL REQUIREMENT
- PagerDuty: Incident Response and On-Call Health GuidePagerDuty • OFFICIAL REQUIREMENT