> category_qav
Kalite, Test ve Doğrulama
Kusurları canlıya çıkmadan durdurmak için tasarlanmış test stratejileri, doğrulama planları, regresyon matrisleri ve kabul kriterleri.
Önemli Teknik Doküman Şablonu ve Hukuki Uyarı
TinyCTO.tv Teknik Doküman Şablon Bildirimi: Bu şablon genel eğitim ve operasyon amaçlı bir başlangıç materyalidir. Hukuki, vergisel, muhasebesel, yatırım, satın alma, mevzuat, güvenlik veya sertifikasyon danışmanlığı değildir. Gereklilikler ülkeye, kuruma, sözleşmeye ve riske göre değişir. Kullanmadan önce yetkin uzmanlarla gözden geçirip uyarlayın.
Erişilebilirlik Değerlendirme ve İyileştirme Paketi
Web ve mobil uygulamaların klavye navigasyonu, ekran okuyucu uyumluluğu, renk kontrastı ve anlamsal ARIA işaretlemeleri genelinde W3C WCAG 2.2 Seviye AA standartlarına uygunluğunu sağlayan kapsamlı dijital erişilebilirlik denetimi, değerlendirme matrisi ve iyileştirme çalışma paketi.
Ajan Dağıtımı ve Üretim Hazırlık İncelemesi
Otonom ajanları kanarya (canary) dağıtımları, yedek güvenlik sistemleri, hız sınırlama kotaları, prompt enjeksiyonu dayanıklılığı, gözlemlenebilirlik kapsamı ve geri alma (rollback) hazırlığı açılarından değerlendiren kapsamlı uçuş öncesi dağıtım kapısı ve kontrol listesi.
Ajan Değerlendirme Veri Kümesi ve Senaryo Kataloğu
Görev karmaşıklığı seviyelerini, uç durum enjeksiyonlarını, kullanıcı persona varyantlarını, çok adımlı akıl yürütme tuzaklarını ve doğrulanmış referans yörüngeleri kurallara bağlayan yönetilen kıyaslama veri kümesi ve test senaryosu kataloğu.
Ajan Değerlendirme, Simülasyon ve Test Planı
Çok adımlı yörünge (trajectory) değerlendirmesini, araç çağırma (tool-calling) doğruluğunu, görev tamamlama oranlarını (Pass@k), sentetik kıyaslama simülasyonlarını, sahte (mock) araç ortamlarını ve LLM-as-a-judge puanlama kriterlerini kurallara bağlayan titiz ajan değerlendirme ve test planı.
Ajan Hata, Yedekleme ve Kurtarma Planı
Ajan hata sınıflandırmasını, sonsuz döngü tespitini, bağlam penceresi taşma kurtarmasını, model bozulması durumunda alternatif model yönlendirmelerini ve insan denetimli dead-letter queue (DLQ) yeniden oynatma hatlarını kurallara bağlayan operasyonel dayanıklılık planı ve kurtarma rehberi.
Yapay Zekâ Güvenlik Gerekçesi ve Güvence Kanıt Paketi
Yüksek riskli otonom sistemler için İddia-Argüman-Kanıt (CAE) ve Hedef Yapılandırma Notasyonu (GSN) güvence mimarilerini, tehlike tanımlama matrislerini, ampirik doğrulama kütüklerini, sınır koşulu korkuluklarını ve yasal güvenlik gerekçesi (safety case) dosyalarını belirleyen resmi yapay zekâ güvenlik mühendisliği çerçevesi.
Yapay Zekâ Üretim Hazırlık Planı
Doğruluk kriterlerini, güvenlik raylarını, gecikme limitlerini, yedekleme mekanizmalarını ve sapma takibini denetleyen yapay zekâ hazırlık planı.
API, Sözleşme ve Entegrasyon Test Planı
Şema uyumluluğunu, sınır yükü (fuzzing) testlerini, sahte sunucu (mock) doğruluğunu, kırıcı değişiklik regresyon kapılarını ve uçtan uca API birlikte çalışabilirlik doğrulamasını tanımlayan tüketici odaklı sözleşme (contract) ve dağıtık servis entegrasyon test şartnamesi.
İş Kuralları Kataloğu ve Karar Tabloları
Bildirime dayalı kural envanterlerini, OMG DMN karar tablolarını, girdi/çıktı doğruluk matrislerini, kural öncelik hiyerarşilerini ve istisna yönetim protokollerini detaylandıran kurumsal iş mantığı yönetişim çalışma kitabı.
Parçalama (Chunking) Stratejisi ve Deney Çalışma Kitabı
Farklı parça boyutları (256, 512, 1024 belirteç), örtüşme yüzdeleri (%10-25) ve getirme başarısı genelinde sabit belirteç, özyinelemeli karakter, anlamsal benzerlik ve belge yapısı parçalama algoritmalarını karşılaştıran analitik RAG parçalama değerlendirme çalışma kitabı.
Veri Etiketleme, Açıklama ve Kalite Güvence Planı
Makine öğrenmesi veri etiketleme süreçleri için etiketleme kılavuzlarını, etiketleyici eğitimini, uzlaşma (consensus) iş akışlarını, Etiketleyiciler Arası Uyum (IAA) metriklerini ve aktif öğrenme kuyruklarını kapsayan operasyonel çerçeve ve kalite güvence planı.
Veri Taşıma, Mutabakat ve Geçiş Planı
Kayıpsız veritabanı taşımaları, gölge çift yazma (shadow dual-write), veri mutabakat denetimleri ve geri alma kriterleri için uygulama planı ve çerçevesi.
Veri Kalitesi Planı, Kurallar Kütüğü ve Puan Kartı
6 temel boyutu (Eksiksizlik, Benzersizlik, Tazelik, Geçerlilik, Doğruluk, Tutarlılık), otomatik doğrulama kurallarını ve eşik puan kartlarını belirleyen kapsamlı veri kalitesi mühendisliği standardı.
Hata Ayıklama (Defect Triage), Kalite Kapısı ve Sürüm Kalite Paneli
Önem-öncelik sınıflandırmasını (P0-P3 / S0-S3), hata ayıklama (triage) toplantı ritmini, SLA odaklı ortalama çözüm süresini (MTTR), otomatik Go/No-Go sürüm kalite kapılarını ve hata yoğunluğu eğilimlerini standartlaştıran kapsamlı yazılım hata yönetimi ve sürüm kalitesi telemetri modeli.
Teslimat Kabul ve Onay Tutanağı
Kabul kriterlerinin karşılandığını, test kanıt paketlerini, kritik olmayan kalan hata kayıtlarını ve gelir kaydetme (revenue recognition) yetkisini doğrulayan resmi sözleşmesel kilometre taşı kabul sertifikası ve teslimat onay tutanağı.
Teslimat Metrikleri Paneli, DORA ve Akış Metrikleri
Dört temel DORA metriğini (Dağıtım Sıklığı, Değişiklik Teslim Süresi, Değişiklik Hata Oranı, Hizmeti Geri Yükleme Süresi) Akış Çerçevesi göstergeleriyle (Akış Hızı, Akış Süresi, Akış Verimliliği, Akış Yükü) birleştirerek ampirik teslimat iyileştirmesi sağlayan kapsamlı mühendislik hızı, çıktısı ve güvenilirlik gösterge paneli.
Teslimat Çalışma Anlaşması, Hazır Tanımı (DoR) ve Bitti Tanımı (DoD)
Çalışma Anlaşmalarını (işbirliği normları, çekirdek saatler, kod inceleme SLA'ları), hikaye kabulü için katı bir Hazır Tanımını (DoR) ve canlı dağıtımları denetleyen otomatik bir Bitti Tanımını (DoD) belirleyen mühendislik takımı sosyal sözleşmesi ve kalite kapısı belgesi.
Temel Model (Foundation Model) Değerlendirme ve Kıyaslama Paketi
Temel modeller ve LLM'ler için standart yetenekleri (MMLU, GSM8K, HumanEval, HELM), alana özgü görev doğruluğunu, gecikme/işlem hacmi eğrilerini, bağlam penceresi bozulmasını ve token çıkarım ekonomisini değerlendiren ampirik değerlendirme ve kıyaslama çerçevesi.
Üretken Yapay Zekâ Değerlendirme ve Regresyon Paketi Şartnamesi
Küratörlüğü yapılmış altın test veri kümelerini, LLM-Yargıç (LLM-as-a-Judge) kalibre edilmiş rubriklerini, Ragas getirme metriklerini (bağlılık, yanıt ilgililiği, bağlam hatırlama), CI/CD dağıtım kapılarını ve istatistiksel regresyon iddialarını belirleyen otomatik üretken yapay zekâ değerlendirme ve regresyon test şartnamesi.
Kubernetes Hazırlığı ve Üretim Yeterlilik Paketi
Kubernetes iş yükü kaynak boyutlandırmasını (CPU/bellek istek ve sınırları), Pod Kesinti Bütçelerini (PDB), zarif kapatma (graceful termination), canlılık/hazırlık sondalarını (probes), NetworkPolicy kurallarını, HPA otomatik yatay ölçeklendirmesini ve admission controller yönetişimini denetleyen üretim yeterlilik puan kartı ve kontrol listesi.
Makine Öğrenimi Deney, Eğitim ve Tekrarlanabilirlik Planı
Kaynak kod commit'leri, kesin veri anlık görüntüsü özetleri (DVC), ortam konteynerleri (Docker/CUDA), hiperparametreler, eğitim kontrol noktaları (checkpoints) ve doğrulama karneleri arasında uçtan uca köken kuran makine öğrenimi model eğitimi ve bilimsel tekrarlanabilirlik planı.
Model İzleme, Veri Kayması ve Performans Planı
Veri dağılımı kaymasını (data drift), kavram kaymasını (concept drift), özellik önem kaymalarını (SHAP), tahmin gecikmesi bozulmalarını ve otomatik yeniden eğitim alarm tetikleyicilerini tespit eden sürekli canlı model izleme protokolü.
Fonksiyonel Olmayan Gereksinimler ve Kalite Niteliği Senaryoları
ISO 25010 sütunları genelinde SEI kalite niteliği senaryolarını (Uyaran, Kaynak, Ortam, Varlık, Tepki, Tepki Ölçütü) kullanarak doğrulanabilir fonksiyonel olmayan gereksinimleri (NFR) belirleyen mühendislik şartnamesi.
Operasyonel Hazırlık İncelemesi ve Canlı Kabul Paketi
Telemetri kapsamını, otomatik geri alma doğrulamasını, arıza geçiş işletim kitaplarını, kapasite payını, alarm yönlendirmesini ve nöbetçi devir teslimini denetleyen kalkış öncesi titiz operasyonel hazırlık incelemesi (ORR) kontrol listesi ve canlı kabul kapısı.
Olay Sonrası İnceleme ve Kök Neden Analizi
Google SRE kültürüne dayanan suçlamasız olay incelemesi, 5 Neden kök analiz araştırması, zaman çizelgesi rekonstrüksiyonu ve takip edilen önleyici aksiyon maddelerini içeren üretim kılavuzu.
Sızma Testi Kapsamı ve İyileştirme Takipçisi
Ofansif güvenlik angajman kurallarını (rules of engagement), hedef kapsam sayfalarını, güvenlik açığı doğrulama günlüklerini, CVSS puanlama derecelerini, yeniden test protokollerini ve resmi iyileştirme onay belgelerini içeren çerçeve.
Performans, Yük ve Ölçeklenebilirlik Test Planı
İş yükü modellerini, sanal kullanıcı (VU) artış eğrilerini, temel kıyaslamaları, stres doygunluk limitlerini, ani yük dayanıklılığını, uzun süreli (soak) test parametrelerini ve p95/p99 gecikme Hizmet Seviyesi Hedeflerini (SLO) kurallara bağlayan üretim düzeyinde fonksiyonel olmayan doğrulama planı.
Tahminleme Modeli Değerlendirme ve Kabul Planı
Nicel performans eşiklerini (PR-AUC, Brier skoru), dilim tabanlı alt popülasyon stres testlerini, demografik adalet denetimlerini (Farklı Etki), kalibrasyon eğrilerini ve model risk onay kapılarını belirleyen kapsamlı model değerlendirme ve canlı kabul protokolü.
Problem Yönetimi ve Bilinen Hata (KEDB) Paketi
Reaktif ve proaktif problem araştırmalarını, yapılandırılmış kök neden analizi (RCA) metodolojilerini (5 Neden, Balık Kılçığı, Kepner-Tregoe), Bilinen Hata Veritabanı (KEDB) şemasını, geçici çözüm kılavuzlarını ve kalıcı teknik borç iyileştirme iş listelerini belirleyen ITIL 4 problem yönetimi ve kök neden mühendisliği çerçevesi.
Ürün Keşif Araştırması ve Kanıt Paketi
Kullanıcı mülakat sentezlerini, fırsat çözüm ağaçlarını, hipotez doğrulama deneylerini ve yapılandırılmış kanıt günlüklerini birleştiren sürekli keşif araç seti.
İstem (Prompt) Şartnamesi ve Değişiklik Kaydı
Üretim sistemi istemleri (prompts) için az-örnekli (few-shot) kalıpları, girdi değişken şemalarını, enjeksiyon savunmalarını ve regresyon test paketlerini detaylandıran mühendislik şartnamesi ve sürüm kontrol standardı.
RAG Değerlendirme Planı
Erişim hassasiyetini, gerçekliği (groundedness) ve yanıt uygunluğunu CI/CD gerileme kapılarıyla ölçen değerlendirme planı.
Gereksinim İzlenebilirlik Matrisi
Gereksinimden mimari bileşene, test senaryolarına ve sürümlere kadar çift yönlü izlenebilirlik sağlayan dinamik çalışma kitabı.
Dayanıklılık, Kaos Mühendisliği ve Kurtarma Test Planı
Kontrollü hata enjeksiyon deneyleri, etki alanı (blast radius) sınırlaması, kararlı durum doğrulaması ve felaket kurtarma tatbikatları için operasyonel çerçeve.
Bilgi Getirme (Retrieval) Stratejisi ve Test Şartnamesi
Yoğun anlamsal aramayı, seyrek sözlüksel BM25 eşleştirmesini, Karşılıklı Sıralama Birleştirmeyi (RRF), çapraz kodlayıcı yeniden sıralamayı (re-ranking), sorgu genişletmeyi (HyDE) ve otomatik Recall@k / NDCG@k test paketlerini kurallara bağlayan kurumsal hibrit bilgi getirme mimarisi ve ampirik test şartnamesi.
Güvenli SDLC ve Güvenlik Kapısı Planı
Tehdit modellemeyi, taahhüt öncesi sır tespitini, otomatik SAST/DAST/SCA kalite kapılarını, konteyner imaj imzalamasını ve dağıtım durdurma eşiklerini entegre eden mühendislik güvenlik standardı.
SEO/AEO İçerik Özeti ve Yayın Kalite Güvence Paketi
Varlık arama niyeti haritalaması, Schema.org JSON-LD doğrulama kontrol listeleri, yapay zeka tarayıcı erişim kuralları ve editoryal QA kriterleri içeren gelişmiş Arama ve Yanıt Motoru Optimizasyonu (AEO) mimarisi.
Yazılım Gereksinim Şartnamesi (SRS)
Fonksiyonel, kalite, arayüz, veri ve yasal uyum gereksinimlerini ayrıştıran resmi yazılım şartnamesi.
Yazılım Tedarik Zinciri ve SBOM Güvence Paketi
Makine tarafından okunabilir bileşen envanterlerini (CycloneDX/SPDX), kriptografik paket imzalamayı (Sigstore), bağımlılık güvenlik açığı taramasını, açık kaynak lisans uyumluluğunu ve SLSA Seviye 3 köken doğrulamasını detaylandıran yazılım tedarik zinciri güvenliği çerçevesi ve Yazılım Malzeme Listesi (SBOM) güvence paketi.
SRE Olgunluk Değerlendirmesi ve İyileştirme Yol Haritası
Kurumları altı boyutta değerlendiren kapsamlı Site Reliability Engineering (SRE) olgunluk değerlendirme çerçevesi ve çok aşamalı dönüşüm yol haritası: Kültür ve Psikoloji, Telemetri ve SLO'lar, Olay Yönetimi, Rutin İş (Toil) Tasfiyesi, Sürüm Mühendisliği ve Kaos/Dayanıklılık.
Teknik Durum Tespiti Tedarikçi Soru Formu
Tedarikçi mühendislik olgunluğunu, kod test kapsamını, mimari ölçeklenebilirliği, felaket kurtarmayı ve operasyonel hijyeni denetleyen teknik durum tespiti soru formu.
Test Otomasyon Stratejisi ve Kapsam Matrisi
Test piramidi katman dağılımını (birim, sözleşme, entegrasyon, uçtan uca), yürütme süre bütçelerini, CI/CD tetikleyicilerini, kararsız (flaky) test karantina politikalarını ve YG (ROI) metriklerini belirleyen kurumsal test otomasyon mimarisi ve kapsam yönetişim modeli.
Test Senaryosu Tasarımı ve Keşif Testi Şartnamesi Paketi
Resmi şartname tabanlı test senaryolarını (Eşdeğerlik Bölümleme, Sınır Değer Analizi, Karar Tabloları, Gherkin BDD) Oturum Tabanlı Test Yönetimi (SBTM) altındaki yapılandırılmış zaman kısıtlı Keşif Testi Şartnameleri ile birleştiren kapsamlı test tasarım çerçevesi.
Test Verisi Yönetimi ve Gizlilik Planı
Sentetik veri üretimini, otomatik PII maskeleme ve sahte kimlikleştirmeyi (pseudonymization), veri alt kümeleme (subsetting) boru hatlarını, self-servis test ortamı veri tedariğini ve yasal uyum doğrulamasını standartlaştıran kurumsal test verisi yönetişim ve gizlilik mühendisliği planı.
Test Planı, Yürütme ve Kanıt Kontrol Paketi
ISO/IEC/IEEE 29119 standartlarına uygun olarak ana test planlarını, test kapsamını, ortam gereksinimlerini, yürütme takvimlerini, hata ciddiyet derecelendirmesini ve denetime hazır test yürütme kanıt kütüklerini oluşturan kapsamlı kalite güvence yönetişim çerçevesi.
Test Stratejisi ve Doğrulama Planı
Birim, sözleşme, E2E, performans, erişilebilirlik ve kaos test katmanlarını kapsayan kapsamlı kalite güvence planı.
Kullanıcı Kabul Testi (UAT) ve Onay Paketi
UAT stratejisini, iş senaryosu senaryolarını, testçi katılımı ve eğitimini, geri bildirim değerlendirme akışlarını ve sözleşmesel hata sorumluluk yönetişimi içeren resmi yönetici onay sertifikalarını düzenleyen uçtan uca iş doğrulama ve kabul çerçevesi.