Denetim, kayıt ve raporlama
Yazılı yönetişim kararlarını gözlemlenebilir kontrollere çevirmeyi, rastgele örneklemle ihlal aramayı ve bulguları önem sırasına dizip sahip ve tarihle kapatmayı öğretir. Tekrarlanabilir bir denetim turu ile rota kapanır.
Önkoşul: Guardrails, MLOps
BU DERSİN SONUNDA
- Bir yönetişim kararını gözlemlenebilir tek bir kontrole çevirmek
- Rastgele örneklemle ihlal aramak ve gözlemi bulgu sınıfına yükseltmek
- Bulguları geri alınabilirlik, sessizlik ve yayılma ölçütleriyle sıralamak
- Denetim turunu sahip, kapanış tarihi ve doğrulama yöntemiyle takvime bağlamak
- 1
Teori
Kavramın çalışma mantığı
- 2
Örnek
Gerçek bir senaryo üzerinde gösterim
- 3
Lab
Uygulamalı alıştırma
- 4
Test
Kısa ölçüm
- 5
Proje
Rotadaki projeye katkı
Kısa cevap
Denetim, yazılı kararların üretimde gerçekten uygulanıp uygulanmadığını örnekleme ile ölçmektir. İyi bir denetim politika metnini değil sistemin davranışını inceler: her karar için "bu kararın ihlal edildiğini nasıl görürüm" sorusunun cevabı bir kontroldür. Rapor ise bulguları önem sırasına dizer ve her bulguyu bir sahip ve bir tarihle kapatır.
Teori: kontrol edilebilir karar#
Her yönetişim kararı bir kontrole çevrilebilmelidir. "Adres alanı model istemine girmez" kararı, istem günlüklerinde adres kalıbı aramakla kontrol edilir. Çevrilemeyen bir karar — "veri sorumlu biçimde kullanılır" — bir niyet beyanıdır; ölçülemediği için denetlenemez, bu yüzden karar metnine yazılmaz.
Denetimin birimi kayıt değil karardır. Tüm veriyi taramak ne mümkündür ne gereklidir; her karar için küçük ve rastgele bir örneklem, kararın uygulanıp uygulanmadığını göstermeye yeter. Örneklemin rastgele olması şarttır: ekibin seçtiği örnek, ekibin doğru olduğunu bildiği örnektir.
Bulgu, ihlalin kendisi değil ihlalin sınıfıdır. Tek bir kayıtta adres görülmesi "bu kayıt düzeltilecek" değil, "istem projeksiyonu filtresi çalışmıyor" bulgusudur. Bulguyu kayıt düzeyinde kapatmak, aynı bulgunun bir sonraki turda yeniden çıkmasını garanti eder.
Uygulamada: karardan kontrole#
| Karar | Kontrol | Örneklem | Bulgu sınıfı |
|---|---|---|---|
| Envanter güncel tutulur | Üretim şemasındaki alan listesi ile envanter listesinin farkı | Tüm alanlar | Kapsam boşluğu |
| İstem projeksiyonu dar tutulur | İstem günlüklerinde hariç tutulan alan kalıbının aranması | Rastgele istem örneği | Minimizasyon ihlali |
| Süresi dolan kayıt temizlenir | Tetikleyici tarihi geçmiş kayıtların her durakta sayımı | Kategori başına rastgele kayıt | Saklama ihlali |
| Erişim matrisi uygulanır | Rol-yetki dökümünün matrisle karşılaştırılması | Tüm roller | Yetki sapması |
| Kartsız kaynak hatta girmez | Dizindeki belge kimliklerinin kart listesiyle eşleşmesi | Tüm dizin kayıtları | İzin boşluğu |
| Silme talebi uçtan uca uygulanır | Kapatılmış taleplerin tüm duraklarda yeniden aranması | Rastgele kapalı talep | Uygulama boşluğu |
Bulguyu önem sırasına dizmek#
- Geri alınabilir mi? Ağırlıklara karışmış izinsiz veri, dizinden silinebilecek bir belgeden ağırdır.
- Sessiz mi? Kendini belli etmeyen ihlal — yanlış kiracıya sızan kayıt — hata veren bir hattan ağırdır.
- Yayılıyor mu? Her çalışmada yeni kopya üreten bir hat, tek seferlik bir kopyadan ağırdır.
- Kaç durakta? Tek durakta duran sorun, altı durağa yayılmış olandan hafiftir.
- Kapatma maliyeti nedir? Ağırlık sıralamasını değiştirmez ama planı belirler: ucuz ve etkili olan önce kapatılır.
Karar: denetim turu nasıl kurulur#
- 1Kararları listele
Önceki dört bölümde yazılmış kararları tek tabloya topla. Denetimin kapsamı bu tablodur; tabloda olmayan şey denetlenmez.
- 2Kontrolü tanımla
Her karar için gözlemlenebilir bir kontrol ve örneklem büyüklüğü yaz. Kontrolü yazılamayan karar, yeniden yazılmak üzere karar metnine geri gönderilir.
- 3Örneklemi rastgele çek
Kayıtları tarih veya kimlik sırasından değil rastgele seç ve seçim yöntemini rapora yaz; tur ancak böyle tekrarlanabilir.
- 4Bulguyu sınıfla
Gözlemi kayıt düzeyinden sınıf düzeyine yükselt, ağırlık ölçütlerine göre sırala ve her bulguya tek bir sahip ile kapanış tarihi ata.
- 5Turu takvime bağla
Bir sonraki turun tarihini ve hangi bulguların yeniden kontrol edileceğini yaz. Kapanmış bulgular bir sonraki turda örnekleme yeniden girer.
Sık yapılan hata#
En sık hata, denetimi rapor yazma işi sanmaktır. Rapor bir çıktıdır, denetim ise bir ölçümdür; ölçüm yapılmadan yazılan rapor, kurumun kendi politika metnini kendine okumasından ibarettir. İkinci hata, bulguları tek tek kapatıp kök nedeni bırakmaktır; aynı bulgunun her turda yeniden çıkması bu alışkanlığın işaretidir. Üçüncüsü, turlar arasını fazla açmaktır: kararlarla sistem arasındaki mesafe sürekli büyüdüğü için seyrek yapılan her denetim bir kriz toplantısına dönüşür.
LAB · UYGULAMALI ALIŞTIRMA
Tek turluk bir iç denetim yürütün
- 1Önceki bölümlerde yazdığınız kararlardan beşini seçin ve her biri için gözlemlenebilir tek bir kontrol cümlesi yazın ("şu yerde şu kalıp görünmemeli").
- 2Her kontrol için örneklem büyüklüğünü ve seçim yöntemini belirleyin; kayıtları rastgele çekmek için kullandığınız komutu veya sorguyu raporun ekine koyun.
- 3Örneklemleri çekip kontrolleri elle uygulayın; her gözlemi uygun, ihlal veya belirsiz olarak işaretleyin ve belirsizlerin neden belirsiz kaldığını yazın.
- 4İhlalleri kayıt düzeyinden bulgu sınıfına yükseltin; her bulguyu geri alınabilirlik, sessizlik, yayılma ve durak sayısı ölçütleriyle sıralayın.
- 5İlk üç bulgu için birer sahip, kök neden ve kapanış tarihi yazın; kapanışın nasıl doğrulanacağını aynı satıra ekleyin.
- 6Bir sonraki turun tarihini ve o turda yeniden kontrol edilecek bulguları belirleyip tek sayfalık bir karar kurulu özeti hazırlayın.
Beklenen çıktı
Beş kontrolün örneklem sonuçlarını, önem sırasına dizilmiş bulguları ve sahip ile tarih atanmış kapanış planını taşıyan tek turluk denetim raporu.
Sık sorulan sorular
Örneklem kaç kayıt olmalı?
Sabit bir sayı vermek yanıltıcıdır; büyüklük, ihlalin ne kadar seyrek olmasını beklediğinize ve kaçırmayı ne kadar kabul ettiğinize bağlıdır. Pratik yol: küçük bir örneklemle başlayın; ihlal çıkarsa büyütmeye gerek kalmaz, hiç çıkmazsa örneklemi büyütüp aynı kontrolü tekrarlayın ve iki turun sonucunu birlikte raporlayın.
İç denetimi kararları yazan ekip yürütebilir mi?
Yürütebilir, ama bulgunun sınıflandırılmasını ve önem sıralamasını başka bir gözün yapması gerekir. Kendi kararını denetleyen ekip, "belirsiz" işaretini sistematik olarak "uygun" tarafına kaydırır.
Otomatik kontroller örneklemeyi gereksiz kılmaz mı?
Otomatik kontrol yalnızca önceden düşünülmüş kalıbı yakalar. Örnekleme ise kalıbın dışında kalan sürprizleri gösterir: serbest metne yazılmış beklenmedik veri, kimsenin envantere eklemediği yeni bir hat. İkisi birbirinin yerine değil, üstüne konur.
LEARN
Veri Yönetişimi Sorumlusu rotasına devam et
Dersler tek başına da okunabilir, ama sıralı ilerlemek önkoşul boşluklarını kapatır.