Sızan Test Seti

Altay Kargo'nun güvenlik ekibi, filtre kurallarını sürekli iyileştiriyor. Aylık raporda bir uyumsuzluk fark edildi: bazı ailelerde değerlendirme setinde ölçülen engelleme oranı çok yüksek, ama üretimde gerçek oran çok daha düşük çıkıyor.

Elinde üç kayıt var: gizli (held-out) test setinin manifestosu, kural ayarlama sırasında tutulan geliştirici notları ve son 30 günün üretim izleme özeti.

Modülde öğrendiğin veri kaçağı (data leakage) kuralını uygula: test verisi geliştirme sürecine sızarsa, ölçülen sonuç yüksek çıkar ama üretimde düşer. En sık biçimi, kural yazarken gizli test örneklerine bakmaktır.

Hiçbir sisteme bağlanman gerekmiyor. Görevin kayıtları okumak ve sızıntının izini bulmak.