Sapma Tespiti (Drift Detection)

Sapma tespiti, bir modelin üzerinde eğitildiği veriyle üretimde artık gördüğü veri arasındaki istatistiksel değişimi izleme pratiğidir. Veri sapması, girdi dağılımının kaydığı anlamına gelir — yeni kullanıcı segmentleri, mevsimsel davranışlar, değişen bir üst kaynak alanı. Kavram sapması ise modelin öğrendiği ilişkinin artık geçerli olmadığı, yani dünün doğru cevabının bugün hata olduğu durumdur. Her iki hâlde de model, kodu hiç değişmeden sessizce bozulur. Modeller donmuşken dünya hareket etmeye devam ettiği için sapma, tahminlerin fark edilmeden çürümesinin başlıca nedenidir. Ekipler eğitim dağılımını referans alır, ardından canlı trafiği popülasyon kararlılık indeksi (PSI) ya da KL ıraksaması gibi ölçütlerle karşılaştırır ve bir özellik eşiği aştığında alarm üretir. LLM ve RAG ürünlerinde bunun karşılığı; çıktı kalitesini, değişen kullanıcı istemlerini ve zaman içindeki embedding sapmasını izlemektir. Pratik not: otomatik sapma alarmlarını zamanlanmış bir değerlendirme çalışmasıyla eşleştirin ki bir sıçrama, panoda geçici bir dalgalanma değil gerçek bir kalite kontrolü tetiklesin.

İlgili terimler

Daha fazla MLOps Süreçleri terimi