mlops
Sözlük ↗Kesinlik ve Duyarlılık
Kesinlik ve duyarlılık, bir sınıflandırıcının ya da erişim sisteminin kalitesinin iki yarısıdır ve farklı sorulara yanıt verirler. Kesinlik şunu sorar: sistemin işaretlediği öğelerin ne kadarı gerçekten doğruydu? Duyarlılık şunu sorar: işaretlenmesi gereken öğelerin ne kadarını sistem bulabildi? Kesinliği yüksek bir istenmeyen posta süzgeci iyi postayı nadiren çöpe atar ama istenmeyeni geçirebilir; duyarlılığı yüksek olanı neredeyse tüm istenmeyeni yakalar ama arada gerçek bir faturayı karantinaya alır. Doğruluk — tüm tahminlerin ne kadarının isabetli olduğu — bu ödünleşimi gizler ve bir sınıf seyrek olduğunda düpedüz yanıltıcı hale gelir; hiçbir şeyi işaretlemeyen bir model, yüzde birlik bir problemde hiçbir şey bulmadan yüzde 99 doğruluk gösterebilir. Ödünleşim genellikle sabit bir özellik değil, bir eşiktir. Sistemin harekete geçtiği puanı düşürmek duyarlılığı yükseltip kesinliği düşürür; yükseltmek tersini yapar. Hangi tarafın tercih edileceği bir modelleme değil ürün kararıdır: iş akışınızda yanlış pozitifin yanlış negatife göre neye mal olduğuna bağlıdır. Tek bir sayı gerektiğinde F1 puanı ikisini harmonik ortalama olarak birleştirir, ama yalnızca F1 bildirmek bir değişikliğin ödünleşimin hangi yanını oynattığını gizler. Erişimle beslenen sistemlerde aynı ikili erişim adımına da uygulanır; orada başlangıçta duyarlılık daha önemlidir — hiç getirilmemiş bir pasaj yeniden sıralanamaz — kesinlik ise sonradan yeniden sıralamayla geri kazanılır.
İlgili terimler