Halide Yılmaz Etiketler
Ölçme
3 yazı
Ölçme8 dkEtiketleyici Uyumu ve Değerlendirici Güvenilirliği: Kappa, Alpha ve LLM Hakemi Doğrulamak
Ham yüzde uyum bir güvenilirlik ölçüsü değildir. Cohen kappa, Fleiss kappa ve Krippendorff alfa ile şans düzeltmesini, eşiklerin nasıl okunacağını ve bir LLM hakemini tıpkı bir insan etiketleyici gibi doğrulamayı anlatıyoruz.
Ölçme7 dkModel Kalibrasyonu: Modelinizin "%90 Eminim" Demesi Ne Anlama Geliyor?
Kalibre olmayan bir skor, eşik seçimini ve altındaki bütün fayda-maliyet hesabını sessizce geçersiz kılar. Güvenilirlik diyagramı, beklenen kalibrasyon hatası, Platt ölçekleme ve izotonik regresyonu anlatıyoruz.
Ölçme6 dkSınıflandırma Metrikleri: Doğruluk, Kesinlik, Duyarlılık, F1 ve ROC-AUC Ne Zaman Kullanılır?
Karışıklık matrisinden başlayarak doğruluk, kesinlik (precision), duyarlılık (recall), F1 ve ROC-AUC'yi günlük örneklerle anlatıyor; hangi metriğin ne zaman doğru seçim olduğunu netleştiriyoruz.