İstatistikler / Anlaşma
Cohen'in Kappa Hesaplayıcısı (Değerlendiriciler Arası Uyum)
Her puan çiftinin kaç kez verildiğini gösteren bir tablodan, iki değerlendirici arasındaki şansın ötesindeki uyumu Cohen kappa ile ölçün; sıralı kategoriler için doğrusal veya karesel ağırlıklı kappa kullanın.
Cohen'in Kappa Hesaplayıcısı (Değerlendiriciler Arası Uyum): Gözlenen uyum, köşegendeki öğelerin payıdır; rastlantısal uyum ise kategoriler üzerinden iki değerlendiricinin paylarının çarpımlarının toplamıdır. κ = (gözlenen − rastlantısal) ÷ (1 − rastlantısal). Örnek tabloda gözlenen uyum 73,8%, rastlantısal uyum 34,8% ve κ = 0,597 ile orta düzeydedir. Ağırlıklı kappa, sıralı ölçeklerde birbirine yakın puan farklarına kısmi kredi verir. Sonuçlar statsmodels ile eşleşir. Sunucuya hiçbir dosya yüklenmeden tarayıcınızda %100 yerel olarak çalışır.
- Kategori
- Okul ve çalışma araçları
- Çalıştırma sayısı
- Tarayıcınızda
- Maliyet
- Ücretsiz · kayıt gerekmez
- Kullanılabilirlik
- Kullanıma hazır
Tamamen tarayıcınızda çalışır
Kappa, iki değerlendiricinin yalnızca şans eseri beklenenden ne ölçüde daha fazla uyum gösterdiğini ölçer: κ = (gözlenen − beklenen) ÷ (1 − beklenen); beklenen uyum, her değerlendiricinin genel kategori paylarından elde edilir. Sıralı kategoriler için ağırlıklı kappa, birbirine yakın hatalara kısmi kredi verir. Landis ve Koch'un sınıflandırmasına göre 0,41–0,60 orta, 0,61–0,80 önemli ve 0,80 üzerinde neredeyse kusursuzdur; bunlar test değil, uzlaşıya dayalı sınıflandırmalardır.
Uygulamalı örnek
İki klinisyen 80 vakayı hafif, orta veya ağır olarak değerlendiriyor ve 59 vakada (73,8%) aynı fikirde kalıyor. Kategori toplamlarından elde edilen tesadüfi uyum 34,8% olduğuna göre κ = (0,738 − 0,348) ÷ (1 − 0,348) = 0,597 olur. Doğrusal ağırlıklar 0,631, karesel ağırlıklar ise 0,671 verir.
İki kategorik değişkenin değerlendiricilerin ne kadar iyi anlaştığından ziyade ilişkili olup olmadığını test etmek için ki-kare hesaplayıcısını kullanın.
Kappa'nın incelikleri
Bir kategori çok nadir veya çok yaygın olduğunda, sözde kappa paradoksu nedeniyle uyum yüksek olsa bile kappa düşük çıkabilir; uyum tablosunu da raporlayın.
İkiden fazla değerlendirici için Fleiss kappa, kullanılan yaygın genişletmedir.
Nasıl kullanılır?
- Uyum tablosunu girin: değerlendirici A'nın kategorilerini satırlara, değerlendirici B'ninkileri sütunlara yazın ve hücrelere sayıları girin.
- Basit kategoriler için ağırlıksızı, sıralı kategoriler için doğrusal veya karesel ağırlıkları seçin.
- Kappa değerini, etiketini ve gözlenen ve rastlantısal uyumu inceleyin.
Gizlilik ve sınırlamalar
Veriler tarayıcıda kalır.
İlgili araçlar
Sık sorulan sorular
Neden yalnızca yüzde uyumunu bildirmemeliyim?
Çünkü değerlendiriciler, özellikle bir kategori yaygın olduğunda, bazı durumlarda şans eseri de aynı puanı verir; kappa bu kısmı çıkarır.
İyi bir kappa değeri nedir?
Landis ve Koch, 0,41–0,60 aralığını orta, 0,61–0,80 aralığını önemli ve 0,81–1 aralığını neredeyse kusursuz olarak sınıflandırır; gereklilikler alana göre değişir.
Ağırlıklı kappa ne zaman kullanılmalı?
Hafif, orta ve şiddetli gibi sıralı kategorilerde kullanın; çünkü orta yerine şiddetli puanlamak, hafif yerine şiddetli puanlamaya göre daha küçük bir anlaşmazlıktır.
Ücretsiz araç · tarayıcınızda kez çalıştırma · hesap gerekmez