Статистика / Соглашение
Калькулятор каппы Коэна (межэкспертное согласие)
Измерьте согласие между двумя оценщиками сверх случайного совпадения с помощью каппы Коэна или взвешенной каппы с линейными либо квадратичными весами для упорядоченных категорий — по таблице частот каждой пары оценок.
Калькулятор каппы Коэна (межэкспертное согласие): Наблюдаемое согласие — это доля элементов на диагонали; случайное согласие — сумма произведений долей двух оценщиков по всем категориям. κ = (наблюдаемое − случайное) ÷ (1 − случайное). Для примерной таблицы наблюдаемое согласие составляет 73.8%, случайное — 34.8%, а κ = 0.597 — это умеренное согласие. Взвешенная каппа учитывает небольшие расхождения в упорядоченных шкалах. Результаты совпадают с statsmodels. Работает на 100% локально в вашем браузере, файлы на сервер не загружаются.
- Категория
- Инструменты для учёбы и школы
- Запуски
- В вашем браузере
- Стоимость
- Бесплатно · без регистрации
- Доступность
- Готово к использованию
Полностью работает в браузере
Каппа показывает, насколько совпадают оценки двух оценщиков сверх того, что могло бы произойти случайно: κ = (наблюдаемое − ожидаемое) ÷ (1 − ожидаемое), где ожидаемое совпадение рассчитывается по общей доле каждой категории у каждого оценщика. Для упорядоченных категорий взвешенная каппа частично учитывает близкие, но не совпавшие оценки. Согласно обозначениям Лэндиса и Коха, 0.41–0.60 — умеренное совпадение, 0.61–0.80 — существенное, а выше 0.80 — почти идеальное; это условные обозначения, а не статистические тесты.
Пример решения
Два врача оценили 80 случаев как лёгкие, умеренные или тяжёлые и совпали в 59 случаях (73.8%). Случайное совпадение, рассчитанное по общим количествам категорий, составляет 34.8%, поэтому κ = (0.738 − 0.348) ÷ (1 − 0.348) = 0.597. При линейном взвешивании значение равно 0.631, при квадратичном — 0.671.
Чтобы проверить связь между двумя категориальными переменными, а не степень согласия оценщиков, используйте калькулятор хи-квадрат.
Особенности κ
κ может быть низким даже при высоком согласии, если одна категория встречается очень редко или очень часто. Это так называемый парадокс κ; также приводите таблицу согласия.
Для более чем двух оценщиков обычно используют расширение — κ Флейсса.
Как пользоваться
- Введите таблицу согласия: категории оценщика A укажите в строках, а оценщика B — в столбцах; в ячейках укажите количество случаев.
- Выберите вариант без весов для обычных категорий либо линейные или квадратичные веса для упорядоченных категорий.
- Просмотрите значение каппы, её интерпретацию, а также наблюдаемое и случайное согласие.
Конфиденциальность и ограничения
Ваши данные остаются в браузере.
Похожие инструменты
Часто задаваемые вопросы
Почему бы просто не указать процент согласия?
Потому что оценщики иногда совпадают случайно, особенно если одна категория встречается часто; каппа исключает эту составляющую.
Какое значение каппы считается хорошим?
Landis и Koch считают значения 0.41–0.60 умеренными, 0.61–0.80 — существенными, а 0.81–1 — почти идеальными; требования зависят от области.
Когда следует использовать взвешенную каппу?
Для упорядоченных категорий, например «лёгкая», «умеренная» и «тяжёлая», когда оценка «умеренная» вместо «тяжёлой» означает меньшее расхождение, чем «лёгкая» вместо «тяжёлой».
Бесплатный инструмент · запусков: в вашем браузере · аккаунт не нужен