Объяснение значения каппы | Статистика в физиотерапии

Прежде чем читать этот пост, ты должен хорошо разбираться в теме надежности. Ознакомься с нашим постом о надежности здесь. Точность или межрейтинговая надежность часто отражается в виде статистики Каппа. Значение каппы может дать тебе количественную меру согласия в любой ситуации, когда два или более независимых наблюдателя оценивают одну и ту же вещь. Например, представь, что два физиотерапевта оценивают поясничный позвонок L5 на предмет гипомобильности у 100 пациентов.

Физиотерапевт 1 и физиотерапевт 2 согласны с тем, что пациенты гипомобильны в 60 случаях и не гипермобильны в 15 случаях, так что у них будет 75% согласия, а в остальных случаях у них разные мнения. Однако если они оба будут оценивать пациентов наугад, то иногда будут соглашаться просто случайно. Значение Kappa учитывает этот шанс. Он вычисляется по тому, какое согласие существует на самом деле, называемое "наблюдаемым согласием", в сравнении с тем, какое согласие можно было бы ожидать по случайности, называемое ожидаемым согласием.

Ожидаемое согласие рассчитывается по следующей формуле: умножь положительные ответы физиотерапевта 1 на положительные ответы физиотерапевта 2 вправо. Итак, у тебя есть 70/100 и 75/100, и ты умножаешь эти два значения друг на друга.

Затем ты прибавляешь их к отрицательным ответам физиолога 1 (30) и отрицательным ответам физиолога 2 (25), которые также делятся на 100 и перемножаются друг с другом, и в итоге получается 0,525 плюс 0,075, так что ожидаемое согласие составляет 0,6.

Теперь давай, наконец, вычислим наше значение Каппы. Ты берешь свой фактический результат P0, в нашем случае это 0,75, вычитаешь из него ожидаемый результат 0,6 и делишь на 1 минус ожидаемый результат, так что получается 1 минус 0,6. В итоге ты получишь значение каппы, равное 0,375.

Так что же означает значение каппы, равное 0,375? Согласно общепринятой шкале Лэндиса и Коха (1977), это означает, что два физиотерапевта вполне согласны с тем, какие пациенты гипомобильны, а какие нет. Обрати внимание, что значение каппы 0 или меньше означает полное отсутствие согласия, в то время как значение 1 означает "идеальное согласие".

Viera AJ, Garrett JM. Понимание межсерверного согласия: статистика каппа. Fam med. 2005 May 1;37(5):360-3.

Landis, J. R., & Koch, G. G. (1977). Измерение согласия наблюдателей для категориальных данных. биометрия, 159-174.