La valeur Kappa expliquée - Les statistiques en physiothérapie

Avant de lire ce billet, vous devriez avoir une bonne connaissance du sujet de la fiabilité. Consultez notre article sur la fiabilité ici. La précision ou la fiabilité inter-juges est souvent rapportée sous la forme d'une statistique Kappa. La valeur de Kappa peut vous donner une mesure quantitative de la concordance dans toute situation dans laquelle deux observateurs indépendants ou plus évaluent la même chose. Par exemple, imaginons que deux kinésithérapeutes évaluent l'hypomobilité de la vertèbre lombaire L5 chez 100 patients.

Le physio 1 et le physio 2 sont d'accord pour dire que les patients sont hypomobiles dans 60 cas et pas hypermobiles dans 15 cas, ils sont donc d'accord à 75% et dans les autres cas, ils ont des opinions différentes. Cependant, si les deux évaluent les patients de manière aléatoire, ils seront parfois d'accord par hasard. La valeur de Kappa tient compte de cette chance. Il est calculé en comparant la concordance réellement présente, appelée "concordance observée", à la concordance attendue par hasard, appelée concordance attendue.

La concordance attendue est calculée avec la formule suivante : multiplier les réponses positives du physio 1 par les réponses positives du physio 2 juste. Vous avez donc 70/100 et 75/100 et vous multipliez ces deux valeurs entre elles.

Vous les ajoutez ensuite aux réponses négatives du physio 1 (30), et aux réponses négatives du physio 2 (25) qui sont également divisées par 100 et multipliées entre elles, et vous obtenez 0,525 plus 0,075, ce qui donne un accord attendu de 0,6.

Maintenant, calculons enfin notre valeur Kappa. Ce que vous faites, c'est que vous prenez votre résultat réel P0, donc dans notre cas, c'est 0,75 et vous soustrayez le résultat attendu avec 0,6 et vous divisez par 1 moins le résultat attendu, donc c'est 1 moins 0,6. Vous obtenez alors une valeur kappa de 0,375.

Alors que signifie la valeur de kappa de 0,375 ? Selon l'échelle communément utilisée par Landis & Koch (1977), cela signifierait que les deux kinésithérapeutes sont d'accord sur les patients qui sont hypomobiles et ceux qui ne le sont pas. Notez qu'une valeur de kappa de 0 ou moins signifie qu'il n'y a pas de concordance du tout, tandis qu'une valeur de 1 signifie une concordance parfaite.

Viera AJ, Garrett JM. Comprendre l'accord inter-observateur : la statistique kappa. Médecine familiale. 2005 May 1;37(5):360-3.

Landis, J. R., & Koch, G. G. (1977). La mesure de l'accord des observateurs pour les données catégoriques. biométrie, 159-174.