Le Coefficient Kappa

Introduction   

Définition de l'accord

Accord entre 2 juges

Accord entre plusieurs juges

Limites du test

Usages du test

Applications pratiques

Conclusion

Annexes

Références

 

Téléchargement 

Liens Internet

Note de l'auteur

Contact

Téléchargement

Description du programme

Le programme «Kappa» sous DOS accepte toutes les études de concordance entre deux juges, pondérées ou non, ayant :

¨                     de 2 à 25 modalités de jugement ;

¨                     un effectif au plus égal à 32767 par case du tableau de contingence ;

¨                     un effectif total supérieur ou égal à deux fois le carré du nombre de modalités de jugement.

 

Reed[24] a proposé un programme écrit en Pascal et en Fortran qui calcul le Kappa pondéré et son erreur standard à zéro. Ce dernier calcul n’est pas exact car il n’utilise pas la formule adéquate. Sur certaines études de concordance, l’erreur standard calculée par Reed est 2 à 3 fois supérieure à la vraie valeur.

 

Le programme «Kappa» a été testé sur de nombreuses études issues de la littérature [1,4,9,11,18,24,25,26,27] aussi bien pour le coefficient Kappa pondéré ou non, et les résultats fournis par le programme ont toujours concordé avec les valeurs trouvées par les différents auteurs.

 

¨ Structure du programme

¨ Le fichier de l'étude

Les différentes rubriques contenues dans le fichier et qui décrivent l’étude, sont identifiées par des mots en langue anglaise pour permettre une plus large diffusion de ce programme.

 

Le fichier de l’étude est au format ASCII (texte) et doit comporter les rubriques identifiées par un nom dans l’ordre suivant :  

¨                     «Title» et le titre de l’étude ;

¨                     «Categories» et le nombre de catégories ;

¨                     «Data» et le tableau de contingence ;

¨                     «Weight» et la matrice des poids de concordance si l’étude comporte une pondération.

 

Par défaut, le nom du fichier de l’étude est «kappa.in», sinon il suffit de spécifier un autre nom sur la ligne de commande du programme.

 

¨ Lecture et stockage des données

Cette fonction est primordiale car la suite du traitement dépend totalement d’une bonne lecture des informations contenues dans le fichier.

 

Elle est aussi à risque car cette partie du programme est dépendante, durant toute la durée de vie de l’application, des erreurs externes indépendantes du programme en lui-même et donc difficiles à contrôler, telles que :

¨                     l’allocation dynamique de la mémoire pour stocker les variables de l’étude peut échouer si l’espace mémoire est insuffisant ;

¨                     l’échec de l’ouverture du fichier de l’étude ou du fichier des résultats ;

¨                     les erreurs dues à l’utilisateur.

 

Chaque étape de cette fonction est donc sous surveillance et un traitement des erreurs indique à l’utilisateur l’éventuelle erreur rencontrée.

 

¨ Calcul du coefficient Kappa

Selon que le fichier contienne une matrice des poids de concordance ou non, le programme calcule soit le Kappa pondéré de l’étude, soit le Kappa global standard et d’autres paramètres :

¨                     la concordance observée et la concordance aléatoire ;

¨                     l’erreur standard à zéro, l’écart-réduit et la probabilité correspondante ;

¨                     l’erreur standard du Kappa.

 

De plus dans le cas où le Kappa n’est pas pondéré et que le nombre de catégories de jugement est supérieur à 2, le programme calcule ces paramètres pour chacune des modalités de jugement.

 

Les résultats de l’étude sont exportés dans un fichier portant le nom du fichier de l’étude mais avec l’extension «out».

 

Pour tout savoir ou presque sur le test statistique Kappa...