Le Coefficient Kappa

	Introduction
	Définition de l'accord
	Accord entre 2 juges
	Accord entre plusieurs juges
	Limites du test
	Usages du test
	Applications pratiques
	Conclusion
	Annexes

Références

 

	Téléchargement
	Liens Internet
	Note de l'auteur
	Contact

Applications pratiques

Estimation de l'accord entre deux juges

	Estimation de l'accord multi-juges
	Estimation du Kappa maximal

        A) Cas de 2 juges et 2 modalités de jugement

        B) Cas de 3 juges et 2 modalités de jugement

Walter, d'après une publication de Bennet^[16], a proposé d’estimer la sensibilité et la spécificité de trois radiologues. Le tableau XXII présente les données issues des classements par les trois radiologues selon la présence ou non d’un épaississement pleural sur 1692 clichés thoraciques.

Tableau XXII - Recherche d’un épaississement pleural par 3 radiologues

¨ Estimation des sensibilités, des spécificités et de la prévalence

L’algorithme trouve un optimum à 1.0E^-16, il a donc trouvé une solution qui explique tous les sujets de l’étude. La solution est :

¨  Sensibilité du radiologue n°1 : S_e1 = 0,765

¨   Sensibilité du radiologue n°2 : S_e2 = 0,644

¨    Sensibilité du radiologue n°3 : S_e3 = 0,749

¨    Spécificité du radiologue n°1 : S_p1 = 0,989

¨    Spécificité du radiologue n°2 : S_p2 = 0,965

¨    Spécificité du radiologue n°3 : S_p3 = 0,990

¨    Prévalence de l’épaississement pleural dans l’étude : P = 0,054

         ¨ Estimation du Kappa maximal

 Nous avons poussé l’étude réalisée par Walter en mesurant l’accord entre les trois radiologues à cette prévalence puis en estimant le Kappa maximal que ces radiologues pourraient obtenir en recherchant la prévalence optimale.

Le Kappa des radiologues à la prévalence de 0,054 est égal à 0,47 ce qui montre un accord modéré.

Nous avons ensuite recherché la prévalence qui donne le meilleur Kappa en balayant le domaine de 0,01 à 1,0 avec un pas de 0,01. Nous recalculons à chaque incrément les effectifs théoriques correspondant à cette nouvelle prévalence de l’épaississement pleural, puis nous mesurons l’accord par la méthode de Fleiss.

Le Kappa maximal que l’on pourrait obtenir compte-tenu de la sensibilité et de la spécificité des 3 radiologues est égal à 0,59 à une prévalence égale à 0,24. L’accord modéré est dû essentiellement à leur manque de sensibilité à découvrir l’épaississement pleural.

Pour tout savoir ou presque sur le test statistique Kappa...