Ese artículo tiene como objetivo presentar al alumno de medicina lo basico sobre el índice Kappa, que ellos puedan conocerlo, que aprendan a interprétalo y utilizarlo como herramienta en sus trabajos de investigaciones futuras, así como en sus prácticas médicas para solucionar problemas de concordancia.
Introducción
El conocimiento científico es un conjunto de saberes adquiridos a través de mucho estudio, investigación, experimentación y análisis. Ese conocimiento debe ser objetivo, valido, confiable y verificable (ya que será utilizado por otros profesionales y /o instituciones). A partir de ese conocimiento podemos dar solución a un problema o responder a una pregunta de investigación planteada.
Basado en eso, Jacob Cohen en 1960 propuso la prueba de concordancia Kappa(k) con el objetivo de mediar el grado de concordancia en proporciones derivadas de muestras dependientes.
¿Que és el índice Kappa?
El índice Kappa es un método altamente especifico utilizado para evaluar la concordancia de las observaciones clínicas, decisiones diagnósticas y comparación entre dos métodos. Está representado por la formula siguiente formula donde :
- Po: es la proporción de concordancia observada (suma de las respuestas concordantes dividida por el total)
- Pe: es la proporción de concordancia esperada por azar (suma de los valores esperados de las respuestas concordantes dividida por el total)
- 1-Pe : representa la concordancia máxima posible no debida al azar
“Entonces, el numerador expresa la proporción del acuerdo observado menos el esperado, y el denominador es la diferencia entre un total acuerdo y la proporción esperada por azar.”
¿Para que se utiliza?
El índice Kappa evalua:
- “ El grado de acuerdo entre las elecciones hechas por dos (o más) personas independientes
- La confiabilidad intra-evaluador: es evaluar el grado de acuerdo mostrado por la misma persona a una distancia de tiempo”
A fines de facilitar el entendimiento vamos a un ejemplo práctico donde en índice Kappa es aplicado a la investigación médica. Según el ejemplo propuesto por Leight R Diente y Kenneth J Ottenbacher en su artículo, tenemos:
“2 médicos califican a 42 pacientes con accidente cerebrovascular como quien tiene 1 o más limitaciones en las actividades de la vida diaria (AVD).
En este ejemplo , el evaluador 1 identifica a 29 de 42 personas con 1 o más limitaciones de AVD.
El evaluador 2 identifica que 17 personas tienen 1 o más limitaciones de AVD. “
Leight R Diente y Kenneth J Ottenbacher
| Calificador 2 | ||||
| >1 limitaciones de AVD | Sin limitaciones de AVD | Total | ||
| Calificador 1 | >1 limitaciones de AVD | 17 | 12 | 29 |
| Sin limitaciones de AVD | 0 | 13 | 13 | |
| Total | 17 | 25 | 42 |
Interpretación: utilizando la formula del índice Kappa con ayuda de la calculadora online https://www.bioestadistica.uma.es/analisis/kappa/. Encontramos que :
Po: 17+13 ÷ 42= 0,71
Pe: 12+8 ÷ 42=0,47
K= Po-Pe / 1-Pe = 0,71-0,46/ 1-0,46 = 0,467..
“Entonces, El porcentaje de acuerdo entre los 2 evaluadores, en que un paciente tiene o no tiene al menos 1 limitación de AVD, es del 71% (Po).
Por el contrario, el valor κ, que representa los acuerdos casuales entre los 2 evaluadores, es de 0.46 o sea que aproximadamente el 25% (71% –46%) de los acuerdos originales entre los evaluadores 1 y 2 se debieron al azar. ”
Con un valor de K= 0.46 tenemos grado de acuerdo entre ambos: MODERADO
¿Como se interpreta?
El coeficiente Kappa es un valor estándar siendo interpretado de la misma manera en diferentes estudios. Se debe tener en cuenta al comparar el kappa, de que las variables tengan la misma prevalencia , semejantes características y se midan en una misma escala.
El indice kappa puede variar desde -1 a +1
- Si el valor de Kappa es = 1 : significa que la concordancia es de 100%, (total acuerdo entre los evaluadores)
- Si el valor de Kappa es =0 : significa total desacuerdo y por lo tanto la proporción esperada por el azar es igual a la observada.
- Si el valor de kappa esta por debajo de 0.60 indica un acuerdo débil entre los evaluadores y por lo tanto los resultados del estudio son de poca confianza
- Un kappa negativo representa total desacuerdo. Tal hallazgo requiere una intervención y una revaluación de los datos y instrumentos .
Abajo sigue la tabla de interpretación del kappa según rango de valores:
| Valor de Kappa | Nivel de Concordancia |
| 0- 0.20 | Ninguna |
| 0,21-0,39 | Mínima |
| 0,40-0,59 | Débiles |
| 0,60-0,79 | Moderada |
| 0,80-0,90 | Fuerte |
| Por encima de 0,90 | Casi Perfecta |
Conclusión
El método de concordancia kappa establece medidas validas, confiables y altamente útiles en nuestra práctica clínica principalmente en la toma de decisiones terapéuticas y diagnosticas. Es muy importante que nosotros como futuros médicos sepamos manejar y podamos hacer el uso de una herramienta tan importante para el progreso del conocimiento científico.
Referencias:
1-Imagen de la formula de Kappa : https://idostatistics.com/cohen-kappa-free-calculator/
-Fiabilidad entre evaluadores: la estadística kappa-Mary L. McHugh – Biochem Med (Zagreb) . 2012 oct; 22 (3): 276–282. Publicado en línea el 15 de octubre de 2012. https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3900052/
-La estadística de Kappa en estudios de confiabilidad: requisitos de uso, interpretación y tamaño de muesta – Julio Sim , Chiris C Wright https://pubmed.ncbi.nlm.nih.gov/15733050/?from_term=Wright+CC&from_cauthor_id=15733050&from_pos=1
–The Kappa Statistic in Reliability Studies: Use, Interpretation, and Sample Size Requirements – Physical Therapy, Volume 85, Issue 3, 1 March 2005, Pages 257–268- Julius Sim, Chris C Wright – https://academic.oup.com/ptj/article/85/3/257/2805022
-El signifcado de Kappa- conceptos probabilísticos de confiabilidad y validez revisados – Yo Guggenmoos-Holzmann – https://pubmed.ncbi.nlm.nih.gov/8691228/?dopt=Abstract
-Fiabilidad entre evaluadores- La estadística Kappa- Mary L. McHugh – Biochem Med (Zagreb) . 2012 oct; 22 (3): 276–282. Publicado en línea el 15 de octubre de 2012.- https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3900052/
-The Statistic in Rehabilitation Research: An Examination Leigh R. Tooth, PhD, Kenneth J. Ottenbacher- https://www.archives-pmr.org/action/showPdf?pii=S0003-9993%2803%2901179-1
-Revista Colombiana de Obstetricia y Ginecología Vol. 61 No. 3 • 2010 (247-255) – MÉTODOS ESTADÍSTICOS DE EVALUACIÓN DE LA CONCORDANCIA Y LA REPRODUCIBILIDAD DE PRUEBAS Diagnósticas -Édgar Cortés-Reyes TF, M.Sc.*, Jorge Andrés Rubio-Romero, M.D. M.Sc.**, Hernando Gaitán-Duarte M.D., M.Sc.*** http://www.scielo.org.co/pdf/rcog/v61n3/v61n3a09.pdf
-Idiostatistics – recursos para estadísticas y metaanálisis
-Calculadora kappa- https://www.bioestadistica.uma.es/analisis/kappa/
-José Supo- Indice Kappa Cohen y medidas de concordancia- YOUTUBE :Acceso 23/04/2020
-Test Kappa para Análise de Concordância- YOUTUBE :Acceso 23/04/2020
