Medición de la concordancia

Medición de la concordancia
Departamento de Salud Pública
Facultad de Medicina
UNAM
P
Preparado
d por:
Dr. Juan José García García
 En el proceso de atención clínica no es raro
que, ante el mismo dato, se expresen
opiniones distintas en la interpretación.
 Este hecho puede ocurrir entre dos colegas,
pero aún un mismo profesional,
profesional puede llegar a
conclusiones diferentes si observa, por
ejemplo, una misma imagen, sin saberlo.
saberlo.
 El procedimiento
di i t para determinar
d t
i
l
la
concordancia entre observadores o
intraobservador
intraobservador,
consiste
en
comparar las opiniones, juicios o
resultados emitidos u obtenidos por
dos personas diferentes o por la
misma persona en dos ocasiones
diferentes..
diferentes
 La evaluación debe ser “a ciegas” con
respecto
t all diagnóstico
di
ó ti
d fi iti
definitivo
y a
la opinión de los otros participantes o
la de la misma persona,
persona expresada
previamente..
previamente
Naturaleza de los datos:
Tipo de variable estudiada
 Cuando
C
d
l
la
variable
i bl
es de
d
ti
tipo
cualitativo, particularmente nominal
dicotómica (expresada como sí/no o
dicotómica,
presente/ausente) u ordinal (por
ejemplo leve,
ejemplo,
leve moderado,
moderado severo),
severo) se
puede calcular un valor que expresa
el grado en que dos observaciones
han coincidido.
coincidido.
Ejemplos:
 En
E la
l literatura
lit
t
se pueden
d
encontrar
t
diversas
aplicaciones
de
esta
preocupación por saber qué tanto
coinciden dos interpretaciones de
procedimientos diagnósticos,
diagnósticos
tales
como los de imagenología, trazos
electrocardiográficos,
estudios
histopatológicos, características del
fondo de ojo,
j , etc
etc..
Medición de la concordancia
Caso
1
2
3
4
Observador 1
+
+
-
Observador 2
+
+
-
Nótese que para los n casos hay dos mediciones, y que de
acuerdo con el recuento de ellas se llenarán las celdillas de
una tabla como la que se muestra a continuación, con
respecto a la presencia o ausencia de una alteración.
alteración.
Tabla g
general para
p
el análisis de la
concordancia
Observador 2
Observador 1
Presente
Ausente
Total
Presente
a
b
a+b
Ausente
c
d
c+d
a+c
b+d
n
Total
Porcentaje de concordancia
P d determinarse
Puede
d t
i
como concordancia
d
i absoluta
b l t y como
concordancia específica, esta última referida a los casos
diagnosticados como positivos o negativos por ambos
observadores..
observadores
Porcentaje de concordancia
E t medida
Esta
did representa
t la
l proporción
ió
de observaciones en las cuales los
observadores
reportan
resultados
iguales, mide por tanto la variabilidad
entre observadores
observadores..
No considera la posibilidad de que las
coincidencias sean debidas al azar.
azar.
 Entre
E t
l
los
di
diversos
i di d
indicadores
construidos
para
hacer
esta
evaluación
evaluación,
destaca el índice o
coeficiente kappa, que ha recibido
aceptación
aceptación,
al considerar en su
cálculo el papel que pudo tener el
azar en la coincidencia de las
observaciones..
observaciones
Analicemos la siguiente
tabla:
Medición de la concordancia
Observador 1
Presente
Observador 2
Total
Total
Ausente
Presente
140
52
192
Ausente
69
725
794
209
777
986
Medición de la concordancia

Coeficiente o índice Kappa
Mejora la estimación del porcentaje de concordancia ya que
descuenta la proporción de la misma que puede ocurrir por
azar..
azar
K = Co - Ce
1 - Ce
Donde:
Co = concordancia observada = (a + d)/n
Ce = concordancia esperada por azar
= {[(a + b)/n] x [(a + c)/n]} + {[(c + d)/n] x [(b + d)/n]}
Índice kappa: Fórmula alternativa

K = Co – Ce
______
1 – Ce
Donde:
Donde
Co = (a + d) / n
Ce = (a + b) (a + c) + (c + d) (b + d)
n2
n2
Para los datos de la tabla:
 Concordancia
C
d
i observada:
b
d
 Concordancia esperada:
 Valor de Kappa=
0 8773
0.8773
0.6759
0.6214
Medición de la consistencia:
Criterios de Landis y Koch

Valor de Kappa
<0
0 a 0.20
0.21 a 0.40
0.41 a 0.60
0.61 a 0.80
0.81 a 1.00
Fuerza de
concordancia
Pobre
Leve
Mediana
Moderada
Sustancial
Casi perfecta

Ejercicio:
 De acuerdo con los datos de la
siguiente tabla, calcule e interprete el
valor
l de
d la
l concordancia
d
i obtenida.
obtenida
b
id .
Observador 2
Observador 1
Metástasis
presentes
Metástasis
ausentes
Total
Metástasis
á
presentes
47
5
52
Metástasis
M
tá t i
ausentes
9
45
54
56
50
106
Total
Índice kappa
pp

Concordancia observada:
47 + 45 =
106
C
Concordancia
d
i esperada:
d
(56/106) (52/106) + (50/106) (54/106)
Kappa =
Para reflexionar
 Como médico en formación, el alumno adquiere
conocimientos y habilidades en el estudio clínico
d l paciente
del
i t
t i d
teniendo
como referencia
f
i
l
la
experiencia del profesor, de tal manera que, con
respecto
p
a este,, ¿qué
q
tanta concordancia ha
adquirido en la identificación de signos durante
la exploración física?, por
ejemplo,
de
alteraciones en el fondo de ojo,
ojo en los ruidos
cardiacos, etc.
etc.