Para qué sirve la calibración
Calibrar es demostrar que tu examen produce el mismo resultado que el de un experto (concordancia interexaminador) y que tú mismo das el mismo resultado al repetirlo (concordancia intraexaminador). Sin eso, una prevalencia de 70 % puede ser 60 % u 80 % según quién examinó, y tus comparaciones pierden sentido.
Los cinco pasos de una calibración bien hecha
- Capacitación teórica. Revisas los criterios del índice con el especialista, con fotografías o casos, hasta que no queden dudas de código.
- Estándar de oro. Un especialista con experiencia en el índice examina a los mismos sujetos que tú, sin ver tus registros.
- Sujetos de calibración. Personas parecidas a tu población pero que no entran en tu muestra. La OMS recomienda un mínimo de 20, según Tonello y colaboradores (2016).
- Repetición. Vuelves a examinar a los mismos sujetos tras un intervalo que evite que recuerdes tus códigos, y durante el trabajo de campo repites el examen en 5 % a 10 % de tu muestra.
- Cálculo y decisión. Calculas el estadístico que corresponde a tu variable y decides si alcanzas el umbral. Si no, te reentrenas y repites.
Qué estadístico corresponde a cada variable
| Tipo de variable | Ejemplo | Estadístico |
|---|---|---|
| Nominal de dos o más categorías | Diente sano o cariado; clase de Angle | Kappa de Cohen |
| Ordinal | Códigos 0 a 3 del índice gingival; ICDAS | Kappa ponderado (Cohen, 1968) |
| Continua | Profundidad de sondaje en mm; puntaje DAI; medidas cefalométricas | Coeficiente de correlación intraclase (ICC) |
| Más de dos examinadores en nominal | Tres internos que examinarán | Kappa de Fleiss |
El kappa ponderado de Cohen (1968) da crédito parcial cuando el desacuerdo es de un solo nivel, algo razonable en índices ordinales. Para el ICC, Koo y Li (2016) piden reportar el modelo, el tipo y el intervalo de confianza.
Qué valor de kappa es aceptable
La escala más citada es la de Landis y Koch (1977):
| Kappa | Grado de acuerdo |
|---|---|
| Menos de 0 | Pobre |
| 0,00 a 0,20 | Leve |
| 0,21 a 0,40 | Aceptable |
| 0,41 a 0,60 | Moderado |
| 0,61 a 0,80 | Considerable |
| 0,81 a 1,00 | Casi perfecto |
Para encuestas epidemiológicas de caries, la referencia de la OMS es más exigente: un kappa de al menos 0,80 y un porcentaje de acuerdo de 85 % o más. Escribe en tu método cuál umbral adoptas y por qué, antes de calcular.
La paradoja de la prevalencia
Kappa depende de cuántos casos positivos hay entre los sujetos de calibración. Si casi todos están sanos, el porcentaje de acuerdo puede ser de 95 % y el kappa salir bajo. Tonello y colaboradores (2016) lo mostraron en calibraciones de caries: la prevalencia de la enfermedad en la muestra de calibración cambia el kappa. La solución práctica es elegir sujetos de calibración con todas las condiciones del índice y reportar siempre kappa junto al porcentaje de acuerdo.
Cómo redactarlo en tu método
Un párrafo de calibración completo dice quién fue el estándar de oro, cuántos sujetos, dónde, con qué intervalo, qué estadístico y qué valor obtuviste, por índice. Ejemplo de redacción (los valores son ilustrativos):
“La investigadora fue calibrada por un especialista en Odontopediatría con 20 escolares que no formaron parte de la muestra. Se examinó la experiencia de caries con criterios de la OMS y se repitió el examen a los 7 días. La concordancia interexaminador fue kappa = 0,86 y la intraexaminador kappa = 0,91, con un acuerdo de 94 %. Durante la recolección se reexaminó al 10 % de la muestra.”
Si usas varios índices, reporta un valor por índice. Un solo kappa “general” no le dice al jurado cuál medición fue confiable. Para calcularlo en el programa sigue el tutorial de kappa de Cohen en SPSS.
Errores que el jurado observa
- Calibrar con sujetos que luego entran en la muestra.
- Un estándar de oro sin experiencia en el índice.
- Kappa simple en un índice ordinal.
- Reportar “se realizó la calibración” sin el valor.
- No repetir exámenes durante el trabajo de campo.
Preguntas
Preguntas frecuentes.
¿Qué valor de kappa necesito en mi tesis de Odontología?
Para encuestas de caries la OMS acepta un kappa de al menos 0,80 con 85 % o más de acuerdo. Según Landis y Koch, de 0,81 a 1,00 es un acuerdo casi perfecto. Declara tu umbral en el método antes de calcular.
¿Con cuántas personas hago la calibración?
La OMS recomienda un mínimo de 20 sujetos, que no formen parte de tu muestra y que presenten todas las condiciones del índice. Durante la recolección se repite el examen en 5 % a 10 % de la muestra.
¿Cuándo uso kappa ponderado?
Cuando los códigos del índice son ordinales, como el índice gingival de 0 a 3 o los códigos de ICDAS. El kappa ponderado da crédito parcial a los desacuerdos de un solo nivel.
¿Qué uso si mi variable es una medida en milímetros?
El coeficiente de correlación intraclase con su intervalo de confianza, indicando el modelo y el tipo. Kappa es para variables categóricas.
¿Quién puede ser el estándar de oro?
Un especialista con experiencia demostrable en el índice que usarás, por ejemplo un odontopediatra para caries en niños o un periodoncista para el sondaje. Su nombre y especialidad van en el método.