La calibración suele confundirse con la elaboración de la rúbrica. Son momentos distintos: primero el comité define los criterios; después, quienes revisan pueden probar cómo los interpretan y señalar dónde necesitan una explicación más precisa.
Respuesta directa: organiza una sesión de calibración antes de la evaluación real: comparte la versión aprobada de los criterios, utiliza un caso de práctica autorizado, pide a cada persona que lo valore por separado y compara después el razonamiento criterio por criterio. El comité debe distinguir una diferencia legítima de juicio de una instrucción ambigua y anotar cualquier aclaración antes de distribuir la versión definitiva.
01 · Propósito
Calibrar no significa obligar a puntuar igual
Una sesión de calibración es un ensayo guiado del procedimiento de evaluación. Varias personas aplican los criterios aprobados a un mismo material de práctica y explican qué aspectos han considerado. Al comparar el razonamiento, el comité puede localizar términos que admiten interpretaciones distintas o instrucciones que dejan una pregunta sin resolver.
El objetivo es mejorar la comprensión compartida del encargo, no borrar diferencias razonables de criterio ni fijar de antemano qué resultado debe obtener una propuesta. Si dos lecturas distintas se ajustan a la pauta, el comité puede acordar cómo documentar esa discrepancia; la sesión no debe convertir una preferencia personal en una regla nueva.
Esta guía se centra en la dinámica de la reunión. La plantilla de rúbrica ayuda a definir y probar criterios; las instrucciones para revisores explican el encargo y cómo registrar una evaluación.
02 · Antes de reunir al equipo
Prepara el material y el resultado que quieres obtener
La sesión solo sirve si el equipo trabaja sobre la misma versión y sabe qué decisiones puede tomar. Antes de convocarla:
- Confirma la pauta vigente. Reúne la rúbrica y las instrucciones aprobadas. Si un criterio todavía está abierto, anótalo como pendiente en vez de tratarlo como una regla acordada.
- Elige un caso de práctica apropiado. Utiliza material creado o autorizado para este uso. No asumas que una propuesta real de la convocatoria puede reutilizarse en una sesión de ensayo.
- Define quién facilita y quién toma nota. Puede ser útil que una persona guíe la conversación y otra registre las preguntas, las aclaraciones y las decisiones que el comité apruebe.
- Explica el propósito. Aclara que se busca poner a prueba la comprensión de los criterios, no evaluar el desempeño individual de quienes revisan.
- Acota la salida. El resultado puede ser una lista de términos que aclarar, decisiones pendientes y una versión revisada que el comité debe aprobar antes de iniciar.
Evita incluir en el material datos de una propuesta real si no se ha confirmado que su uso es adecuado para la sesión y para las reglas del evento.
03 · Dinámica
Guion para conducir la sesión de calibración
El orden siguiente es una propuesta adaptable, no un protocolo universal ni una función del software:
- Presenta el objetivo y el alcance. Señala qué fase se ensaya, qué documento está vigente y qué cuestiones no se van a decidir en esa reunión.
- Haz una lectura individual. Cada persona revisora trabaja sobre el mismo caso de práctica y utiliza la pauta aprobada, sin comentar sus impresiones hasta terminar esta primera valoración.
- Compara el razonamiento, no solo el resultado. Recorre los criterios uno a uno. Pregunta qué parte del material llevó a cada lectura y qué descriptor se aplicó. Así, una diferencia se puede localizar en la evidencia, en la interpretación o en la redacción del criterio.
- Separa desacuerdo de ambigüedad. No toda diferencia exige cambiar la rúbrica. Si la pauta admite dos juicios razonados, registra cómo se tratará la discrepancia conforme al proceso aprobado. Si el texto no permite saber qué hacer, formula la duda concreta para el comité.
- Acuerda las aclaraciones que procedan. El comité decide si basta con explicar mejor una instrucción o si debe revisar el criterio. No conviertas una conversación informal en un cambio tácito de las reglas.
- Cierra con una versión identificable. Anota qué se ha aclarado, qué sigue pendiente, quién debe aprobarlo y cuál será la versión que recibirá el equipo antes de empezar la revisión real.
04 · Hoja de trabajo
Plantilla para registrar las aclaraciones de la sesión
La tabla sirve para capturar dudas de interpretación, no para guardar abstracts ni datos personales. Completa únicamente lo necesario para identificar el punto de la pauta y la decisión del comité.
| Criterio o instrucción | Lecturas observadas | Duda concreta | Aclaración o decisión | Quién la aprueba | Versión que se comunica |
|---|---|---|---|---|---|
| [referencia] | [resumen sin copiar material sensible] | [qué necesita aclaración] | [acuerdo o pendiente] | [responsable confirmado] | [referencia acordada] |
Si una cuestión no se resuelve en la sesión, déjala como pendiente y señala quién la elevará al comité. No la cierres por mayoría improvisada ni actualices las instrucciones hasta que la persona o el grupo autorizado haya aprobado el cambio.
05 · Alcance y herramientas
La calibración complementa la rúbrica y las instrucciones
Las tres piezas responden a momentos distintos. La rúbrica define los criterios y, cuando el comité lo decide, sus descriptores. Las instrucciones explican a quienes revisan qué deben hacer y cómo registrar su valoración. La sesión de calibración permite ensayar esa pauta y resolver dudas antes de aplicarla a la convocatoria.
Si durante la sesión aparece un desacuerdo sobre un abstract ya evaluado, utiliza el procedimiento aprobado por el comité. La guía para deliberar ante evaluaciones discrepantes se ocupa de ese momento posterior; esta guía se limita al ensayo previo.
CongressMaker ofrece una zona donde los correctores pueden consultar abstracts, puntuarlos y dejar comentarios. La calibración —la conversación, la decisión sobre los criterios y la aprobación de las instrucciones— corresponde al comité y al equipo organizador; la plataforma no la automatiza.
Consulta la página de gestión de abstracts para conocer el alcance actual de esta parte de CongressMaker.
Preguntas frecuentes
Dudas sobre calibrar revisores
¿Calibrar significa que todas las personas deben asignar la misma puntuación?
No. La sesión permite comprobar cómo se entienden los criterios y aclarar instrucciones ambiguas. No obliga a que todas las valoraciones coincidan ni sustituye la decisión que corresponda al comité.
¿Se puede usar un abstract real como ejercicio de práctica?
Solo si la organización ha confirmado que ese material puede utilizarse con ese fin y se siguen las instrucciones aplicables al evento. Si no está claro, prepara un caso autorizado para la práctica y no reutilices una propuesta de la convocatoria por defecto.
¿CongressMaker organiza o automatiza la sesión de calibración?
No. CongressMaker ofrece una zona donde los correctores pueden consultar abstracts, puntuarlos y dejar comentarios. La sesión y los acuerdos de calibración son trabajo del comité y del equipo organizador.
Siguiente paso
Una revisión con criterios claros desde el inicio
Si tu congreso incluye evaluación de abstracts, podemos revisar cómo encaja la zona de correctores de CongressMaker en el procedimiento que ya ha definido tu comité.
Ver la gestión de abstracts →Sigue leyendo