Las preguntas se filtraron después de la primera sesión: cómo realizar un examen en varias sesiones sin que se filtre la prueba

Una empresa realiza su evaluación anual de competencias para 400 empleados a lo largo de dos días, en cuatro sesiones, porque el aula de informática solo tiene 100 equipos. Todos hacen la misma prueba, barajada. La segunda tarde, la gente ya llega sabiendo lo de «la pregunta sobre la política de devoluciones» y «la del gráfico circular». La media de la última sesión es 14 puntos más alta que la de la primera. Nadie puede demostrar nada, pero todos los de la primera sesión se sienten engañados, y los resultados son difíciles de defender.

Cuando un examen se realiza en varias sesiones, una filtración no es una posibilidad: es lo que cabe esperar. Los candidatos hablan durante la comida, sacan fotos y las publican en los chats de grupo. Este artículo explica cómo se filtran las preguntas, por qué barajar no ayuda entre sesiones y qué sí ayuda.

Cómo se filtran las preguntas

• La memoria. Los candidatos recuerdan cinco o diez preguntas y las comparten. No puedes impedirlo, solo hacer que valga menos.
• Las fotos. Un móvil debajo de la mesa, o una foto de una prueba impresa sacada en el pasillo.
• La pantalla de resultados. Si los candidatos ven la prueba con las respuestas correctas en cuanto entregan, la sesión de la mañana le pasa la clave de respuestas a la de la tarde.
• Archivos que circulan antes. Una prueba enviada por correo entre compañeros, una copia impresa olvidada en la fotocopiadora, una unidad compartida a la que tiene acceso demasiada gente.

1. Barajar protege del vecino, no de la siguiente sesión

El error. «Hemos hecho 20 versiones, así que es seguro.» Las versiones barajadas contienen las mismas preguntas en otro orden. Eso impide que un candidato copie de la pantalla de al lado, pero no sirve de nada contra alguien a quien por la mañana le dijeron que «hay una pregunta sobre la política de devoluciones y la respuesta es 30 días».

Qué lo resuelve. Dar a cada sesión preguntas distintas, de la misma dificultad.

Con los exámenes en línea de ExamQR, creas una prueba a partir de tu banco de preguntas con una estructura: tantas preguntas por tema y por nivel de dificultad. Crea una prueba por sesión a partir de la misma estructura. Cuando creas varias pruebas a la vez, ExamQR mantiene separadas sus preguntas siempre que el banco tenga suficientes, y toma primero las preguntas que menos se han usado. Después, asigna a cada turno su propia prueba. Todas las sesiones reciben la misma mezcla de temas y niveles, pero no las mismas preguntas.

El banco tiene que ser lo bastante grande para eso. Para cuatro sesiones sin preguntas repetidas, necesitas el cuádruple de preguntas en cada celda de tema y nivel. Si una celda se queda corta, ExamQR te indica cuántas preguntas necesita y cuántas hay, y así sabes dónde redactar más. Una guía para crear uno: bancos de preguntas.

Dentro de cada sesión, sigue barajando en versiones, hasta 1000, para que los vecinos tampoco vean el mismo orden. Cómo redactar preguntas que resistan el barajado se explica en mezcla justa de pruebas.

2. No repartas las respuestas al final

El problema. Una pantalla de resultados que muestra cada pregunta con la respuesta correcta es una buena herramienta de aprendizaje y una filtración excelente.

Qué lo resuelve. En ExamQR eliges, en cada sesión, qué ven los candidatos después de entregar: nada, la puntuación total, la puntuación con las preguntas acertadas y falladas, o la prueba completa con las respuestas. En un examen que se realiza en varias sesiones, muestra solo la puntuación total. Si quieres que los candidatos revisen sus respuestas, cambia el ajuste cuando haya terminado la última sesión. El nuevo ajuste se aplica la próxima vez que los candidatos abran sus resultados.

3. Nadie ve las preguntas antes del inicio

El problema. Una prueba que se puede abrir antes de tiempo, aunque sea un minuto, se puede copiar.

Qué lo resuelve. En un examen en línea de ExamQR, los candidatos reciben las preguntas solo después de que un supervisor inicie la sesión de su sala. Antes de eso no hay nada que abrir. También puedes poner una contraseña a cada sala, que el vigilante da al empezar, para que un candidato que está en casa no pueda entrar en un examen pensado para el aula de informática.

En los exámenes en el aula de informática con ExamQR Exam, el examen llega a la sala como un paquete de examen que puedes proteger con contraseña, y se abre en el equipo servidor de la sala. Los candidatos esperan en una pantalla de espera hasta que empieza la sesión. Las imágenes y demás archivos multimedia se guardan cifrados en los equipos de los candidatos hasta que se abre el examen, y la aplicación los elimina al cerrarse.

4. Haz que las fotos y las capturas sirvan de menos

• En la web, el clic derecho y la función de copiar están bloqueados en la página del examen.
• En la aplicación ExamQR Exam, la ventana del examen queda fuera de las capturas y las grabaciones de pantalla, y las herramientas de grabación se cierran. Más información en cómo hacen trampa los candidatos en los exámenes por ordenador.
• La cámara de un móvil es tarea del vigilante: móviles en bolsas y vigilantes recorriendo la sala.

La mejor defensa contra las fotos sigue siendo la de la sección 1. Una foto de una pregunta que la siguiente sesión no va a recibir no vale nada.

5. Mantén la prueba dentro de un círculo reducido

• Comparte la prueba solo con las personas que la crean y la revisan. En ExamQR, una prueba solo la ven su propietario y las personas con las que se comparte.
• Cuando traslades un paquete de examen, protégelo con contraseña y envía la contraseña por separado, lo más tarde posible.
• En los exámenes en papel, imprime lo más tarde posible, cuenta las copias al repartirlas y al recogerlas, y recoge todas las pruebas, borradores incluidos. Usa el código de versión de cada prueba para relacionarla con la clave de respuestas y la hoja de asistencia.

6. Comprueba si se ha filtrado de todos modos

Las filtraciones dejan rastro en las cifras. Después del examen, compara las sesiones:

• Una media por sesión que sube de forma constante de la primera sesión a la última.
• Una pregunta que acertó el 40 % por la mañana y el 85 % por la tarde.

Las estadísticas de ExamQR muestran lo difícil que resultó cada pregunta y lo bien que distinguió a los candidatos más preparados de los menos preparados. Una pregunta cuyos resultados dan un salto entre sesiones debería quedar fuera de la puntuación de este examen y retirarse del banco. Más sobre cómo leer esas cifras: análisis de ítems.

Lista de comprobación

• Un banco de preguntas lo bastante grande para un juego de preguntas nuevo por sesión.
• Una prueba por sesión, creada a partir de la misma estructura, y versiones barajadas dentro de cada sesión.
• Los candidatos solo ven su puntuación hasta que termina la última sesión.
• Preguntas disponibles solo cuando el supervisor inicia la sesión; contraseña de la sala en las sesiones en el aula de informática.
• Paquetes de examen protegidos con contraseña; la contraseña, compartida tarde y por separado.
• Móviles en bolsas, vigilantes recorriendo la sala.
• Medias por sesión y estadísticas de las preguntas comparadas después del examen.

No puedes impedir que los candidatos hablen. Sí puedes hacer que lo que cuentan no le sirva de nada a la siguiente sesión. Más sobre los exámenes en línea y la mezcla de pruebas.