Les questions ont fuité après la première session : organiser un examen en plusieurs sessions sans que le sujet circule

Une entreprise organise son évaluation annuelle des compétences pour 400 salariés sur deux jours, en quatre sessions, parce que la salle informatique ne compte que 100 ordinateurs. Tout le monde passe le même sujet, mélangé. Dès le deuxième après-midi, les gens arrivent en connaissant déjà « la question sur la politique de remboursement » et « celle avec le diagramme circulaire ». La moyenne de la dernière session dépasse de 14 points celle de la première. Personne ne peut rien prouver, mais tous ceux de la première session se sentent lésés, et les résultats sont difficiles à défendre.

Quand un examen se déroule en plusieurs sessions, une fuite n'est pas une simple éventualité : c'est ce à quoi il faut s'attendre. Les candidats discutent au déjeuner, prennent des photos et postent dans des groupes de discussion. Cet article explique comment les questions sortent, pourquoi le mélange n'aide pas d'une session à l'autre, et ce qui aide vraiment.

Comment les questions sortent

• La mémoire. Les candidats retiennent cinq ou dix questions et les partagent. Vous ne pouvez pas l'empêcher, seulement en réduire la valeur.
• Les photos. Un téléphone sous la table, ou la photo d'un sujet imprimé prise dans le couloir.
• L'écran des résultats. Si les candidats voient le sujet avec les bonnes réponses dès qu'ils rendent leur copie, la session du matin livre le corrigé à celle de l'après-midi.
• Les fichiers qui circulent avant l'examen. Un sujet envoyé par e-mail entre collègues, une impression oubliée sur la photocopieuse, un lecteur partagé auquel trop de personnes ont accès.

1. Le mélange protège du voisin, pas de la session suivante

L'erreur. « Nous avons fait 20 versions, donc c'est sûr. » Les versions mélangées contiennent les mêmes questions dans un ordre différent. Cela empêche un candidat de copier sur l'écran d'à côté. Cela ne sert à rien face à quelqu'un à qui l'on a dit le matin qu'« il y a une question sur la politique de remboursement, la réponse est 30 jours ».

La solution. Donnez à chaque session des questions différentes, de même difficulté.

Avec les examens en ligne d'ExamQR, vous construisez un sujet à partir de votre banque de questions selon une structure : tant de questions par thème et par niveau de difficulté. Créez un sujet par session à partir de la même structure. Quand vous créez plusieurs sujets à la fois, ExamQR évite de reprendre les mêmes questions d'un sujet à l'autre tant que la banque en contient assez, et il prend d'abord les questions les moins utilisées. Attribuez ensuite à chaque créneau son propre sujet. Chaque session reçoit le même dosage de thèmes et de niveaux, mais pas les mêmes questions.

La banque doit être assez fournie pour cela. Pour quatre sessions sans aucune question commune, il vous faut quatre fois plus de questions dans chaque case thème-niveau. Si une case est trop petite, ExamQR vous indique combien de questions il lui faut et combien elle en contient : vous savez alors où en rédiger d'autres. Un guide pour en constituer une : banques de questions.

À l'intérieur de chaque session, continuez de mélanger en versions, jusqu'à 1 000, pour que les voisins ne voient pas non plus le même ordre. La façon de rédiger des questions qui résistent au mélange est expliquée dans mélanger un sujet équitablement.

2. Ne distribuez pas les réponses à la fin

Le problème. Un écran de résultats qui affiche chaque question avec la bonne réponse est un bon outil d'apprentissage, et une excellente source de fuite.

La solution. Dans ExamQR, vous choisissez, pour chaque session, ce que les candidats voient après avoir rendu leur copie : rien, la note totale, la note avec les questions réussies ou manquées, ou le sujet complet avec les réponses. Pour un examen qui se déroule sur plusieurs sessions, n'affichez que la note totale. Si vous voulez que les candidats revoient leurs réponses, changez le réglage une fois la dernière session terminée. Le nouveau réglage s'applique la prochaine fois que les candidats ouvrent leurs résultats.

3. Personne ne voit les questions avant le début

Le problème. Un sujet qu'on peut ouvrir en avance, même une minute, peut être recopié.

La solution. Dans un examen en ligne ExamQR, les candidats ne reçoivent les questions qu'une fois qu'un surveillant a démarré la session de leur salle. Avant cela, il n'y a rien à ouvrir. Vous pouvez aussi définir un mot de passe pour chaque salle, que le surveillant communique au début : un candidat resté chez lui ne peut donc pas rejoindre un examen prévu pour la salle informatique.

Pour les examens en salle informatique avec ExamQR Exam, l'examen arrive dans la salle sous forme de paquet d'examen, que vous pouvez protéger par un mot de passe, et il est ouvert sur l'ordinateur serveur de la salle. Les candidats patientent sur un écran d'attente jusqu'au début de la session. Sur les ordinateurs des candidats, les images et autres médias restent chiffrés jusqu'à l'ouverture de l'examen, et l'application les supprime à sa fermeture.

4. Rendez les photos et les captures d'écran moins utiles

• Sur le web, le clic droit et la copie sont bloqués sur la page d'examen.
• Dans l'application ExamQR Exam, la fenêtre d'examen est exclue des captures et des enregistrements d'écran, et les outils d'enregistrement sont fermés. Plus de détails dans comment les candidats trichent aux examens sur ordinateur.
• L'appareil photo d'un téléphone relève du surveillant : téléphones dans les sacs, surveillants qui circulent.

La meilleure défense contre les photos reste celle de la section 1. La photo d'une question que la session suivante ne recevra pas ne vaut rien.

5. Gardez le sujet dans un cercle restreint

• Ne partagez le sujet qu'avec les personnes qui le construisent et le vérifient. Dans ExamQR, un sujet est visible par son propriétaire et par les personnes avec qui il est partagé.
• Quand vous transférez un paquet d'examen, protégez-le par un mot de passe et envoyez le mot de passe séparément, le plus tard possible.
• Pour les examens sur papier, imprimez le plus tard possible, comptez les exemplaires à la distribution et au ramassage, et récupérez toutes les feuilles, brouillons compris. Servez-vous du code de version de chaque sujet pour le rapprocher du corrigé et de la feuille d'émargement.

6. Vérifiez s'il y a quand même eu une fuite

Les fuites laissent une trace dans les chiffres. Après l'examen, comparez les sessions :

• une moyenne qui monte régulièrement de la première à la dernière session ;
• une question réussie par 40 % des candidats le matin et par 85 % l'après-midi.

Les statistiques d'ExamQR montrent la difficulté de chaque question et sa capacité à distinguer les candidats les plus forts des plus faibles. Une question dont les résultats font un bond d'une session à l'autre doit être neutralisée dans la notation de cet examen et retirée de la banque. Pour savoir lire ces chiffres : analyse d'items.

Liste de contrôle

• Une banque de questions assez fournie pour un jeu de questions inédit à chaque session.
• Un sujet par session, construit à partir de la même structure, et des versions mélangées dans chaque session.
• Les candidats ne voient que leur note jusqu'à la fin de la dernière session.
• Questions accessibles seulement quand le surveillant démarre la session ; un mot de passe de salle pour les sessions en salle informatique.
• Paquets d'examen protégés par mot de passe ; mot de passe transmis tard et séparément.
• Téléphones dans les sacs, surveillants qui circulent.
• Moyennes des sessions et statistiques des questions comparées après l'examen.

Vous ne pouvez pas empêcher les candidats de parler. Vous pouvez rendre ce qu'ils disent inutile pour la session suivante. En savoir plus sur les examens en ligne et le mélange de sujets.