Générer un quiz d'évaluation des acquis avec l'IA, et pourquoi la relecture reste obligatoire

Pourquoi le quiz est le cas d'usage le plus tentant

Rédiger vingt questions à choix multiples prend du temps pour un résultat que personne ne remarque. C'est exactement le profil de tâche sur lequel un modèle de langage donne une impression de gain immédiat. Dans le déploiement d'un outil d'IA chez une consultante en bilan de compétences, la génération de quiz d'évaluation intermédiaire a été le premier usage adopté spontanément, avant même les usages de rédaction.

C'est aussi le cas d'usage où la relecture a été la plus coûteuse à installer, parce que le rendu paraît propre. Une question mal construite ressemble à une question bien construite. Le défaut ne se voit qu'en la testant sur un vrai groupe, ou en appliquant une grille de contrôle systématique.

Les défauts récurrents des questions générées

Deux réponses correctes

Le défaut le plus fréquent. Le modèle produit quatre propositions dont deux sont défendables, et désigne l'une des deux comme correcte. Sur un quiz corrigé automatiquement, un apprenant qui maîtrise le sujet perd des points. Sur la vingtaine de quiz générés dans le déploiement, ce défaut apparaissait en moyenne sur deux à trois questions par série de quinze.

Des distracteurs trop faibles

Le défaut inverse est plus insidieux. Le modèle produit une bonne réponse détaillée et trois propositions manifestement absurdes. La question donne alors un taux de réussite de cent pour cent qui ne mesure rien. Sur un dossier d'audit, une série de questions de ce type produit des résultats flatteurs et sans valeur probante.

Des questions portant sur le sujet plutôt que sur votre contenu

C'est le défaut le plus structurant. Si vous demandez un quiz sur un thème sans fournir votre support, le modèle interroge ce qu'il sait du thème. Les apprenants sont alors évalués sur des notions que vous n'avez pas enseignées. La correction consiste à fournir le support et à imposer que chaque bonne réponse soit retrouvable dans le texte fourni.

Des questions de vocabulaire déguisées

Le modèle produit volontiers des questions de définition, parce que ce sont les plus simples à formuler. Elles mesurent la mémorisation d'un terme, alors que l'objectif annoncé porte le plus souvent sur son utilisation en situation. Une évaluation d'acquis composée uniquement de définitions ne renseigne pas sur l'atteinte des objectifs opérationnels annoncés dans le programme.

Le recopiage littéral du support

Quand vous fournissez le support, le modèle reprend parfois une phrase mot pour mot dans l'énoncé et dans la bonne réponse. L'apprenant reconnaît la formulation et répond juste sans avoir compris. La consigne ajoutée dans le déploiement impose une reformulation de l'énoncé par rapport au support.

L'erreur qui a déclenché le protocole de relecture

Un quiz destiné à une session sur le cadre réglementaire de la formation contenait une question sur une durée maximale, avec un chiffre inventé par le modèle. La proposition désignée comme correcte était fausse, et la proposition correspondant à la règle réelle était classée parmi les distracteurs. Un apprenant qui connaissait le texte aurait été sanctionné pour avoir eu raison.

Ce type d'erreur a une portée particulière parce qu'un support d'évaluation est conservé. Il alimente le dossier de preuves, il peut être présenté lors d'un audit, et il circule auprès des apprenants. Une erreur dans une phrase de support se corrige à l'oral pendant la séance. Une erreur dans un quiz corrigé reste dans les archives.

Le protocole de relecture appliqué

Quatre contrôles sont passés sur chaque question avant diffusion.

• Unicité de la bonne réponse. Chaque proposition est lue comme si elle était la réponse attendue. Si deux tiennent, la question est réécrite.
• Rattachement à un objectif. Chaque question est associée à un objectif du programme. Une question qui ne se rattache à aucun objectif est supprimée, sans exception.
• Traçabilité dans le support. La bonne réponse doit être retrouvable dans le contenu réellement transmis aux apprenants.
• Contrôle des données factuelles. Tout chiffre, seuil, date ou référence normative est vérifié à la source ou retiré de la question.

Ce protocole prend environ quinze minutes pour un quiz de quinze questions. Le gain net par rapport à une rédaction manuelle reste réel, autour de la moitié du temps, mais il est très inférieur à ce que laisse croire la première impression.

Ce que dit le cadre applicable

Deux éléments méritent d'être connus. Du côté de la certification, l'indicateur 11 du référentiel national qualité porte sur l'évaluation de l'atteinte des objectifs de la prestation par les bénéficiaires, et attend des outils d'évaluation formalisés en cours et en fin de prestation. La provenance des questions n'est pas encadrée, mais leur cohérence avec les objectifs annoncés l'est de fait.

Du côté européen, l'annexe III du règlement sur l'intelligence artificielle classe parmi les usages à haut risque les systèmes d'IA destinés à évaluer les acquis d'apprentissage dans l'éducation et la formation professionnelle. Le règlement (UE) 2026/1744, dit Digital Omnibus, en vigueur depuis le 27 juillet 2026, a reporté au 2 décembre 2027 l'application des obligations attachées à cette annexe.

La distinction utile en pratique porte sur le rôle du système. Un modèle qui aide à rédiger des questions ensuite validées par un formateur ne se trouve pas dans la même situation qu'un système qui corrige, note et conditionne une décision concernant un apprenant. Le second cas appelle une analyse sérieuse. Le premier reste un outil de production de texte, à condition que la validation humaine soit réelle et documentée.

Les usages de l'IA qui fonctionnent bien sur l'évaluation

Trois demandes se sont révélées plus fiables que la génération brute de questions. La première est la critique d'un quiz que vous avez écrit vous-même : le modèle repère bien les ambiguïtés et les doubles réponses dans un texte qu'on lui soumet. La deuxième est la génération de variantes d'une question que vous avez validée, pour constituer plusieurs versions d'une même évaluation. La troisième est la reformulation des énoncés dans un niveau de langue adapté à votre public, un point qui compte pour les publics éloignés de l'écrit.

Le reste de votre dossier de preuves

Un quiz d'évaluation ne suffit pas à documenter une action de formation. Les traces de présence, la convention, le programme et le certificat de réalisation restent attendus. Nos guides pratiques détaillent les mentions exigées sur chacun de ces documents, et les outils du site les génèrent à partir de vos données.