
Les questions que l'on ne peut pas ramener au matériel sont celles dont les étudiants se plaignent
Rédiger des questions d'évaluation est lent, non parce qu'inventer les questions prend du temps, mais parce qu'il faut s'assurer que chaque question peut être répondue à partir de ce qui a réellement été enseigné, et qu'elle se situe à un niveau de difficulté qui correspond aux capacités actuelles des étudiants.
Les questions générées par un modèle sortent facilement du champ du matériel. Un modèle qui connaît le sujet demandera volontiers quelque chose qui n'a jamais été mentionné en cours, et cela ne devient apparent que le jour de l'examen.
Le second problème est la difficulté. Lorsqu'on demande un mélange, la génération produit surtout des questions de rappel, parce que ce sont les plus faciles à préparer. Un examen de questions de rappel teste la mémoire plutôt que la compréhension.
La traçabilité traite les deux. Chaque item comprend la source dont il a été tiré et son niveau de difficulté énoncé, pour que l'enseignant qui regarde le recueil voie d'un coup d'œil la couverture du matériel et l'équilibre, plutôt que d'avoir à lire 40 questions.
Comment l'ActionFlow s'exécute sur le canevas
Le matériel de cours entre via un nœud Document Upload. Le nœud PDF4me extrait ensuite les diapositives ou les lectures fournies au format PDF.
Le nœud Extract Data sépare le matériel par thème, c'est pourquoi vous pouvez vérifier la couverture plutôt que de la supposer.
Le nœud Loop parcourt les thèmes. Dans la boucle, un nœud Generate Object crée des items pour chaque thème selon une répartition de difficulté que vous définissez : rappel, application et analyse. Pour chaque item, il renvoie à la fois le passage source et le niveau.
Le choix de conception est de générer thème par thème plutôt que sur tout le matériel, ce qui tient la couverture fixe. Si le système mène une seule génération sur tout le matériel, il finit par se concentrer sur ce qu'il a trouvé le plus intéressant.
Le nœud Math totalise les items par thème et par niveau. Le nœud Filter identifie tout thème sous-représenté, pour que l'enseignant voie l'écart avant que le jeu ne soit utilisé.
Un nœud Validate rejette tout item dont le passage source ne contient pas la réponse. Ce contrôle attrape les cas de dérive hors du matériel.
Un nœud Merge assemble le jeu. Un nœud Create Excel crée la banque de questions avec ses métadonnées. Un nœud Notion stocke les fiches d'étude.
Le nœud Human in the Loop envoie tout le matériel à l'enseignant. Rien n'est envoyé aux étudiants par le flux.
Nœuds utilisés par cet ActionFlow
- Document Upload (Data) et PDF4me (Data) : extraire le matériel de cours.
- Extract Data (Data) : scinde par thème pour que la couverture puisse être mesurée.
- Loop (Control) : génère par thème plutôt que sur tout d'un coup.
- Generate Object (AI Core) : renvoie des items avec passage source et niveau de difficulté joints.
- Validate (Data) : rejette les items dont le passage source ne contient pas la réponse.
- Math (Util) et Filter (Data) : compter par thème et par niveau, et signaler les thèmes sous-représentés.
- Create Excel (Data) : produit la banque de questions avec ses métadonnées.
- Slack (Human in the Loop) : achemine le jeu vers l'enseignant. Rien n'atteint les étudiants automatiquement.
Questions fréquentes
Newsletter
Recevoir les mises à jour produit
Nouveaux nœuds, agents et notes produit. Nous n'envoyons un e-mail que lorsqu'il vaut la peine de l'ouvrir.