Las preguntas que no se pueden rastrear al material son las que reclaman los estudiantes
Escribir preguntas de evaluación es lento, no porque inventar las preguntas tome tiempo, sino porque hay que asegurar que cada pregunta se pueda responder a partir de lo que de hecho se enseñó y quede en un nivel de dificultad que coincida con la capacidad actual de los estudiantes.
Las preguntas generadas por un modelo se salen con facilidad del alcance del material. Un modelo que conoce el tema preguntará con ganas sobre algo que nunca se mencionó en las clases, y esto solo se vuelve evidente cuando ocurre el examen.
El segundo problema es la dificultad. Cuando se pide una mezcla, la generación rinde sobre todo preguntas de recuerdo, porque esas son las más fáciles de preparar. Un examen de preguntas de recuerdo pone a prueba la memoria, no la comprensión.
La trazabilidad atiende ambos problemas. Cada ítem incluye la fuente de la que se tomó y su nivel de dificultad enunciado, para que el docente que mira la colección vea de un vistazo qué tan bien se cubre el material y cómo está equilibrado, en lugar de tener que leer 40 preguntas.
Cómo se ejecuta el ActionFlow en el lienzo
El material del curso entra por un nodo Document Upload. El nodo PDF4me luego extrae las diapositivas o las lecturas entregadas en formato PDF.
El nodo Extract Data separa el material por tema, que es por qué puedes comprobar la cobertura en lugar de suponerla.
El nodo Loop recorre los temas. Dentro del loop, un nodo Generate Object crea ítems para cada tema según una distribución de dificultad que tú defines: recuerdo, aplicación y análisis. Por cada ítem devuelve el pasaje fuente y el nivel.
La decisión de diseño es generar tema por tema, no sobre todo el material a la vez, lo que mantiene fija la cobertura. Si el sistema corre una sola generación que cubre todo el material, termina centrándose en lo que le resultó más interesante.
El nodo Math cuenta ítems por tema y nivel. El nodo Filter identifica cualquier tema subrepresentado, para que el docente vea la brecha antes de usar el conjunto.
Un nodo Validate rechaza cualquier ítem cuyo pasaje fuente no contenga la respuesta. Esta comprobación atrapa los casos de deriva fuera del material.
Un nodo Merge arma el conjunto. Un nodo Create Excel crea el banco de preguntas con sus metadatos. Un nodo Notion guarda las tarjetas de estudio.
El nodo Human in the Loop envía todo el material al docente. Nada se envía a estudiantes por el flujo.
Nodos que usa este ActionFlow
- Document Upload (Data) y PDF4me (Data): extraen el material del curso.
- Extract Data (Data): parte por tema para que se pueda medir la cobertura.
- Loop (Control): genera por tema, no sobre todo a la vez.
- Generate Object (AI Core): devuelve ítems con pasaje fuente y nivel de dificultad anexos.
- Validate (Data): rechaza ítems cuyo pasaje fuente no contiene la respuesta.
- Math (Util) y Filter (Data): cuenta por tema y nivel, y marca temas subrepresentados.
- Create Excel (Data): produce el banco de preguntas con sus metadatos.
- Slack (Human in the Loop): enruta el conjunto al docente. Nada llega a estudiantes de forma automática.
Preguntas frecuentes
Empieza a crear flujos de IA
Crea una cuenta gratuita, abre una plantilla o un lienzo en blanco y ejecuta tu primer ActionFlow.
Boletín
Recibe actualizaciones del producto
Nodos nuevos, agents y notas de producto. Solo enviamos correo cuando merece la pena abrirlo.