IAs para generar preguntas de tipo test a partir de un PDF


(⏱️ Tiempo de lectura: 11:30 minutos)

Es habitual que los docentes usemos muchos materiales en formato PDF, como legislación educativa, materiales educativos y Unidades Didácticas/Situaciones de Aprendizaje.

En el caso de los materiales educativos que trabajamos con los estudiantes, también es frecuente que usemos el contenido de estos documentos para preparar algún tipo de prueba tipo test para evaluar su aprendizaje. Estas pruebas objetivas son una buena herramienta para hacer un seguimiento periódico de los estudiantes y, desde el punto de vista de la productividad, ahorrar tiempo en la corrección, sobre todo si los combinamos con herramientas de corrección automática.

Desde la llegada de la Inteligencia Artificial, la redacción de este tipo de preguntas a partir de un texto se puede simplificar mediante el uso de ChatGPT o de otras herramientas específicas, algunas de ellas de pago, como quizgecko, pero que nos permitirá ahorrar mucho tiempo.


Imagen generada con IA. Una estudiante realizando un test en un aula. Estilo cómic.

En este artículo vamos a analizar el caso concreto y más frecuente: tenemos un archivo en formato PDF y queremos una IA en la que podamos subir el archivo y redactar de forma sencilla preguntas de tipo test. De momento, la versión gratuita de ChatGPT no permite subir archivos (ni PDF ni ningún otro tipo), sólo la versión de pago ChatGPT Plus.

Nos centraremos en explorar sólo las IAs totalmente gratuitas (aunque pueden requerir registro o pueden tener unos usos limitados) y en un artículo posterior veremos cómo podemos realizar esta misma tarea con aplicaciones específicas que permiten trabajar con documentos PDF. Sin embargo, hemos añadido también la prueba con ChatGPT Plus, herramienta de pago, que se considera actualmente la mejor IA, o al menos la que mejor puntúa en todas las comparativas.

Si quieres ahorrar tiempo, salta directamente a las conclusiones.

⚠️​ Como siempre advertimos, el mundo de las herramientas de IA avanza a gran velocidad, de modo que es posible que aparezcan otras nuevas herramientas o que algunas modifiquen sus funcionalidades, lo cual trataremos de incorporar pero es posible que no siempre esté este artículo actualizado.


CURSO UDEMY : HERRAMIENTAS DE INTELIGENCIA ARTIFICIAL PARA PROFESORES

✅  En este curso online en la plataforma Udemy se exploran, a lo largo de más de 2 horas de videos, las principales herramientas de Inteligencia Artificial que han surgido y que se pueden aplicar a tareas docentes: chatbots educativos, generación de imágenes, texto a video, redacción de tests y exámenes y muchas otras más.

✅  El precio del curso es de 19,99€ (aunque Udemy tiene frecuentes promociones y descuentos 😉 )


Material y prompt de prueba

✅​ Para realizar una comparativa entre las diferentes IAs que vamos a poner a prueba, usaremos un PDF sobre los insectos que hemos sacado del artículo de la wikipedia sobre este tema, que hemos transformado en PDF de forma directa usando una herramiena web llamada webtopdfconvert, aunque existen muchas otras similares. De este modo, simulamos un material educativo real, con diferentes apartados, imágenes, diagramas, etc.

✅​ El prompt que vamos a llevar a cada una de las IAs es uno que usamos habitualmente con ChatGPT para esta función. Como comprobarás, recoge muchos de los consejos que recomendamos a la hora de escribirlos para obtener muy buenos resultados.

PROMPT

Actúa como un profesor de ciencias. Estoy preparando una prueba de evaluación de los estudiantes sobre los insectos sobre exclusivamente del texto del documento adjunto
Escribe 5 preguntas de respuesta múltiple (test con 4 opciones) de dificultad media sobre los diferentes apartados del tema. Incluye la respuesta correcta.
Para escribir estas preguntas de respuesta múltiple, sigue este ejemplo: «Pregunta: ¿En qué parte de la planta se realiza el proceso de fotosíntesis? A. Raíz B. Tallo C. Hoja D. Flor»
Recuerda que quiero que las preguntas salgan únicamente del contenido del PDF.
Respira hondo y tómate tu tiempo para redactar las respuestas.

✅​ Para llevar a cabo la comparativa, en la mayoría de los ejemplos vamos a usar la web poe.com, la cual hemos comentado en anteriores ocasiones y aglutina numerosos modelos de IAs que se pueden probar de forma gratuita (requiere registro) con interacciones limitadas. De entre todas las IAs que recogen en su lista de «bots oficiales«, hemos seleccionado sólo algunas de entre las que permiten subir archivos PDF para procesarlos.

✅​ Para evaluar la calidad de las preguntas generadas, usaremos estos criterios:

  • La IA responde de forma apropiada al prompt que le mandamos
  • El formato de las preguntas y respuestas es el adecuado
  • Calidad de redacción de las preguntas y respuestas
  • Finalmente, un criterio subjetivo sobre si nos gustan más o menos. Esta parte, evidentemente, depende de cada docente, por lo que cada uno debería hacer sus propias pruebas (y aportar como ejemplo en el prompt el tipo de pregunta que usa habitualmente)

Imagen generada con IA. Un estudiante realizando un test en un aula. Estilo cómic.

Comparativa de IAs

Añadimos también una captura de pantalla de cada una para que se aprecie el formato de salida de las preguntas y respuestas.

Perplexity

Ya hemos comentado la funcionalidad de perplexity como buscador de internet enriquecido con IA, pero también permite subir archivos en formato PDF para interaccionar con ellos.

REPUESTA DE PERPLEXITY

Preguntas de Respuesta Múltiple sobre Insectos

1. Pregunta: ¿Qué tipo de aparato bucal tienen los tábanos (Diptera Tabanidae)?
A. Masticador
B. Cortador-chupador
C. Picador-chupador
D. Tubo de sifón
Respuesta Correcta: B. Cortador-chupador

2. Pregunta: ¿Cuál es el órgano extensible acanalado utilizado por los insectos picador-chupadores para llegar a los nectarios de las flores?
A. Labro
B. Mandíbulas
C. Maxilas
D. Labio
Respuesta Correcta: A. Labro

3. Pregunta: ¿Qué tipo de aparato bucal se encuentra en los hemípteros, como pulgones, chinches y cochinillas?
A. Masticador
B. Cortador-chupador
C. Picador-chupador
D. Tubo de sifón
Respuesta Correcta: C. Picador-chupador

4. Pregunta: ¿Qué estructura forma una serie de canales por los que desciende la saliva y asciende el alimento en el aparato bucal tipo cortador-chupador?
A. Labro
B. Mandíbulas
C. Maxilas
D. Labio
Respuesta Correcta: D. Labio

5. Pregunta: ¿Qué tipo de aparato bucal es el más generalizado entre los insectos y se ha desarrollado a partir del mismo?
A. Masticador
B. Cortador-chupador
C. Picador-chupador
D. Tubo de sifón
Respuesta Correcta: A. Masticador

Como puedes ver, perplexity saca preguntas muy centradas en el tema de la alimentación. Sin embargo, si le añadimos esta breve continuación, genera preguntas más variadas.

PROMPT

Dame preguntas de temas variados
REPUESTA DE PERPLEXITY

Preguntas de Temas Variados

1Pregunta: ¿Cuál es el grupo de insectos más dañino para la madera durante su crecimiento?
A. Larvas de mariposas
B. Himenópteros
C. Termitas
D. Escarabajos bupréstidos
Respuesta Correcta: C. Termitas

2. Pregunta: ¿Qué función principal desempeñan las antenas en los insectos?
A. Audición
B. Tacto
C. Olfato
D. Visión
Respuesta Correcta: B. Tacto

3. Pregunta: ¿Qué estructura es el techo de la boca de los insectos y se articula con el clípeo?
A. Mandíbulas
B. Maxilas
C. Labro (labio superior)
D. Labio (labium)
Respuesta Correcta: C. Labro (labio superior)

4. Pregunta: ¿Cuál es el componente principal del exoesqueleto de los insectos que cumple funciones como protección mecánica y soporte muscular?
A. Quitina
B. Artropodina
C. Esclerotina
D. Melanina
Respuesta Correcta: C. Esclerotina

5. Pregunta: ¿Qué tipo de aparato bucal es el más generalizado entre los insectos y se ha desarrollado a partir del mismo?
A. Masticador
B. Cortador-chupador
C. Picador-chupador
D. Tubo de sifón
Respuesta Correcta: A. Masticador

Quiero recibir gratis un par de mailes semanales sobre Inteligencia Artificial y Ahorro de Tiempo para Docentes


Assistant

Es la IA por defecto de poe.com, desarrollado a partir de ChatGPT 3.5 (el mismo de la versión gratuita de OpenAI).

REPUESTA DE ASSISTANT

Pregunta 1: ¿Cuál es el nombre científico de la clase de animales invertebrados representada por los insectos?
A) Arachnida
B) Insecta
C) Crustacea
D) Mollusca

Respuesta correcta: B) Insecta

Pregunta 2: ¿Cuántos pares de alas suelen tener los insectos?
A) Un par
B) Dos pares
C) Tres pares
D) Cuatro pares

Respuesta correcta: B) Dos pares

Pregunta 3: ¿Cuál es el término utilizado para describir la ciencia que estudia los insectos?
A) Entomología
B) Herpetología
C) Ornitología
D) Malacología

Respuesta correcta: A) Entomología

Pregunta 4: ¿Cuál es el grupo de animales más diverso de la Tierra?
A) Reptiles
B) Aves
C) Insectos
D) Mamíferos

Respuesta correcta: C) Insectos

Pregunta 5: ¿Cuál de las siguientes afirmaciones es verdadera sobre la biodiversidad de los insectos?
A) Está aumentando rápidamente.
B) Se limita a un pequeño número de especies.
C) Representa menos del 10% de las formas de vida del planeta.
D) Está disminuyendo rápidamente.

Respuesta correcta: D) Está disminuyendo rápidamente.

Claude-Instant-100k

El modelo más rápido de Anthropic, con una ventana de contexto aumentada de 100 000 tokens.

REPUESTA DE CLAUDE-INSTANT

Pregunta 1:
¿En qué orden se encuentran más especies de insectos descritas?
A. Coleópteros
B. Himenópteros
C. Dípteros
D. Lepidópteros

Pregunta 2:
¿Qué dificulta el aumento excesivo del tamaño de los insectos?
A. La concentración de oxígeno en la atmósfera
B. El sistema circulatorio
C. El sistema nervioso
D. El sistema traqueal

Pregunta 3:
¿Qué parte de la cabeza de los insectos contiene los órganos sensoriales como los ojos compuestos y las antenas?
A. La región preoral
B. Las mandíbulas
C. El labio
D. La epifaringe

Pregunta 4:
¿Qué tipo de insectos presentan las larvas características similares a las orugas?
A. Los paléopteros
B. Los hemípteros
C. Los himenópteros
D. Los holometábolos

Pregunta 5:
¿Qué órdenes de insectos incluye el superorden de los exopterygotas?
A. Dermápteros y ortópteros
B. Odonatos y paléopteros
C. Blatodea e Isópteros
D. Himenópteros y dípteros

La respuesta correcta a la pregunta 1 es A
La respuesta correcta a la pregunta 2 es D
La respuesta correcta a la pregunta 3 es A
La respuesta correcta a la pregunta 4 es D
La respuesta correcta a la pregunta 5 es C

Imagen generada con IA. Una estudiante realizando un test en un aula. Estilo cómic.

Mistral-Large

El modelo más potente de Mistral AI. Soporta una ventana de contexto de 32 000 tokens (alrededor de 24 000 palabras).

REPUESTA DE MISTRAL-LARGE

Pregunta 1: ¿Cuál es el grupo de animales más diverso en la Tierra?
A. Mamíferos
B. Aves
C. Insectos
D. Peces
Respuesta correcta: C. Insectos

Pregunta 2: ¿De qué filo pertenecen los insectos?
A. Cordados
B. Moluscos
C. Artrópodos
D. Equinodermos
Respuesta correcta: C. Artrópodos

Pregunta 3: ¿Cuántos pares de patas tienen los insectos?
A. 2 pares
B. 3 pares
C. 4 pares
D. 6 pares
Respuesta correcta: B. 3 pares

Pregunta 4: ¿Cuál es el proceso de transformación de una larva de insecto en un adulto?
A. Metamorfosis
B. Reproducción
C. Alimentación
D. Respiración
Respuesta correcta: A. Metamorfosis

Pregunta 5: ¿Cuál es la función principal de las antenas en los insectos?
A. Oír
B. Ver
C. Oler
D. Tocar
Respuesta correcta: D. Tocar

Llama-2-70b

Llama-2-70b-chat de Meta.

REPUESTA DE LLAMA-2-70B

Claro, aquí te dejo 5 preguntas de respuesta múltiple sobre los insectos basadas en el contenido del PDF:

¿Cuál es el grupo de animales al que pertenecen los insectos?
A. Chordata (vertebrados)
B. Arthropoda (artrópodos)
C. Annelida (annulus)
D. Mollusca (moluscos)
Respuesta correcta: B. Arthropoda (artrópodos)

¿Cuál es la función principal de las antenas de los insectos?
A. Como órgano de movimiento
B. Como órgano de sentido
C. Como órgano de digestión
D. Como órgano de reproducción
Respuesta correcta: B. Como órgano de sentido

¿Cuál es el nombre científico de la clase de insectos que incluye a los coleópteros, lepidópteros y himenópteros?
A. Insecta
B. Arachnida
C. Crustacea
D. Mollusca
Respuesta correcta: A. Insecta

¿Cuál es la estructura corporal que presentan los insectos, compuesta por tres regiones principales?
A. Cabeza, tórax y abdomen
B. Cabeza, cuello y cuerpo
C. Cabeza, tórax y patas
D. Cabeza, tórax y antenas
Respuesta correcta: A. Cabeza, tórax y abdomen

¿Cuál es el nombre de la sutura que se encuentra en la cabeza de los insectos, que separa la región preoral de la región postoral?
A. Sutura coronal
B. Sutura frontal
C. Sutura parietal
D. Sutura temporal
Respuesta correcta: A. Sutura coronal

Espero que estas preguntas te sean útiles para tu prueba de evaluación. ¡Buena suerte!



PaLM-2

Desarrollado por el modelo PaLM 2 de Google.

REPUESTA DE PaLM

Pregunta 1:
¿En qué orden se encuentran más especies de insectos descritas?
A. Coleópteros
B. Himenópteros
C. Dípteros
D. Lepidópteros

Pregunta 2:
¿Qué dificulta el aumento excesivo del tamaño de los insectos?
A. La concentración de oxígeno en la atmósfera
B. El sistema circulatorio
C. El sistema nervioso
D. El sistema traqueal

Pregunta 3:
¿Qué parte de la cabeza de los insectos contiene los órganos sensoriales como los ojos compuestos y las antenas?
A. La región preoral
B. Las mandíbulas
C. El labio
D. La epifaringe

Pregunta 4:Pregunta 1: ¿Cuál de los siguientes no es una parte principal del cuerpo de un insecto?

A. Cabeza
B. Tórax
C. Abdomen
D. Alas

Respuesta correcta: D. Alas

Pregunta 2: ¿Qué tipo de aparato bucal tienen los insectos cortadores-chupadores?

A. Mandíbulas afiladas y maxilas en forma de largos estiletes sonda
B. Mandíbulas y maxilas no funcionales, probóscide con ápice en forma de esponja
C. Mandíbulas y labro de tipo masticador, maxilas y labio forman una serie de estructuras deprimidas y alargadas
D. Labro, mandíbulas y maxilas delgados y largos, reunidos para formar una delicada aguja hueca

Respuesta correcta: A. Mandíbulas afiladas y maxilas en forma de largos estiletes sonda

Pregunta 3: ¿Cuál es el nombre de la región del cuello que une la cabeza con el protórax?

A. Cerviz
B. Protórax
C. Mesotórax
D. Metatórax

Respuesta correcta: A. Cerviz

Pregunta 4: ¿Cuál es el número máximo de segmentos tarsales que puede tener una pata de insecto?

A. Uno
B. Dos
C. Tres
D. Cinco

Respuesta correcta: D. Cinco

Pregunta 5: ¿Qué tipo de alas tienen las chinches?

A. Membranosas
B. Engrosadas en su base
C. Angostas y con consistencia apergaminada
D. Duras y en forma de vaina

Respuesta correcta: B. Engrosadas en su base

ChatGPT Plus (Versión de pago)

Como hemos dicho, GPT4 es la IA con mejor puntuación en todas las comparativas (datos de marzo 2024).

REPUESTA DE ChatGPT Plus

Basándome en el contenido del documento sobre los insectos, he preparado cinco preguntas de evaluación con respuesta correcta incluida:

1. Pregunta: ¿Cuál es la función principal de las antenas en los insectos?

A. Movimiento
B. Alimentación
C. Reproducción
D. Percepción sensorial

2. Pregunta: ¿En qué se diferencia principalmente un insecto ametábolo de uno holometábolo durante su desarrollo?

A. La presencia de alas
B. El ametábolo no experimenta metamorfosis, mientras que el holometábolo sí
C. La capacidad de vuelo
D. El tipo de alimentación

3. Pregunta: ¿Qué tipo de metamorfosis experimentan los insectos que pasan por las fases de huevo, larva, pupa y adulto?

A. Ametábola
B. Hemimetábola
C. Holometábola
D. Ninguna de las anteriores

4. Pregunta: ¿Cuál es el propósito de la partenogénesis en algunos insectos?

A. Aumentar la diversidad genética
B. Reproducción sin necesidad de apareamiento
C. Desarrollo más rápido
D. Mayor supervivencia de las crías

5. Pregunta: ¿Qué órdenes de insectos son conocidos por tener especies que practican cuidado parental?

A. Diptera y Lepidoptera
B. Isoptera y Coleoptera
C. Hymenoptera y Blattodea
D. Orthoptera y Hemiptera

Estas preguntas están diseñadas para evaluar la comprensión de los estudiantes sobre distintos aspectos de la biología de los insectos, incluyendo su percepción sensorial, desarrollo, reproducción, y comportamientos como el cuidado parental.

Conclusiones

✅​ Como ves, cualquiera de las opciones puestas a prueba da como resultado las preguntas que pedimos y se trata únicamente de nuestro gusto que usemos una u otra.

✅​ Aunque otras IAs, como ChatGPT, no permiten subir archivos, no debemos olvidar que resulta muy sencillo añadirles el texto del PDF en el prompt usando previamente una herramienta que nos lo transforme a texto, como pdftotext.

✅​ Poe.com ha reducido sustancialmente las interacciones en las versiones gratuitas, por lo que las solicitudes a algunas de las IAs que aparecen en su web se agotan cuando hacemos usos intensivos. Deberíamos usarlo para probar y buscar otras soluciones alternativas si nos gustan. O pasar al plan de suscripción.

✅​ Existen otras herramientas de pago que funcionan de forma sencilla y rápida. Si necesitamos hacer un uso intensivo, deberíamos reflexionar sobre el valor de nuestro tiempo y el coste de estos servicios.

✅​ Para simplificar la comparativa, hemos usado un prompt sencillo sin modificaciones, pero los resultados de las IAs mejoran mucho cuando usamos prompts más específicos o continuamos las interacciones indicando expresamente lo que queremos obtener.

Si usas alguna de estas herramientas u otra solución para generar tests a partir de documentos en formato PDF, nos gustaría que nos lo contaras en los comentarios del artículo o en redes sociales.

Instagram
YouTube

twitter
Facebook

⚠️  Los enlaces de esta página y de toda la web pueden contener código de afiliados de Amazon o de otras empresas. Esto significa que recibimos una comisión por cada compra de producto o servicio sin que cambie el precio de venta para el comprador.

Deja un comentario

  • Responsable: Guillermo Antón Pardo
  • Finalidad: Gestionar y responder a tus comentarios
  • Derechos: Podrás ejercer tus derechos de acceso, rectificación, limitación y suprimir los datos de este formulario, así como el derecho a presentar una reclamación ante una autoridad de control
  • Información adicional: En nuestra página con la Política de Privacidad encontrarás más información sobre la recopilación y uso de tu información por parte de Profesor Productivo.