En un estudio con 36 estudiantes que aprendían con una aplicación de tarjetas didácticas o con QuizBot, el equipo descubrió que los estudiantes recordaban correctamente más de un 25 % de respuestas correctas adicionales sobre el contenido abordado con QuizBot y dedicaban más de 2,6 veces más tiempo a estudiar con QuizBot que con las tarjetas didácticas.
Tanto la aplicación de tarjetas didácticas como QuizBot enseñaban información que abarcaba desde ciencia y seguridad personal hasta vocabulario avanzado de inglés. Ambos utilizaban algoritmos de secuenciación idénticos para seleccionar qué elemento presentar a continuación a los estudiantes.
El mayor tiempo de estudio es una parte clave de la razón por la que QuizBot funciona mucho mejor, según Emma Brunskill, profesora adjunta de informática en la Universidad de Stanford y coautora de el artículo que se publicará en las Actas de la Conferencia SIGCHI sobre Factores Humanos en Sistemas Informáticos. El equipo presentó sus hallazgos en CHI 2019, en Glasgow, Escocia.
«QuizBot es más conversacional y más divertido. Los estudiantes sentían que tenían un verdadero compañero de estudio», afirma Sherry Ruan, estudiante de posgrado que dirigió el estudio.
Los chatbots son una rama de la inteligencia artificial en la que los programas informáticos interactúan con las personas mediante mensajes de texto. Son mucho más comunes en la atención al cliente y el comercio electrónico que en las aulas. Si alguna vez has conversado con un representante de atención al cliente mientras considerabas una compra en línea, es posible que hayas interactuado con un chatbot.
QuizBot le da un nuevo giro a la fórmula de los chatbots. Plantea preguntas objetivas por texto, como lo haría un profesor. El estudiante escribe las respuestas, hace preguntas para aclarar dudas y pide pistas. QuizBot comprende y responde de forma conversacional, como si hubiera otra persona al otro lado. A diferencia de las tarjetas didácticas, los chatbots pueden reconocer respuestas casi correctas y ofrecer orientación adicional e incluso animar al estudiante.
Uno de los retos al diseñar un sistema educativo de este tipo es que el ordenador debe poder reconocer respuestas correctas expresadas de distintas formas. No todos los estudiantes responden del mismo modo ni utilizan las mismas palabras o sintaxis. Y, por supuesto, siempre cabe la posibilidad de que haya errores tipográficos. Ahí es donde entra en juego la inteligencia artificial.
Para comprobar la precisión de QuizBot al calificar, el equipo seleccionó al azar 11.000 registros de conversaciones de sus estudios. Descubrieron que QuizBot acertaba el 96,5 % de las veces: solo hizo cinco evaluaciones incorrectas entre las 144 preguntas que formuló. De esos errores, uno se debió a un error tipográfico («ture» en lugar de «true») y tres se produjeron porque el algoritmo penalizó respuestas demasiado breves, aunque correctas. Solo hubo un error porque QuizBot interpretó mal el lenguaje.
Los investigadores creen que QuizBot podría marcar el comienzo de una era posterior a las tarjetas didácticas para el aprendizaje informal. «Creo que hay mucho entusiasmo en torno a los chatbots en general, aunque todavía no se utilizan ampliamente en la educación», afirma Brunskill, quien también dirige el Laboratorio de Inteligencia Artificial para el Impacto Humano. «Pero eso debería cambiar».
También contribuyeron otros investigadores de Stanford, Colby College y la Universidad de Tsinghua, en China. El Grupo TAL Education financió esta investigación.
