Aunque la proliferación de los cursos masivos abiertos en línea (MOOC) ha ampliado las oportunidades de aprendizaje para personas de todo el mundo, el aula digital también se enfrenta a muchos de los mismos problemas que la tradicional, como la trampa.
En un nuevo documento de trabajo, investigadores del MIT y de la Universidad de Harvard identifican un nuevo método de trampa específico de los cursos en línea abiertos y recomiendan una serie de estrategias que resultan eficaces para prevenir dicha trampa.
El documento de trabajo, “Detecting and Preventing ‘Multiple-Account’ Cheating in Massive Open Online Courses”, se publicó hoy en arXiv.org, un repositorio en línea de preimpresiones electrónicas.
Isaac Chuang —profesor de ingeniería eléctrica y física, decano asociado sénior de aprendizaje digital del MIT y uno de los autores del documento de trabajo— explica que él y sus colegas se inspiraron para estudiar el problema con el fin de comprender mejor todas las oportunidades que ofrecen los cursos en línea, tanto el aprendizaje como la trampa.
“Si los estudiantes de algunos cursos en línea eluden el proceso de aprendizaje y obtienen la certificación sin pasar por las vías tradicionales de evaluación y retroalimentación, la certificación no implica necesariamente que hayan aprendido algo. Esto podría devaluar seriamente la certificación de los MOOC”, afirma Chuang. “Es un problema bien conocido en el ámbito académico, y está ocurriendo de nuevas maneras en los entornos en línea. Queremos comprender y abordar este problema a medida que la educación en línea sigue creciendo.”
Andrew Ho, profesor de la Harvard Graduate School of Education y autor del documento de trabajo, añade que el artículo describe “una nueva técnica de trampa propia de los MOOC. Se posibilita mediante características de diseño específicas, entre ellas la capacidad de crear varias cuentas de forma gratuita. Es un método de trampa que permite obtener un certificado de un curso en una hora, algo que no es posible con los enfoques convencionales de trampa. Se trata de una trampa de otro tipo.”
Usuarios de CAMEO
Al analizar los datos recopilados de estudiantes que usan la plataforma de aprendizaje en línea edX, los investigadores observaron que ciertos usuarios respondían a las preguntas de evaluación “más rápido de lo humanamente posible”, según Chuang. Tras un examen más detallado, los investigadores se dieron cuenta de que varios estudiantes parecían emplear una estrategia de trampa que denominan “copiar respuestas mediante múltiples existencias en línea” (o CAMEO).
En este método de trampa, un usuario crea varias cuentas, una de las cuales es la cuenta principal que finalmente obtendrá el certificado. Las demás cuentas se utilizan para encontrar o “recolectar” las respuestas correctas a las preguntas de evaluación para la cuenta principal.
Para determinar el alcance de la trampa en los cursos en los que los estudiantes pueden obtener certificación al aprobar, los investigadores desarrollaron un nuevo algoritmo capaz de identificar a los usuarios de CAMEO. El algoritmo busca pares de cuentas relacionadas en las que una responde incorrectamente a la mayoría de las preguntas y la otra ofrece en su mayoría respuestas correctas en el primer intento. A continuación, se revisan las marcas de tiempo de actividad para ver cuándo la cuenta sospechosa de recolectar respuestas resolvió un problema concreto justo después de que lo hiciera la cuenta principal. El algoritmo también comprueba si las cuentas relacionadas podrían compartir direcciones IP en varios cursos.
Los investigadores examinaron datos de 1,9 millones de participantes en 115 MOOC ofrecidos por HarvardX y MITx desde el otoño de 2012 hasta la primavera de 2015. Descubrieron que, en 69 cursos en los que se detectó que los usuarios empleaban la estrategia CAMEO, el 1,3 por ciento de los certificados obtenidos (1.237 certificados) parecía haberse conseguido mediante dicha trampa. Además, observaron que, entre quienes obtuvieron 20 o más certificados, el 25 por ciento parece haber usado la estrategia CAMEO. En algunos cursos, los usuarios de CAMEO podrían representar hasta el 5 por ciento de los certificados obtenidos.
Aunque estos porcentajes son inferiores a la prevalencia de trampas informada, que según algunas fuentes supera el 50 por ciento, los autores sostienen que, no obstante, estos porcentajes son significativos. “No se trata de un caso aislado de copia en una sola tarea”, afirma Ho. “Se trata de la falsificación masiva de un certificado.”
El uso de CAMEO resultó ser mayor entre hombres jóvenes con menor nivel educativo fuera de Estados Unidos. La tasa entre los usuarios estadounidenses fue especialmente baja, de 0,4 por ciento de los certificados obtenidos. Los autores observan que estas tasas podrían correlacionarse con el valor percibido del certificado en los distintos países.
La prevalencia del uso de CAMEO fue mayor en los cursos de gobierno, salud y ciencias sociales, donde el 1,3 por ciento de los certificados se obtuvo empleando la estrategia CAMEO, y menor en los cursos de informática, donde solo el 0,1 por ciento de los certificados se obtuvo mediante esta técnica.
Técnicas de prevención
Los autores describen una serie de estrategias para prevenir la trampa en los cursos en línea, entre ellas restringir las soluciones de las evaluaciones hasta después de la fecha de entrega de las tareas, y aleatorizar las preguntas para que cada estudiante reciba un conjunto de problemas personalizado.
Sin embargo, algunas de estas estrategias son costosas o pueden limitar las oportunidades de aprendizaje. “Podemos enfrentarnos a una disyuntiva entre facilitar el aprendizaje y prevenir la trampa”, señala Chuang.
Los investigadores observaron que, en los cursos de ciencia, tecnología, ingeniería y matemáticas (STEM) donde podrían haberse empleado estas técnicas, el uso de CAMEO representó solo el 0,1 por ciento de los certificados obtenidos, frente al 1,2 por ciento de los certificados obtenidos en cursos que no aplicaban ninguna estrategia de prevención.
Aunque técnicas como la aleatorización son fáciles de aplicar en los cursos STEM, Chuang señala que son más difíciles de implementar en los cursos de humanidades, donde las preguntas de opción múltiple se utilizan habitualmente como parte del proceso de evaluación. No obstante, los investigadores confían en que sus hallazgos inspiren a los creadores de contenidos de los cursos a implementar algunas de las estrategias de prevención que han descrito, y que esta investigación impulse una evaluación más profunda de las trampas en los MOOC.
“Una de las lecciones más interesantes del artículo es que existen formas de mitigar la trampa que son sencillas y que los equipos que crean contenidos para cursos en línea pueden aplicar”, explica Chuang. “También esperamos que las mejoras de las plataformas, como la supervisión virtual de exámenes, ayuden a reducir la trampa.”
“Este artículo aborda un desafío creciente a medida que la educación superior se digitaliza: garantizar que el trabajo que realizan los estudiantes sea realmente suyo”, afirma George Siemens, director ejecutivo del laboratorio de investigación Learning Innovation and Networked Knowledge de la Universidad de Texas en Arlington, que no participó en la investigación.
“Los MOOC y, en el caso de este artículo, el desarrollo de múltiples identidades en línea, plantean un nuevo conjunto de desafíos para el mundo académico”, señala Siemens. “Lo que está en juego en el aprendizaje puede ser alto, ya que el rendimiento académico puede influir en las oportunidades laborales. Garantizar que el trabajo lo realice el estudiante que afirma haberlo hecho seguirá siendo un desafío, tanto en línea como en las aulas.”
Este artículo se publica en colaboración con MIT News. La publicación no implica el respaldo de las opiniones por parte del Foro Económico Mundial.
Para estar al día con la Agenda suscríbase a nuestro boletín semanal.
Autor: Abby Abazorius es responsable de noticias de MIT News.
Imagen: Jose Rosales, estudiante de la Westside Middle School de Winder, Georgia, responde a una pregunta de otro estudiante de la Charleswood Junior High School de Winnipeg, Manitoba, Canadá, a través de internet durante un proyecto de educación cooperativa con Canadá el 24 de enero de 2008. REUTERS/Tami Chappell
