Transformando la evaluación en aprendizaje mediante la identificación de brechas, retroalimentación oportuna y análisis de datos

La falta de datos sobre los estudiantes provoca una retroalimentación ineficiente

El Profesor Asociado Neil Rogers y el Vicedecano de Innovación Educativa, Matthew Johnson, asumieron la tarea de mejorar las evaluaciones en su institución. Habían oído hablar de Gradescope en una conferencia sobre enseñanza y aprendizaje en el verano de 2019 y se sintieron atraídos por la posibilidad de proporcionar una mejor retroalimentación a los estudiantes en menos tiempo. También estaban interesados en tener una mayor capacidad de seguimiento y análisis del rendimiento de los estudiantes para orientarlos sobre el material del curso y promover su permanencia en las carreras STEM (ciencia, tecnología, ingeniería y matemáticas).

Además, tuvieron la presión urgente de la pandemia, que provocó que todos los cursos pasaran a un formato virtual mientras los estudiantes eran enviados a casa. Era necesaria una intervención rápida para garantizar que los estudiantes siguieran obteniendo los conocimientos y valor de sus clases en un escenario y un entorno totalmente nuevos.

Tener información sobre el rendimiento de los estudiantes conduce a resultados académicos positivos

Gracias a la iniciativa de los profesores Rogers y Johnson, la institución pudo pilotear Gradescope en varios cursos de matemáticas e ingeniería eléctrica antes de que las clases fueran totalmente remotas. Pudieron compartir los beneficios en sus respectivas clases, donde abogaron por su uso. Los comentarios de otros docentes fueron rotundamente positivos y la escuela logró adaptarse, logrando que la herramienta respondiera a sus necesidades. Los estudiantes calificaron a Gradescope como "extremadamente fácil y eficaz"; señalaron, además, que las evaluaciones "tenían el mismo formato que antes de pasar a la educación a distancia" y apoyaron la expansión de su uso a otros cursos.

Los profesores Rogers y Johnson lograron su objetivo inicial de proporcionar una mejor retroalimentación a los estudiantes en menor tiempo. Comprobaron que el tiempo de entrega de las calificaciones es ahora mucho menor comparado con la calificación manual. En ocasiones, el ahorro de tiempo fue extraordinario, como lo pudo comprobar Johnson con su equipo de Cálculo Multivariable. Mientras que el primer examen fue corregido a mano en un día y medio, para el segundo tanto las calificaciones, la carga de las notas y las retroalimentaciones a los estudiantes fue completada antes de las 16:30 horas del mismo día. El profesor Johnson estima que ha ahorrado entre un 25% y un 35% de tiempo.

Así, decidieron utilizar el tiempo liberado para centrarse en el análisis de los datos de rendimiento de los estudiantes y en retroalimentación personalizada. En concreto, tenían curiosidad de identificar los problemas más relevantes de los estudiantes para 1) ayudarles a lograr mejoras individuales en cada área y 2) proporcionar una retroalimentación más rápida y personalizada sobre su rendimiento individual.

"Profundizando un poco más en ese problema, podemos ver en la Figura 2 cómo el 44% de los alumnos cometió uno de los tres errores principales. Cada uno de los estudiantes que cometió uno de esos errores recibió la información pertinente y detallada que se muestra a la izquierda. Dado el número de estudiantes matriculados en este curso (más de 500 por semestre), no hubiera sido posible proporcionar este tipo de información detallada a cada uno".

"La figura 3 muestra un gráfico radial similar a los que se entregaron a cada estudiante en la clase de matemáticas de la primavera de 2021. Los puntos azules/naranjas muestran el promedio de la clase y de cada estudiante, respectivamente, para cada uno de los temas asociados enumerados. Esta información permitió a los estudiantes identificar sus áreas de mayor debilidad en comparación con el resto de la clase, para que se enfoquen en estudiar ese material antes del final. Etiquetar cada pregunta en Gradescope con su lección asociada fue lo que permitió organizar los datos para crear estos gráficos radiales".

Además, los profesores señalaron que "esta mejora en la información que reciben los estudiantes sobre las preguntas de los exámenes y sobre su rendimiento en general fue uno de los factores que contribuyeron a reducir las tasas de abandono y desaprobación en Matemáticas 243. La tasa de abandono y reprobación disminuyó de 15% en los tres semestres anteriores a la implantación de Gradescope, al 8% en los tres semestres con Gradescope”.

Formando líderes de carácter a través de la retroalimentación y la reflexión

El enfoque basado en datos implementado por la institución para modernizar la evaluación e impulsar los resultados del aprendizaje de los estudiantes (minimizando al mismo tiempo las tasas de abandono) ha seguido creciendo dentro de su oferta académica. Además del departamento de Matemáticas, ahora lo utilizan regularmente los departamentos de Química e Ingeniería Astronáutica. Y aunque descubrieron que Gradescope proporciona una mayor eficiencia en las clases grandes, muchos docentes lo encuentran beneficioso también para grupos más pequeños.

“Puedes ser realmente bueno en lo que te propongas. El crecimiento está en ese ciclo de retroalimentación, en el proceso de retroalimentación. Si intentas algo y luego fracasas, pero obtienes retroalimentación en el camino, puedes corregir lo que hiciste mal, y luego lo intentas de nuevo y sigues mejorando. Eso es algo que Gradescope realmente logra al dar una retroalimentación de alta calidad”.

—Matthew Johnson, Deputy Associate Dean for Educational Innovation