Cómo un medidor de conversación con IA puede incitar a los profesores a hablar menos y a los estudiantes a hablar más

Cómo un medidor de conversación con IA puede incitar a los profesores a hablar menos y a los estudiantes a hablar más

Cuando sólo los tutores veían el medidor de conversación, tendían a reducir sus explicaciones y hablar mucho menos. Pero a pesar de sus esfuerzos por incitar a sus alumnos a hablar más, los estudiantes aumentaron su conversación sólo en un 7%.

Cuando a los estudiantes también se les mostró el medidor de conversación, la dinámica cambió. Los estudiantes aumentaron su conversación en un 18%. Especialmente los introvertidos empezaron a hablar, según entrevistas con los tutores.

Ejemplo del medidor de conversación que se muestra a los tutores cada 20 minutos durante la sesión de tutoría. (Fuente: Figura 2 de Demszky et. al. «¿La retroalimentación sobre el tiempo de conversación aumenta la participación de los estudiantes? Evidencia de un ensayo controlado aleatorio en una plataforma de tutoría de matemáticas»).

Los resultados muestran cómo la enseñanza y el aprendizaje son una vía de doble sentido. No se trata sólo de entrenar a los profesores para que sean mejores en su oficio. También necesitamos entrenar a los estudiantes para que aprendan mejor.

«No es toda responsabilidad del profesor cambiar el comportamiento de los estudiantes», afirmó Dorottya Demszky, profesora asistente de ciencia de datos educativos en la Universidad de Stanford y autora principal del estudio. «Creo que es genuinamente súper transformador pensar en el estudiante también como parte de ello».

El estudio aún no se ha publicado en una revista revisada por pares y actualmente es un borrador, “¿La retroalimentación sobre el tiempo de conversación aumenta la participación de los estudiantes? Evidencia de un ensayo controlado aleatorio en una plataforma de tutoría de matemáticas”, por lo que aún puede revisarse. Está previsto que se presente en la conferencia anual de marzo de 2024 de la Sociedad de análisis del aprendizaje en Kioto, Japón.

Al analizar los archivos de sonido, Demszky notó que los estudiantes tendían a trabajar en sus problemas de práctica con el tutor de manera más silenciosa tanto en el grupo de control como en el de solo tutor. Pero los estudiantes comenzaron a verbalizar sus pasos en voz alta una vez que vieron el medidor de conversación. Los estudiantes estaban llenando más silencios.

En entrevistas con los investigadores, los estudiantes dijeron que el medidor hacía que la sesión de tutoría pareciera un juego. Un estudiante dijo: “Es como una competencia. Entonces, si hablas más, creo que lo haces mejor”. Otro señaló: “Cuando veo que es rojo, me pongo un poco triste y luego sigo hablando, luego lo veo amarillo y luego sigo hablando más. Luego lo veo verde y entonces estoy súper feliz”.

Algunos estudiantes encontraron que el medidor les distraía. “Puede resultar molesto porque a veces, cuando intento analizar una pregunta, simplemente aparece y luego, a veces, no puedo deshacerme de ella”, dijo uno.

Los tutores también tuvieron reacciones encontradas. Para muchos, el medidor de conversación fue un recordatorio útil de no ser demasiado prolijos en sus explicaciones y de hacer preguntas más inquisitivas y abiertas. Algunos tutores dijeron que se sentían presionados a alcanzar una proporción de 50-50 y que, de forma antinatural, se abstenían de hablar. Un tutor señaló que no siempre es deseable que un estudiante hable tanto. Cuando se presenta un concepto nuevo o el estudiante está realmente perdido y tiene dificultades, puede ser mejor que el maestro hable más.

Sorprendentemente, los niños no se limitaron a llenar el aire con charlas tontas para mover el medidor. El equipo de Demszky analizó las transcripciones en un subconjunto de las sesiones de tutoría y descubrió que los estudiantes hablaban genuinamente sobre su trabajo de matemáticas y expresaban su razonamiento. El uso de términos matemáticos aumentó un 42%.

Desafortunadamente, el diseño del estudio presenta varios inconvenientes. No sabemos si el rendimiento en matemáticas de los estudiantes mejoró con el medidor de conversación. El problema era que estudiantes de diferentes edades aprendían cosas diferentes en diferentes grados y en diferentes países y no había una prueba única y estandarizada para aplicarlas todas.

Otro factor de confusión es que los estudiantes que vieron el medidor de conversación también recibieron sesiones de información adicionales y hojas de trabajo sobre los beneficios de hablar más. Así que no podemos decir a partir de este experimento si el medidor de conversación marcó la diferencia o si la información sobre el valor de hablar en voz alta habría sido suficiente para que hablaran más.

Extractos de sesiones de tutoría transcritas en las que los estudiantes hablan sobre el medidor de conversación. (Fuente: Tabla 4 de Demszky et. al. “¿La retroalimentación sobre el tiempo de conversación aumenta la participación de los estudiantes? Evidencia de un ensayo controlado aleatorio en una plataforma de tutoría de matemáticas”).

Demszky está trabajando en el desarrollo de una aplicación de medidor de conversación que pueda usarse en las aulas tradicionales para fomentar una mayor participación de los estudiantes. Ella espera que los maestros compartan los resultados del medidor de conversación con sus estudiantes. “Creo que se podría involucrar un poco más a los estudiantes: ‘Parece que algunos de ustedes no participaban. ¿O parece que mis preguntas eran muy cerradas? ¿Cómo podemos trabajar juntos en esto?’”

Pero dijo que está actuando con cuidado porque es consciente de que las aplicaciones de medición pueden tener consecuencias no deseadas. Quiere dar retroalimentación no sólo sobre cuánto hablan los estudiantes sino también sobre la calidad de lo que están hablando. Y el procesamiento del lenguaje natural todavía tiene problemas con el inglés con acento extranjero y ruido de fondo. Más allá de los obstáculos tecnológicos, también existen los psicológicos.

“No todo el mundo quiere un Fitbit o una herramienta que les proporcione métricas y comentarios”, reconoce Demszky.

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

Scroll al inicio