En un estudio reciente liderado por investigadores de ETH Zurich y universidades asociadas, se llevó a cabo la comparación de tutores humanos y modelos de lenguaje avanzado (LLMs, por sus siglas en inglés) en el ámbito de tutorías escolares matemáticas. A través de una cuidada evaluación, se les pidió a tutores humanos que calificaran el desempeño de los LLMs frente a humanos reales en criterios como el compromiso, la empatía, el soporte y la concisión.
Los resultados de la investigación han sido reveladores: los tutores basados en LLMs demostraron un desempeño superior en todos los aspectos evaluados, destacando con notable ventaja en el área de la empatía, donde un 80% de los evaluadores prefirieron los LLMs sobre los humanos. Este hallazgo sugiere que, a través de interfaces de chat, los LLMs son capaces de conectarse de manera más efectiva con los estudiantes y ofrecer un soporte más sistemático, pese a la ausencia de un contacto presencial.
El estudio surgió en medio de una creciente incorporación de LLMs en sistemas de tutoría inteligentes y asistentes de aprendizaje. Estos sistemas están diseñados para trabajar como tutores automatizados, utilizando interacciones de texto para guiar a los estudiantes en sus procesos de aprendizaje y resolución de problemas. La capacidad de los LLMs para proporcionar instrucciones concisas y empatizar con las dificultades estudiantiles promete no solo mejorar la calidad de la enseñanza sino también aliviar las cargas superiores de los docentes humanos.
Con más de 210 pares de diálogos dialogados por LLMs y tutores humanos, los investigadores buscaron evaluar aquellos factores “latentes” en el proceso de aprendizaje que no habían sido abordados en estudios previos. Las evaluaciones respaldan el uso creciente de plataformas como ChatGPT ya que su potencial como herramienta educativa comienza a cristalizar, con mayor claridad en escenarios donde requieren altos niveles de personalización y paciencia pedagógica.
Conclusivamente, aunque algunos podrían argumentar que los humanos cuentan con ciertas ventajas, sobre todo en aspectos de interacción multi-modal y en la introducción de narrativas subjetivas, el uso de LLMs marca una mejora continua y significativa en las capacidades de tutoría que, más allá de incrementar la eficiencia del aprendizaje, facilitan un diálogo óptimo y acotado con el estudiante.