CÓD.A05-S04-04 ONLINE

APLICACIÓN EN EL NIVEL UNIVERSITARIO DEL PROGRAMA INFORMÁTICO “GALLITO-API” PARA LA CORRECCIÓN Y EVALUACIÓN DE BREVES EJERCICIOS ESCRITOS

Introducción

En este trabajo presentamos un análisis global de una serie de proyectos de innovación docente realizados en el marco del Programa Innova-Docentia de la Universidad Complutense de Madrid entre 2016 y 2021. El equipo de investigación ha estado integrado por profesorado del Departamento de Antropología Social y Psicología Social y por estudiantes en prácticas pertenecientes a distintos Grados de la Facultad de Ciencias Políticas y Sociología.

El equipo ha trabajado con el programa informático “Gallito-Api” para la corrección y evaluación de breves ejercicios escritos, elaborado por profesores del Departamento de Psicología Evolutiva de la UNED, aplicándolo, analizando los resultados obtenidos y proponiendo mejoras.

Objetivos

Objetivo General

Analizar y desarrollar el programa informático con el fin de volverlo aplicable en el nivel universitario en el ámbito de las ciencias sociales.

Objetivos Específicos

  1. Análisis del funcionamiento del programa, con vistas a identificar con mayor precisión sus criterios de valoración de los ejercicios en cuanto al contenido y al estilo.
  2. Partiendo de este conocimiento, promover una mejora en distintos aspectos del programa.

Metodología

El programa utiliza la técnica de procesamiento del lenguaje conocida como Latent Semantic Analysis, mediante la cual se generan árboles de palabras correlacionadas entre sí. En nuestro caso, permite calibrar en qué medida un ejercicio escrito recoge los contenidos temáticos requeridos.

El programa construye distintos espacios semánticos a partir de diversos corpus integrados por materiales escritos acerca de un determinado tema, a los que se añaden además extensos listados de palabras, con fines orientativos. Cada ejercicio específico se remite a un espacio semántico particular. Su elaboración requiere asimismo de una “regla de oro”, o respuesta modélica a una pregunta, y de una serie de cadenas de descriptores, es decir de palabras claves relacionadas con las distintas ideas centrales que deben desarrollarse en los ejercicios escritos.

Se ha elaborado un conjunto de ejercicios que han ido siendo aplicados en distintos grupos de clase impartidos por el profesorado del equipo. Los estudiantes que han participado voluntariamente en la experiencia han recibido incrementos en sus calificaciones finales. El análisis de los resultados ha brindado ya orientaciones para ampliar los corpus y listados de palabras y reformar las reglas de oro y las cadenas de descriptores.

Discusión

El principal problema inicial consistió en las calificaciones extremadamente bajas que otorgaba el programa. Este problema ha ido resolviéndose progresivamente.

No obstante, todavía no se comprende bien el modo en que opera la aplicación. Actualmente estamos trabajando cuestiones como el orden expositivo global, los encadenamientos entre frases y la valoración de sinónimos de los términos clave. A partir de estos análisis se propondrán ulteriores mejoras.

Conclusión

Aunque todavía queda mucho por hacer, se espera disponer dentro de unos años de una herramienta capaz de corregir adecuadamente ejercicios escritos, así como de entrenar para una buena escritura al alumnado con más carencias en este aspecto.

Palabras clave

Análisis Semántico Evaluación Online Innovación Docente

Ponencia Online

Documentación de apoyo a la presentación ONLINE de la ponencia

Ver el video en youtube

Documento Complementario de Apoyo
Descargar INNDOCpowepoint-revisado.pdf


Firmantes

Los autores de la ponencia

profile avatar

Juan Ignacio Castien Maestro

Ver Perfil

profile avatar

Cristina Cuenca García

Ver Perfil

profile avatar

Anna Zlobina Kuzminá

Ver Perfil


Comentarios deshabilitados

Los comentarios están deshabilitados, se habilitarán días antes del congreso. Recuerde que debe estar conectado para poder comentar.