Collaborative tests

Se presenta un sistema de evaluación en grupo construido sobre el entorno de evaluación automática Siette. La aplicación propone el mismo conjunto de preguntas a un grupo de alumnos. Cada alumno del grupo
responde a una misma pregunta dos veces. la primera respuesta se hace de forma individual, sin comunicar con los compañeros y sin saber la respuesta que ellos han dado. Terminada esta fase, el sistema presenta una herramienta mediante la cual los miembros del grupo pueden ver las respuestas individuales de los demás miembros, discutir sobre ellas y posiblemente llegar a un consenso. Finalmente cada uno de los miembros del grupo debe proporcional una respuesta final, que puede o no ser la misma que se dio inicialmente y que puede o no coincidir con la respuesta de los demás miembros del grupo. De esta forma la evaluación y la colaboración se entrelazan. Al final de la sesión cada alumno obtiene dos calificaciones: la media de las respuestas iniciales, y la media de las repuestas finales a cada pregunta. Por el momento se han realizado tres conjuntos de experimentos: (1) un conjunto de experimentos dedicados a afinar la funcionalidad de la aplicación y la usabilidad a partir de encuestas a los usuarios; (2) un segundo conjunto de experimentos para medir la influencia de la colaboración en los resultados; y (3) un conjunto de experimentos para medir el aprendizaje a corto plazo de los individuos motivada por la ealización de esta actividad. En este articulo se estudia la influencia de la colaboración con otros miembros del grupo en el aprendizaje individual. Los datos obtenidos confirman resultados anteriores y proporcionan nuevas evidencias en estos sentidos: (1) Los resultados mejoran notablemente con solo acceder a las respuestas de otros miembros. (2) Los grupos tienden a alcanzar un consenso en la mayoría de los casos. (3) Alcanzar un consenso esta directamente y altamente correlacionado con la respuesta correcta. Aun mas, los resultados obtenidos indican que la mayoría de los alumnos realmente aprenden al realizar esta actividad. Los alumnos con un mayor nivel de conocimiento mejoran debido a la reflexión que deben hacer para explicar su respuesta, mientras que los alumnos con menor nivel de conocimientos requieren que en el grupo haya al menos un alumno con alto nivel para que sean capaces de sacar provecho de esta actividad.

R. Conejo is a Full Professor (Catedrático Universidad) at Universidad de Malaga. He is the head of the Group “Investigación y Aplicaciones en Inteligencia Artificial” and his research interests include Inteligencia Artificial en Ingenieria Civil, Sistemas multiagente and Sistemas Tutores Inteligentes