Este trabajo de investigación tiene como objetivo verificar si la evaluación es una ayuda y si ésta refuerza el proceso de trabajo cooperativo. La metodología utilizada es el estudio de casos y la muestra está compuesta por dos grupos de trabajo, formados cada uno por cuatro alumnos, de la asignatura Multimedia y Comunicación (MIC) de la Universidad Oberta de Catalunya (UOC). De la observación de los espacios de intercambio de cada grupo y del profesor, por un lado, y del análisis de la documentación académica por otro lado, se concluye que la evaluación continuada refuerza el trabajo en equipo y que la asignatura analizada promueve la adquisición de las competencias básicas para trabajar y estudiar en red a partir del desarrollo del proyecto virtual en equipo. Por estos dos motivos hacemos una única propuesta de mejora para optimizar el trabajo del docente y facilitar la orientación del alumnado: la utilización de la rúbrica como instrumento de evaluación.
MARC CONTEXTUAL
El trabajo colaborativo en red
La Sociedad de la Información ha provocado cambios con la irrupción de las TIC’s (Tecnologías de la Información y la Comunicación). En el ámbito educativo plantea nuevas necesidades y demandas (de formación, destrezas y perfiles), provocando nuevos entornos educativos como el caso de los Entornos Virtuales de Aprendizaje (EVA). Los EVA son entendidos como un sistema enmarcado en un proyecto educativo y basado en un modelo teórico, donde se facilita el acceso a la información y la comunicación en una plataforma pedagógico-tecnológica, en la cual se sitúan las contribuciones, se consultan las diferentes aportaciones de sus actores y se construye colectivamente el conocimiento.
Esta investigación se enmarca dentro del modelo constructivista, lo que implica la asunción del triángulo compuesto por alumn@-profesor/a-contenido (ver cuadro 1) como la unidad básica de análisis del proceso de enseñanza y aprendizaje (E/A), donde el alumno/a realiza un proceso de construcción del conocimiento, el profesor/a realiza un proceso de ayuda al alumnado y el contenido es el objeto de E/A. Esta afirmación implica la actividad “conjunta” o “inter-actividad” como factor explicativo fundamental del aprendizaje en estos contextos y de su calidad (Onrubia citando a Coll, 2005 ).
Cuadro1

Al situarse en un entorno donde se genera aprendizaje desde el trabajo cooperativo; entendiendo el trabajo cooperativo cuando el grupo de alumnos se dedican de forma coordinada a resolver juntos un problema o a realizar una actividad (Badia i col. citando a Dillembourg, 2006); se ha tenido en cuenta las diferentes etapas del proceso de trabajo en grupo (ver cuadro 2), que según el estudio realizado por Guitert y col (2003), tienen las siguientes características:
Creación: Es la etapa en la que los equipos de trabajo se van ubicando en el entorno virtual.
Consolidación: Esta etapa se basa en dos aspectos principales. El primero, el grupo empezará a crear vínculos tanto a nivel social como académico que les permitirá ir introduciéndose a una posterior dinámica de trabajo. El segundo, el grupo ha de organizarse, planificarse y distribuirse las tareas y asumir acuerdos y compromisos para llevar a cabo el trabajo.
Desarrollo: Esta es la etapa en la que es desarrolla la actividad académica prevista en cada asignatura.
Cierre: ?El grupo ha de cerrar el proceso que ha hecho en relación al trabajo y a la relación que se ha establecido entre los miembros. En este momento es importante que el grupo pueda hacer una valoración conjunta y global de toda la trayectoria que han tenido y de los resultados que han alcanzado. El consultor realiza la valoración final del proceso y del resultado de trabajo y el estudiante realiza una auto evaluación individual y una grupal.

Cuadro 2
Dentro de cada etapa intervienen elementos claves al largo del proceso:
comunicación e interacción: Se establecen unas pautas de comunicación e interacción que regulan los diferentes aspectos de organización del trabajo en grupo (como por ejemplo: tiempo de respuesta a un correo electrónico)
organización y planificación: aspectos muy importantes para el buen desarrollo del trabajo en equipo. El grupo ha de saber distribuirse las diferentes tareas y saber reconducir les decisiones, si fuese necesario, en caso de cambio de necesidades o situaciones del grupo (por ejemplo redistribución de tareas a causa del abandono de un integrante del grupo)
gestión e intercambio de la información: son los procesos que se utilizan para el intercambio de información (por ejemplo: acuerdos de utilización de ficheros)
rol del consultor/a
la evaluación
Centrándonos, tal y como indicamos en el título de la propuesta y la pregunta de la investigación, en la evaluación.
La evaluación continuada en red
En referencia a la evaluación, partimos de la afirmación que ésta es una ayuda que consiste en ir examinando una situación para destacar las desviaciones de un punto de referencia dado, a fin de saber donde aplicar la acción correctiva (Guitert y col. citando a Germel, 2003). La finalidad es la de conocer para poder decidir y mejorar la práctica educativa, objetivando la valoración. Existen tres tipos de evaluación:
Diagnóstica o inicial
Continuada
Formativa o final
Depende de si evaluamos de forma cuantitativa o cualitativa y de quien hace la evaluación, se dispone de diferentes instrumentos de recogida de información, como cuestionarios, encuestas, proyectos, rúbricas, portafolio, entre otras.
Las investigaciones apuntan que la colaboración en línea va ligada directamente a su evaluación (Swan, 2006) , ya que parte de la dificultad de desarrollar actividades colaborativas es que éstas requieren una revisión de las técnicas tradicionales de evaluación: ¿Cómo evaluamos la participación? Y las tareas desarrolladas, ¿han de tener todas el mismo grado de puntuación? Swan (2006) apunta tres cuestiones a analizar que centran nuestro análisis:
Variedad y clases de objetivos competenciales
Complejidad para determinar los comportamientos individuales y grupales
Papel de la participación en la evaluación.
ANÁLISIS DE LA EXPERIENCIA
El objetivo de esta investigación es verificar si la evaluación es una ayuda y si ésta refuerza el proceso de trabajo cooperativo.
En esta investigación se emplea estudio de caso. Para tal fin se utiliza dos técnicas de recogida de datos:
La observación de los espacios virtuales comunes de los grupos
la documentación académica: plan docente, actividades.
El caso se analiza a partir de la triangulación de los datos cuantitativos y cualitativos sobre la base de unas categorías de análisis preestablecidas por el grupo TACEV (Trabajo y Aprendizaje Colaborativo en Entornos Virtuales). Esta triangulación se caracteriza por la evolución continua, dinámica e interrelacionada entre la colección y fuentes de análisis y las sesiones de análisis entre los miembros del equipo de investigación (Guitert y col., 2003)
La muestra está compuesta por dos grupos de trabajo, formados cada uno por cuatro alumnas de la asignatura Multimedia y Comunicación (MIC) de la Universidad Oberta de Catalunya (UOC). Esta asignatura es de carácter transversal y obligatoria de los estudios de Documentación y se desarrolla a partir del trabajo en equipo en un entorno virtual.
La propuesta docente de la asignatura es el trabajo por proyectos, la finalidad del cual es crear un proyecto por etapas, a través de las actividades colaborativas y asincrónicas:
Etapa de creación de grupos:
La etapa de creación de grupos se desarrolla dentro de la primera Práctica de Evaluación Continuada (PAC1). Ésta es de carácter individual, tiene una duración de 10 días y consiste en participar en un debate sobre las TIC y en segundo lugar, crear un grupo a partir de los intereses y disponibilidades expresadas en el fórum.
Etapa de consolidación:
Esta etapa se desarrolla con las prácticas 2 (PAC2) y 3 (PAC3).
La PAC2 es la primera que se organiza en grupo y consiste en participar en la creación de un grupo de trabajo y establecimiento de los primeros acuerdos:
la elección y concreción del tema del proyecto final
la elaboración del primer índice del proyecto final
la planificación y distribución de las tareas a seguir
con la finalidad de orientar la organización y elaboración del proyecto final.
La PAC3 consiste en la realización en grupo de una base de datos completa a partir de la búsqueda voluntaria de un ámbito temático.
Etapas de desarrollo y Cierre:
Estas dos etapas las presentamos juntas porque la práctica final incluye la elaboración de la evaluación grupal y la evaluación individual. Esta práctica, tal y como indica su nombre constituye el último trabajo y tal como se muestra en la presentación de la asignatura representa el 50 % de la nota final. Consta de tres partes:
Informe final sobre el proyecto virtual
Síntesis sobre el proyecto virtual (presentación en PowerPoint del informe final)
Reflexión grupal y auto evaluación individual.
Para verificar o no el objetivo de la investigación (la evaluación es una ayuda y si ésta refuerza el proceso de trabajo cooperativo) hemos analizado el proceso de trabajo de dos grupos de la asignatura MIC, a través de la documentación docente (Plan docente, PACs, las valoraciones del profesor/a y las auto- valoraciones) y observando los espacios (aula general, fórum general, debate virtual, fórum disponibilidad y fórum debates grupos). Una vez hemos extraído los datos y analizados podemos afirmar que:
La asignatura respeta las características y especificidad de cada etapa del proceso de aprendizaje y trabajo cooperativo con el diseño de unas actividades adecuadas en cada momento del proceso:
- En la etapa de creación se programa una presentación personal al fórum del aula, el debate sobre un caso en relación al trabajo en equipo en el entorno virtual y las valoraciones sobre algunas indicaciones iniciales en relación al trabajo grupal. El profesor acepta que los estudiantes le hagan una propuesta de grupo y anima a los estudiantes a que se vayan agrupando y conociendo.
- En la etapa de consolidación se programa la elaboración de un documento en equipo que establece los primeros acuerdos grupales y el profesor orienta la organización del equipo y de la actividad
- En la etapa de desarrollo se realiza el proyecto de la asignatura y el tutor asesora y orienta
- La documentación analizada (plan docente y PACs) y el rol del tutor facilitan el proceso de trabajo en grupo, porqué orientan la organización y planificación de las tareas grupales
Los grupos han sabido reorganizarse y redistribuir las tareas, cuando ha sido necesario: Uno de los grupos se reorganizó rápidamente cuando una de sus integrantes abandonó los estudios por cuestiones personales y se ayudaron con las dificultades de utilización de programas poco utilizados
La actitud de los componentes de cada grupo siempre ha sido comprometida, transparente, constante y de respeto y ayuda al compañero/a, actitudes que según Guitert, 2003, facilitan el trabajo en grupo
El entorno virtual ha facilitado el intercambio y gestión de la información, ya que no han aparecido incidencias informáticas (un test que no se abría fue solventado rápidamente y comunicado por el tutor)
Respecto a las valoraciones grupales, autovaloraciones y valoraciones del profesorado son muy positivas (se centran entre la A y la B, cuando ésta primera es la máxima calificación y la D la más baja), aunque muestran diferencias de percepción en uno de los grupos
La evaluación continuada ha sido un factor importante a la hora de conducir y reconducir el proceso de trabajo en equipo. Una de las componentes de uno de los grupos no estuvo de acuerdo con la valoración realizada por el profesor y el hecho de poder argumentarla, hizo entender las razones y su grupo recibió indicaciones para la optimización de la presentación del proyecto final.
Siguiendo les indicaciones de Swan (2006) nos hemos centrado en el análisis de los objetivos y los criterios de evaluación, cruzando los datos con los indicadores de evaluación, que se muestran en las hojas de valoración del profesor, y de este cruce surge una tabla donde se muestra la correlación entre objetivo competencial, criterio evaluativo y indicador de evaluación. De esta tabla se establecen tres cuestiones a analizar:
Variedad y clases de objetivos
Complejidad de determinar los comportamientos individuales y grupales
Papel de la participación en la evaluación


Tal y como se ha podido observar el papel de la participación es muy importante en la evaluación, ya que es un indicador presente en todas las PACs. Respecto a las diferentes clases de objetivos, encontramos aquellos que se refieren al contenido de la actividad y aquellos que se refieren al proceso de trabajo en equipo. Observamos que el desarrollo de los indicadores de evaluación de contenido son más concretos, factor que facilita la evaluación realizada por el tutor y también clarifica al alumnado los criterios, por ejemplo:
6. La coherencia y adecuación del contenido y formato del documento presentado:
6.1. Combinación de diferentes recursos tipográficos (negrita, cursiva...) según la información que se quiere destacar y el estilo del texto.
6.2. Presencia adecuada de encabezamientos, pies de página, paginación, opciones de numeración y viñetas para destacar alguna relación de información en forma de lista, imágenes, hipervínculos.
Los indicadores de evaluación de procesos de trabajo en equipo, como la participación, actitudes, la gestión de la información, la planificación, son aspectos más complejos. Es por este motivo que creemos que sería interesante, para optimizar y sobretodo facilitar la tarea del docente , utilizar como instrumento de evaluación las rúbricas.
Las actividades de evaluación han de ajustarse al máximo a los objetivos de aprendizaje predeterminados, pero también a los que puedan surgir durante el proceso, así pues se necesita un sistema flexible y de ágil utilización, con una clara taxonomía, que permitirá una adecuación a las necesidades e intereses de los estudiantes (Guardia i Sangrà, 2004). Las rúbricas son un documento que delimita lo que es evaluable y lo concreta en niveles de eficiencia, es un instrumento útil, porque supera el detalle, obliga a analizar los componentes didácticos y resulta más comprensible por el alumnado.
Para finalizar confirmamos que la evaluación continuada refuerza el trabajo en equipo y que la asignatura analizada promueve la adquisición de las competencias básicas para trabajar y estudiar en red a partir del desarrollo del proyecto virtual en equipo. Por estos dos motivos, y tal y como hemos comentado con anterioridad, hacemos una única propuesta de mejora para optimizar la tarea docente y facilitar la orientación del alumnado: la utilización de la rúbrica como instrumento de evaluación.
BADIA, A; GARCÍA, C (2006). Incorporación de las TIC en la enseñanza y el aprendizaje basados en la elaboración colaborativa de proyectos. En: Antoni BADIA (coord.). Enseñanza y aprendizaje con TIC en la educación superior [monográfico en línea]. Revista de Universidad y Sociedad del Conocimiento (RUSC). Vol. 3, n.° 2. UOC. [artículo en linea, fecha de consulta: 30/10/06]. <http://www.uoc.edu/rusc/3/2/esp/index.html >
COLL, C; MAURI, T; ONRUBIA, J(2006). Análisis y resolución de casos-problema mediante el aprendizaje colaborativo. En: Antoni BADIA (coord.). Enseñanza y aprendizaje con TIC en la educación superior [monográfico en línea]. Revista de Universidad y Sociedad del Conocimiento (RUSC). Vol. 3, n.° 2. UOC. [artículo en linea, fecha de consulta: 30/10/06]. <http://www.uoc.edu/rusc/3/2/esp/index.html >
CURTIS, D.; LAWSON M.; (February 2001) “Exploring collaborative online learning”. Journal of asynchronous Learning Network (JALN) Volume 5, Issue 1
GARRISON, D.R.(February 2006) “Online collaboration principles”. Journal of asynchronous Learning Network (JALN). Volume 10, Issue 1
GUITERT, M; GIMÉNEZ, F; LLORET, T [et al.] (2003). El procés de treball i d'aprenentatge en equip en un entorn virtual a partir de l'anàlisi d'experiències de la UOC [document de projecte en linea]. IN3 : UOC. (Treballs de doctorat; DP03-001). [Fecha de consulta: 25/10/06] <http://www.uoc.edu/in3/dt/20299/index.html >
GUITERT, M, GIMENEZ (ed.) (1999) Aprendizaje cooperativo en entornos virtuales: el caso de la UOC de la Universitat Oberta de Catalunya. Ahciet Tele Educacion' 99
GUITERT, M; GIMÉNEZ, F.; LLORET, T.; ROMEU, T. Trabajo en equipo en un entorno virtual: reflexión de una experiencia en el curso de Doctorado de la UOC. Internacional conference on Information and Comunication Technologies in Education (ICTE), 13-16 noviembre de 2002. Badajoz, España.
GUITERT, M., GIMÉNEZ, F. El treball cooperatiu en entorns virtuals: el cas de la UOC. En Jornades Multimèdia educatiu, (Barcelona, 5,6,7 junio 1999).
GUITERT, M.; GIMÉNEZ, F.; LLORET, T. El aprendizaje y el trabajo cooperativo en la asignatura de Multimedia y Comunicación de la UOC. Tecnologia de la Información y la comunicación y participación ciudadana: una visión crítica, Junio de 2002, Barcelona.
GUITERT M., ROMEU T., GIMÉNEZ, F., LLORET, T, Cooperative learning and working in a virtual setting, a key competence in the Bologna process: the case of the UOC . Eden, Helsinki , Helsinki, 20 junio.
GUITERT, MONTSE; ROMEU, TERESA; PÉREZ-MATEO, MARIA (2007). “Competencias TIC y trabajo en equipo en entornos virtuales“ [artículo en línea]. Revista de Universidad y Sociedad del Conocimiento (RUSC). Vol. 4, n.° 1. UOC. [Fecha de consulta: 02/05/07]. <http://www.uoc.edu/rusc/4/1/dt/esp/guitert_romeu_perez-mateo.pdf >
GUARDIA, L., SANGRÀ, A.(2004), Diseño instruccional y objectos de aprendizaje; hacia un modelo para el diseño de actividades de evaluación del aprendizaje on-line. UOC. [Fecha de consulta: 25/03/07]
<http://spdece.uah.es/papers/Guardia_Final.pdf >
LEWIS, R. (2002). Grups de treball en comunitats virtuals. Workshop FREREF (Traváil Coopératif et NTIC en environments de formation. Etude des cas de trois régions de la FREREF", Julio de 2001. Página Web de la UOC. <http://www.uoc.edu/web/esp/art/uoc/lewis0102/lewis0102.html >
MURPHY, K. L., EPPS, M. L., & HARVELL, T. J. (1999, Spring). Proaction vs. Reaction: Interaction and Group Dynamics in Telecommunications Courses. The Texas Technology Connection: Journal of the Texas Association for Educational Technology Proceedings Edition, 6(1), 32-34.
ONRUBIA, J. (2005, Febrero). “Aprender y enseñar en entornos virtuales: actividad conjunta, ayuda pedagógica y construcción del conocimiento”. RED. Revista de Educación a Distancia, número monográfico II. [Fecha de consulta: 9 de Febrero de 2005] <http://www.um.es/ead/red/M2/>
SHEA, P. (February 2006)”A Study of Students’ Sense of Learning Community in Online Environments”. Journal of asynchronous Learning Network (JALN). del Volume 10, Issue 1
SWAN, K. (February 2006)”Online collaboration: introduction to the special issue” Journal of asynchronous Learning Network (JALN). del Volume 10, Issue 1
SWAN, K.; SHEN , J. (February 2006) “Assessment and collaboration in online learning”. Journal of asynchronous Learning Network (JALN). del Volume 10, Issue 1
