La rubrica como instrumento pedagogico

- 141 -

Pixel-Bit. Revista de Medios y Educación

LA RÚBRICA COMO INSTRUMENTO PEDAGÓGICO PARA LATUTORIZACIÓN Y EVALUACIÓN DE LOS APRENDIZAJES EN EL

FORO ONLINE EN EDUCACIÓN SUPERIOR

Juan Jesús Torres [email protected]

Víctor Hugo Perera Rodrí[email protected]

Universidad de Sevilla (España)

Presentamos una herramienta para tutorizar y evaluar el trabajo en los foros online (o herramientasasincrónicas) en la formación universitaria. Ante la falta de instrumentos didácticos para tal fin, nuestrapropuesta es una rúbrica, denominada RETAF, que puede ser aplicada a cualquier área científica. Esteinstrumento puede aportar una mejora de la calidad del proceso de enseñanza-aprendizaje: ayudando alestudiante a comprender cuáles son las expectativas del profesor respecto a la actividad formativapropuesta; y facilitando el logro de sus aprendizajes tomando la RETAF como guía de procedimiento.Palabras clave: foros online, rúbrica, tutorización universitaria, evaluación auténtica en educaciónsuperior.

We offer a tool for tutoring and assessing work on higher education online forums. As we currently lackdidactic instruments for this purpose, we propose a rubric, denominated RATLF, which can be applied toany scientific area. The main conclusion is that the rubric can improve the quality of the teaching-learningprocess. This rubric can help students understand the professor's expectations regarding the designedformative activity. Also, students' learning achievement can be facilitated by using RATLF as a proceduralguide.Keywords: online discussion board, rubric, university tutoring, authentic assessment in higher education.

Nº 36 Enero 2010 pp.141 - 149

1. Introducción

En los últimos años, el uso de las TIC hasupuesto cambios importantes en lasprácticas educativas. Estamos dejando atrásla etapa de resistencia psicológica en la quelos docentes consiguen superar las barrerastécnicas y pedagógicas para adentrarnosahora en la etapa del compromiso por mejorarlas prácticas, y con ello la actividad deenseñanza en estos contextos emergentes deformación.

Esta nueva etapa trae consigo algunosinterrogantes que nos preocupan y queparecen encontrar en la actividad de

evaluación y tutorización su campo derespuestas: ¿cuándo debemos considerar queuna práctica educativa es exitosa?, ¿cómopodemos mejorar la actividad de aprendizajedel alumnado?, ¿de qué recursos disponemospara evaluar la actividad formativa? Éstas yotras cuestiones han guiado nuestropropósito por mejorar la formación en entornosde comunicación asincrónica en e-Learning.

La revisión de la literatura en este campo deestudio nos provee de innumerables ydiversas experiencias de trabajo. Del mismomodo, comprobamos que son escasas lasiniciativas que han intentado comprender yvalorar las prácticas que se desarrollan. Entre

- 142 -

Torres, J. J. y Perera, V. H.

las preocupaciones que siente el docente, esnotable el interés por optimizar las situacionesde aprendizaje. No obstante, los recursosexistentes para evaluar las prácticaseducativas son difícilmente adaptables asituaciones específicas de formación.

Actualmente, la formación a través deInternet está necesitando instrumentos queayuden a evaluar y mejorar las prácticas eneste ámbito. Dentro del acervo de utilitariospara este fin, la rúbrica se está convirtiendoen una de las respuestas a esta falta derecursos, por su fácil diseño y manejo, y porlos efectos que tiene sobre la calidad de losprocesos educativos.

En este artículo proponemos una rúbrica,denominada RETAF (Rúbrica para laEvaluación y Tutorización del Aprendizajeen el Foro), que servirá para evaluar distintastareas a desarrollar en los foros de discusiónutilizados en e-Learning y blended-Learning.Para su proceso de elaboración, nos hemosbasado en el método conocido comoauthentic assessment. En nuestro caso, estemétodo ha supuesto que consideremosnuestras experiencias reales sobre losprocesos de trabajo en el campo que queremosevaluar.

2. Marco teórico

La rúbrica es un instrumento de evaluaciónbasado en una escala cuantitativa y/ocualitativa asociada a unos criteriospreestablecidos que miden las acciones delalumnado sobre los aspectos de la tarea oactividad que serán evaluados. Básicamente,existen dos grupos: las holísticas, que tratande evaluar el aprendizaje o competencia desdeuna visión más global, y las analíticas, que secentran en algún área concreta de aprendizaje.Además, nos permite diseñarla para tareasamplias o específicas.

En el informe final del estudio E-Learning:metaanálisis de investigaciones y resultadosalcanzados, dirigido por Cabero (2008), serecogen diversas variables críticas de e-Learning a partir de la revisión de revistas ytesis doctorales sobre la temática. Seconsidera que la evaluación debe combinarlos aspectos cuantitativos (por ejemplo, elnúmero de intervenciones que realiza lapersona en un foro, la cantidad de trabajosrealizados, y cantidad de los trabajos que ensu momento va realizando, el tiempo derespuesta, etc.) y cualitativos (por ejemplo, lacalidad de los trabajos realizados, laprofundización, la exposición de ideas, laestructura y organización de la información,la temática de sus participaciones, etc.); y seresalta la importancia de que los objetivos deaprendizaje a lograr por el alumnado seanexplícitos y conocidos con antelación a laacción formativa.

Diversos autores (Mertler, 2001; Roblyer yWiencke, 2003) coinciden en definir la rúbricacomo una herramienta versátil que puedeutilizarse de forma muy diferente para evaluary tutorizar los trabajos de los estudiantes. Poruna parte, provee al alumno de un referenteque proporciona un feedback relativo a cómomejorar su trabajo. Por otra, proporciona alprofesor la posibilidad de manifestar susexpectativas sobre los objetivos deaprendizaje fijados.

Por su parte, Moskal (2000) expresa supreocupación por conocer las áreas yactividades sobre las que se ha empleado larúbrica. Con este fin, revisa diversos trabajosen los que trata de ubicar el uso de laevaluación con esta herramienta. Concluyeque el empleo de la rúbrica no depende deltema sino del propósito de la evaluación.

Roblyer y Wiencke (2004) han evaluado elgrado y calidad de la interacción en cursosonline empleando una rúbrica. Identificaron

- 143 -


cinco elementos que contribuyen a lainteracción: diseño de construcción socialpara la interacción, diseño instruccional parala interacción, interactividad de los recursostecnológicos, compromiso del estudiante ycompromiso del profesor. Entienden que larúbrica es un instrumento válido y fiable paramedir estos aspectos de la interacción y puedeser utilizada para animar la interacción entreprofesores y alumnos. Su estudio concluyeque la interacción con la tecnología es menosimportante que el compromiso de profesoresy alumnos.

De otra parte, la interacción asincrónica esun factor que facilita los procesos deaprendizaje. Como mantienen Martínez yBriones (2007), el foro es un espacio conmúltiples posibilidades que favorece laconstrucción social de significados a travésde formas de interacción y colaboración.Cataldi y Cabero (2006) también obtuvieronresultados positivos al estudiar el aprendizajecooperativo y la resolución de problemas engrupos mediante foros y chats conestudiantes argentinos de Ingeniería, desdelos presupuestos del aprendizaje basado enproblemas (ABP). Encontraron que lacolaboración con el uso de la tecnología estáfacilitando el conocimiento compartido, y eldesarrollo de destrezas en la resolución grupalde problemas. Además, se ha comprobado queuna mayor cantidad de participación en el forono significa que exista una mayor interacción(Perera, 2007) y, en consecuencia, un mejoraprendizaje. Esto debemos analizarlo desdeotras perspectivas distintas a la cuantificación,que pueda llevarnos a nuevas conclusiones.En este sentido, la rúbrica puede arrojar luzpara entender cómo aprende el estudiante yqué mecanismos se desarrollan durante latutorización.

El estudio de Pérez Lorido (2007) conprofesorado de la Universidade da Coruña

sobre la puesta en marcha de sus asignaturasen entornos virtuales, nos muestra que aúnnos queda mucho por trabajar para que estasprácticas evaluativas sean una realidadinstitucionalizada. Se va a necesitar tiempopara que las universidades tradicionalmentepresenciales lleven adelante procesos e-Learning o blended-learning de calidad queconsoliden el cambio hacia otra forma deenseñar y aprender en la Universidad. Lasrespuestas del profesorado del estudio aludíana la falta de experiencia previa, a la insuficienteprevisión institucional, al pocoreconocimiento a la labor docente en entornosvirtuales o a la dificultad para compatibilizardocencia e investigación presenciales con laenseñanza online, como algunos factoresimportantes que están influyendo en el menoro lento desarrollo de procesos online en laactualidad.

3. La rúbrica como herramienta detutorización y evaluación del aprendizaje:construcción de la RETAF

La rúbrica que proponemos la denominamosRETAF (Rúbrica para la Evaluación yTutorización del Aprendizaje en el Foro).Para su elaboración y diseño, se han seguidodiversas fases. En primer lugar, se parte de laidentificación de aquellas competencias quese esperan que el alumnado trabaje. Dichascompetencias van asociadas a distintoselementos que integran la tarea sobre la quetrabajará. Sobre estos elementos sedeterminan los criterios de evaluación queconectarán con las competencias que debenadquirir los estudiantes para las actividadespropuestas. Por último, se toma una escalanominal, a la que se adjudican valoresdiferentes, que se utilizan para clasificar ymedir los criterios. Todo esto permite definir ycomprender los conceptos que van a ser

- 144 -


evaluados.La rúbrica propuesta se compone de cuatro

categorías: aspectos formales, participaciónen el foro, análisis de las aportaciones yevidencias de aprendizaje. Cada una de estascategorías consta de varios criterios que seránvalorados desde una escala nominal (A = muybien, B = bien, C = apto y D = no apto), que, asu vez, puede ser cuantificada sobre unaescala de 10 puntos. Para obtener lapuntuación se debe multiplicar cada letraasignada (A, B, C o D) a cada criterio por lasiguiente escala numérica: 1, 0’75, 0’50 y 0,

respectivamente. La letra y/o puntuacióncorrespondiente se escribirá en la columna‘Nota’ de la rúbrica. A cada ítem lecorresponde una nota máxima proporcionalsobre el total del apartado (categoría). Al finalse realiza el sumatorio total. Como excepcióna tener en cuenta, algunos criterios sólo sonpuntuables en una escala bipolar de A (haypresencia del criterio) o D (no hay presenciadel criterio).

A continuación se presenta la rúbrica tal ycomo debería ser utilizada en nuestra prácticaeducativa:

RETAFRúbrica para la Evaluación y

Tutorización del Aprendizaje en el Foro

Profesor/Dpto.:________________Estudiante/Grupo:______________Calificación:__________________

- 145 -


- 146 -


- 147 -


- 148 -


Atendiendo al momento de su aplicación,el valor de la rúbrica cobra un sentido distinto.Se presenta a los estudiantes en el inicio de laactividad formativa o curso como guía deprocedimiento para lograr los objetivos deutilización didáctica del foro y comoherramienta de apoyo a la tutorizacióndocente. Mientras que su uso al final delproceso se emplea como instrumento deevaluación del contexto pedagógico del foro.Ambos momentos nos aportan informaciónrelevante, a la vez que dotan de una mayorcoherencia a la actividad de evaluaciónrealizada sobre el trabajo del alumnado enestos entornos de comunicación asíncrona.

4. Discusión y conclusiones

Hay toda una corriente de investigacionesen el campo de la evaluación de las prácticasen e-Learning que trata de presentarnos susinstrumentos como recursos inequívocos paramedir el nivel de excelencia en el desempeñode una actividad. Muchas de estasherramientas se basan en conocidos métodosestadísticos que son utilizados para dotarlasde un elevado grado de validez y fiabilidad.La calidad en los procesos educativos se nospresenta, por tanto, supeditada al diseño deestos instrumentos, pero también losresultados obtenidos de éstos dependen a suvez de los criterios subjetivos establecidoscomo modelo inicial por los evaluadores. Larúbrica que proponemos se encuentra en fasede experimentación, siendo utilizada endistintas prácticas de formación conresultados educativos muy variados. Todosestos datos recabados serán tomadosposteriormente para iniciar los procedimientosformales que nos permitan consolidar nuestraherramienta en la búsqueda de cotassignificativas de validez y fiabilidad.

La rúbrica tiene un doble valor en el usoque le damos cuando trabajamos con ella ennuestra práctica educativa. De una parte, esuna herramienta de evaluación que debeentenderse en un contexto diferente al de laevaluación convencional. La rúbrica no sólopretende evaluar los conocimientos delalumnado, sino que, además, debe servir comoherramienta de reflexión que le permita tomarconciencia de lo aprendido. De otra parte,también sirve al alumnado como guía paracumplimentar las partes en las que seestructura una actividad. Precisamente, estaúltima función apoya la acción tutorial deldocente.

En consecuencia, la rúbrica supone –parael docente que la utiliza– una nueva forma deentender y de llevar a cabo los procesos deevaluación, a la vez que un mayoracercamiento por parte del estudiante a lafunción tutorial que éste desempeña. Debeentenderse, por ende, que la evaluaciónadquiere un sentido más real, conectando conla actividad inmediata del alumnado sobre eltrabajo que realiza y los aprendizajes queadquiere. Por su parte, el estudiante encuentraen la rúbrica una manera clara de conocer lasexpectativas del docente respecto a lo queéste espera que haga en una determinadasituación de aprendizaje. También, se sirve delos criterios establecidos para evaluar,tomándolos a modo de pautas que le guíenpara alcanzar más fácilmente sus objetivos deaprendizaje. Cabe destacar que dichaherramienta ayuda a los estudiantes a situarcon precisión las dudas y problemas que seles plantea en el transcurso de su actividadde aprendizaje.

Por último, en la actualidad nosencontramos con numerosas rúbricas quemiden de un modo distinto la mismacompetencia. Creemos necesario indagar en

- 149 -


nuevos estudios que apoyen la creación demodelos teóricos centrados en procesossociales, didácticos y cognitivos, que nosayuden a evaluar el aprendizaje de losestudiantes en la comunicación asincrónica.Dichos modelos deberían ofrecer una visiónmás universal de los criterios de evaluaciónutilizados por distinto profesorado en lasdiferentes áreas competenciales.

Referencias bibliográficas

Cabero, J. (2008). E-Learning: Metaanálisisde investigaciones y resultados alcanzados.Informe final de investigación. ProyectoEA2007-0326 (Resolución de 15 de noviembrede 2006), Programa de Estudios y Análisis,Secretaría de Estado de Universidades eInvestigación. (http://www.angelpio.es/documentos/wp-content/uploads/2008/02/proyecto-ea-2007.pdf ). (24-02-2008).

Cataldi, Z. & Cabero, J. (2006). Los aportesde la Tecnología Informática al aprendizajegrupal interactivo: la resolución de problemasa través del foro de discusión y de chat. Píxel-Bit. Revista de Medios y Educación, 27. (http://www.sav.us.es/pixelbit/articulos/n27/n27art/art2709.htm). (30-01-2008).

Martinez, M.T. & Briones, S.M. (2007).Contigo en la distancia: la práctica tutorial enentornos formativos virtuales. Píxel-Bit.Revista de Medios y Educación, 29. (http://www.sav.us.es/pixelbit/articulos/n29/n29art/art2907.htm ).(14-01-2008).

Mertler, C.A. (2001). Designing scoringrubrics for your classroom. PracticalAssessment, Research & Evaluation, 7 (25).( h t t p : / / P A R E o n l i n e . n e t /getvn.asp?v=7&n=25). (25-01-2008).

Moskal, B.M. (2000). Scoring rubrics: what,when and how? Practical Assessment,Research & Evaluation, 7 (3). (http://

PAREonline.net/getvn.asp?v=7&n=3). (25-01-2008).

Perera, V.H. (2007). Estudio de lainteracción didáctica en e-Learning.Universidad de Sevilla: Tesis doctoral inédita.

Perez , M. (2007). Asignaturas virtuales enuniversidades presenciales: perspectivas yproblemas. Píxel-Bit. Revista de Medios yEducación, 30, 73-84. (http://www.sav.us.es/pixelbit/articulos/n30/n30art/art309.htm). (15-01-2008).

Roblyer, M.D. & Wiencke, W.R. (2003).Design and use of a rubric to assess andencourage interactive qualities in distancecourses. The American Journal of DistanceEducation, 17 (2), 77-97.

Roblyer, M.D. & Wiencke, W.R. (2004).Exploring the interaction equation: validatinga rubric to assess and encourage interactionin distance courses. Journal of AsynchronousLearning Networks, 8 (4). (http://www.sloan-c . o r g / p u b l i c a t i o n s / j a l n / v 8 n 4 /v8n4_roblyer.asp). (20-01-2008).

Fecha de recepción: 07-03-2008Fecha de revisión: 25-11-2009Fecha de aceptación: 23-12-2009

La rubrica como instrumento pedagogico

Documents

Transcript of La rubrica como instrumento pedagogico