INCIDENCIA DE UNA EVALUACIÓN INCIDENCIA DE UNA EVALUACIÓN UNIFICADA Y PARTICIPATIVAUNIFICADA Y PARTICIPATIVA

EN LA ENSEÑANZA DEL INGLÉS COMO EN LA ENSEÑANZA DEL INGLÉS COMO SEGUNDA LENGUASEGUNDA LENGUA

Universidad Pedagógica Nacional Universidad Pedagógica Nacional

Departamento de Lenguas Departamento de Lenguas

2000-20022000-2002

PropósitoPropósito

Transformar las Transformar las prácticas evaluativas prácticas evaluativas tanto desde la tanto desde la perspectiva de los perspectiva de los maestros como la de maestros como la de los estudiantes.los estudiantes.

Observar qué efectos Observar qué efectos traían consigo los traían consigo los cambios propuestos.cambios propuestos.

Participantes y propósitosParticipantes y propósitos

Profesores Profesores

Se buscaba cualificar Se buscaba cualificar el proceso de diseño, el proceso de diseño, administración y administración y evaluación de evaluación de pruebas mediante la pruebas mediante la interacción entre interacción entre ellos, con el fin de ellos, con el fin de unificar criterios en unificar criterios en esas tres áreas.esas tres áreas.

Estudiantes Estudiantes

Se buscaba lograr su Se buscaba lograr su participación activa participación activa en la evaluación a en la evaluación a través de procesos de través de procesos de auto-evaluación y de auto-evaluación y de co-evaluación.co-evaluación.

ObjetivosObjetivos

1. Hacer de la 1. Hacer de la evaluaciónevaluación un un proceso proceso significativo, más sistemático, justo y útilsignificativo, más sistemático, justo y útil ..

2. 2. Observar y analizar los efectosObservar y analizar los efectos que que podría tener el uso de un podría tener el uso de un modelomodelo de de evaluación en el evaluación en el rendimiento académicorendimiento académico y y en las en las actitudes actitudes de los estudiantes hacia la de los estudiantes hacia la evaluación.evaluación.

3. 3. FomentarFomentar en los estudiantes el en los estudiantes el análisis análisis crítico, la autonomía, la auto-evaluación y crítico, la autonomía, la auto-evaluación y co-evaluaciónco-evaluación..

ETAPAS ETAPAS

FASE 1: FASE 1: DiagnósticoDiagnóstico

Circunstancias que afectaban la calidad Circunstancias que afectaban la calidad de la educación impartida en ese de la educación impartida en ese momento:momento:

Disparidad de criterios de evaluación enDisparidad de criterios de evaluación en

el Departamento.el Departamento.Disparidad de criterios para diseño deDisparidad de criterios para diseño de

evaluaciones.evaluaciones.

Falta de análisis de resultados Falta de análisis de resultados obtenidos en evaluaciones.obtenidos en evaluaciones.

Falta de mecanismos para controlarFalta de mecanismos para controlar culminación de programas de cadaculminación de programas de cada curso.curso.

No consideración de actitudes de losNo consideración de actitudes de los estudiantes frente a la evaluación.estudiantes frente a la evaluación.

No concordancia entre lo que se No concordancia entre lo que se enseñaba y lo que se evaluaba.enseñaba y lo que se evaluaba.

FASE 2: FASE 2: Implementación del modeloImplementación del modelo

Duración: Dos años y medioDuración: Dos años y medio Niveles: Básico I y II e Intermedio INiveles: Básico I y II e Intermedio I

• Primer año:Primer año:

Investigación sobre evaluación, Investigación sobre evaluación, unificación de criterios, refinamiento deunificación de criterios, refinamiento de instrumentos para prueba piloto, instrumentos para prueba piloto, implementación de modelo.implementación de modelo.

• Segundo año:Segundo año:

Ajustes al modeloAjustes al modelo Prueba pilotoPrueba piloto Tabulación de datos cuantitativosTabulación de datos cuantitativos Categorización de informaciónCategorización de información cuantitativacuantitativa Análisis estadísticoAnálisis estadístico Interpretación de análisis estadísticoInterpretación de análisis estadístico Grabación de video con percepción deGrabación de video con percepción de estudiantes sobre co-evaluaciónestudiantes sobre co-evaluación

FUNDAMENTACIÓNFUNDAMENTACIÓN

Kulieke (1990:5-6), el proceso de Kulieke (1990:5-6), el proceso de evaluación debe ser evaluación debe ser multidimensionalmultidimensional y y constanteconstante que brinde información no sólo que brinde información no sólo acerca de las acerca de las capacidades lógicas y capacidades lógicas y verbalesverbales del alumno sino de sus del alumno sino de sus habilidades intrapersonales e habilidades intrapersonales e interpersonalesinterpersonales, sus , sus estrategias de estrategias de aprendizajeaprendizaje y su y su capacidad de aplicar el capacidad de aplicar el conocimiento adquiridoconocimiento adquirido a situaciones de a situaciones de la vida real. la vida real.

FUNDAMENTACIÓNFUNDAMENTACIÓN

Carretero y Limón Carretero y Limón (en Pérez,1995: (en Pérez,1995: 16): 16):

Es importante que el estudiante se Es importante que el estudiante se convierta en convierta en controlador de los controlador de los procesosprocesos en los que interviene y en los que interviene y realice unrealice un monitoreo monitoreo de sus de sus accionesacciones. .

FUNDAMENTACIÓNFUNDAMENTACIÓN

Bachman y Palmer (1996: 68). Las Bachman y Palmer (1996: 68). Las competencias gramatical, textual, competencias gramatical, textual, sociolingüística y funcionalsociolingüística y funcional permiten al aprendiz expresarse, permiten al aprendiz expresarse, comunicarse o adquirir información comunicarse o adquirir información en la segunda lengua.en la segunda lengua.

Hay que promover también la Hay que promover también la competencia estratégicacompetencia estratégica

FUNDAMENTACIÓNFUNDAMENTACIÓN

Bustamante (1996: 52): La Bustamante (1996: 52): La evaluación contribuye a promover evaluación contribuye a promover intereses tales como intereses tales como la diversidadla diversidad, , la crítica constructiva, la la crítica constructiva, la participaciónparticipación que, “tratan de que, “tratan de explicitar las hipótesis en juegoexplicitar las hipótesis en juego y de y de producir producir condiciones para que el condiciones para que el sujeto las interroguesujeto las interrogue”.”.

1. Etapa diagnósticaa. Determinación de fortalezas y debilidadesb. Identificación del problema

2 - Establecimiento de metas

3.- Establecimiento de plan y estrategias

4. - Monitoreo del plan y las estrategias

5 - Auto-evaluación de: Producción, capacidad, plan y estrategias

6 - Conocimiento sobre diseño de evaluaciones; elaboración y administración de éstas.

Evaluación formal

7- Co-evaluación, auto-evaluación

8- Análisis de resultados y de la retroalimentación

Conclusiones sobre la co-Conclusiones sobre la co-evaluación y la auto-evaluación evaluación y la auto-evaluación

La La co-evaluaciónco-evaluación tuvo una gran acogida : tuvo una gran acogida : 71.4% 71.4% actitud favorableactitud favorable hacia la co- hacia la co-

evaluación. evaluación. 80% pruebas de co-evaluación 80% pruebas de co-evaluación son muy son muy

útiles.útiles. 83.1% 83.1% todo el proceso de esta etapa es todo el proceso de esta etapa es

positivopositivo. . 91% la 91% la auto-evaluación auto-evaluación es un proceso es un proceso

enriquecedor y útil.enriquecedor y útil.

Con respecto a la Con respecto a la evaluación en evaluación en generalgeneral::

Opinión inicialOpinión inicial

23% en el GE 23% en el GE opinaba que opinaba que la la evaluación ayuda evaluación ayuda a demostrar a demostrar conocimientos.conocimientos.

Opinión finalOpinión final

63.4% consideró 63.4% consideró que las que las evaluaciones son evaluaciones son buenas, buenas, productivas, bien productivas, bien diseñadas.diseñadas.

Incidencia en el rendimiento Incidencia en el rendimiento académicoacadémico

La implementación de la auto-evaluación y La implementación de la auto-evaluación y la co-evaluación produjo la co-evaluación produjo

un un incremento considerable en el incremento considerable en el rendimiento académicorendimiento académico de los de los

estudiantes de los grupos experimentales estudiantes de los grupos experimentales en las tres pruebas formales en las tres pruebas formales

administradas para evaluar el progreso administradas para evaluar el progreso (parcial1, parcial2, postest).(parcial1, parcial2, postest).

Conclusiones sobre la evaluación Conclusiones sobre la evaluación participativaparticipativa

Los estudiantes después de participar en Los estudiantes después de participar en el proyecto vieron la evaluación como un el proyecto vieron la evaluación como un proceso valioso que : proceso valioso que :

les brinda información para auto-les brinda información para auto-corregirsecorregirse,,

los ayuda a los ayuda a descubrir sus errores y a descubrir sus errores y a reflexionar sobre su aprendizajereflexionar sobre su aprendizaje de de una manera honesta con ellos una manera honesta con ellos mismos; mismos;

Conclusiones sobre la evaluación Conclusiones sobre la evaluación participativaparticipativa

Les permite Les permite familiarizarse con las familiarizarse con las teorías sobre diseño de pruebasteorías sobre diseño de pruebas. .

Los reta a utilizar sus conocimientos Los reta a utilizar sus conocimientos para para evaluarevaluar a sus compañeros de a sus compañeros de clase de una forma clase de una forma justa y justa y sistemáticasistemática. .

Les reconoce su Les reconoce su creatividadcreatividad. .

Conclusiones sobre la evaluación Conclusiones sobre la evaluación participativaparticipativa

Les ayuda a Les ayuda a cuestionar sus propias cuestionar sus propias formas de evaluación y las de los formas de evaluación y las de los demásdemás de una manera constructiva. de una manera constructiva.

Los enseña, a través de la interacción, Los enseña, a través de la interacción, a ser a ser tolerantes y respetuosos.tolerantes y respetuosos.

Los ayuda a Los ayuda a prepararse mejor para el prepararse mejor para el papel que jugarán como educadorespapel que jugarán como educadores

Conclusiones sobre la evaluación Conclusiones sobre la evaluación unificadaunificada

Los prof. del P. de investigación manifestaron que:Los prof. del P. de investigación manifestaron que: El modelo propuesto es certero y beneficioso El modelo propuesto es certero y beneficioso

para los estudiantes porque para los estudiantes porque permite el permite el trabajo unificado y participativo en el trabajo unificado y participativo en el contexto diario del salón de clase.contexto diario del salón de clase.

El trabajo de los estudiantes estuvo basado en El trabajo de los estudiantes estuvo basado en la camaraderíala camaradería, y la mayoría de las veces, en , y la mayoría de las veces, en la la tolerancia, en el apoyo, en la tolerancia, en el apoyo, en la colaboración mutua y en la crítica colaboración mutua y en la crítica constructivaconstructiva. .

Conclusiones sobre la evaluación Conclusiones sobre la evaluación unificadaunificada

Que el Que el trabajo colaborativo para unificar trabajo colaborativo para unificar los criterios de exigencia y de evaluación los criterios de exigencia y de evaluación y el diseño de evaluacionesy el diseño de evaluaciones formales fue formales fue enriquecedor y enriquecedor y

ha permitido aprender nuevas formas de ha permitido aprender nuevas formas de evaluación basadas en la actuaciónevaluación basadas en la actuación (performance-based assessment), principios (performance-based assessment), principios sobre diseño de pruebas, teorías sobre sobre diseño de pruebas, teorías sobre evaluación y estrategias de aprendizaje.evaluación y estrategias de aprendizaje.

Limitaciones para continuar con la Limitaciones para continuar con la experienciaexperiencia

Reducción de la presencialidadReducción de la presencialidad en los cursos en los cursos de inglés por la flexibilización del currículode inglés por la flexibilización del currículo

Falta de tiempo de los profesoresFalta de tiempo de los profesores para para trabajar en conjunto y regularmentetrabajar en conjunto y regularmente

Aumento en el número de estudiantes por Aumento en el número de estudiantes por salónsalón

Tensión entre la preparación de los estudiantes Tensión entre la preparación de los estudiantes en L2 para los ECAEs y la preparación para la en L2 para los ECAEs y la preparación para la docencia en L2 (washback effect)docencia en L2 (washback effect)

Sugerencias para aplicar Sugerencias para aplicar propuestas como éstapropuestas como ésta

Incrementar el Incrementar el número de horas número de horas presenciales.presenciales.

Asignar horas para Asignar horas para trabajo en equipo y trabajo en equipo y para la preparación para la preparación de clases y de clases y evaluación de los evaluación de los aprendizajes a los aprendizajes a los docentes docentes catedráticos.catedráticos.

Disminuir el número Disminuir el número de estudiantes por de estudiantes por salón.salón.

Aumentar los Aumentar los recursos humanos y recursos humanos y tecnológicos tecnológicos disponibles para que disponibles para que los estudiantes los estudiantes aprendan la L2 más aprendan la L2 más autónomamente.autónomamente.

Sugerencias para aplicar Sugerencias para aplicar propuestas como éstapropuestas como ésta

Tener en cuenta Tener en cuenta las variables las variables contextuales de las contextuales de las universidades en universidades en cada región para el cada región para el diseño de los diseño de los ECAEs. ECAEs.

Valorar también en Valorar también en los ECAEs los ECAEs conocimientos y conocimientos y competencias competencias pedagógicas no pedagógicas no evaluables por evaluables por medio de medio de exámenes.exámenes.

GRACIAS