Dylan Wiliam (@dylanwiliam)

Evaluación Formativa: La manera másefectiva de construir aprendizajes

www.dylanwiliamcenter.com

Estructura: cuatro preguntas

• Por qué es necesario mejorar el logro educativo

• Por qué tenemos que centrar nuestros esfuerzos

• Por qué la evaluación formativa debe ser unaprioridad

• Por qué la evaluación formativa require un nuevomodelo de desarrollo profesional

2

Por qué es necesario mejorar el logro educativo3

• En economías avanzadas, en los próximos 20 a 30 años

– Entre un cuarto y un tercio de los empleos podrían serexternalizados en otro país (Blinder, 2011)

– Casi la mitad de los empleos podrían ser realizados pormáquinas (Frey & Osborne, 2013)

• La opción para la gente joven

– Esperar que alguien te invente un nuevo trabajo

– Crearte uno tu mismo

Change 1969-1999

+14%

+8%

–5%

–8%

–3%

El mundo del trabajo está cambiando

Categoría de habilidades

A Comunicación compleja

B Pensamiento experto/resolución de problemas

C Manual no-rutinaria

D Rutinaria cognitiva

E Rutinaria manual

Qué clase de habilidades están desapareciendo más rápidamentede los lugares de trabajo?

4

Autor, Levy and Murnane (2003)

¿Qué tipo de escuelas necesitamos?

Modelo de escuela Ethos Proceso clave

Refinerías de talento La escuela debe proveer oportunidades para que los estudiantes muestren su potencial

Asegurar buena docencia y cobertura del currículum

Incubadoras de talento

Todos los alumnos pueden aprender, pero no todos pueden lograr resultados de excelencia

Potenciar/sonsacar las capacidades que tiene el alumno

Fábricas de talentos Todos los estudiantespueden lograr resultados de excelencia

“Lo que sea necesario”

¿Por qué las escuelas deberían hacer un análisis de Pareto?6

• Vilfredo Pareto (1848-1923)

– Economista, filósofo, y sociólogo,asociado con la regla del 80:20

• Mejora de pareto

– Un cambio que puede hacer que a lo menos una persona (ej. estudiante) este mejor sin empeorar otro (ej. profesor).

• Eficiencia de Pareto/ Óptimo de Pareto

– Una asignación (ej. de recursos) es Pareto eficiente o Pareto optima cuando no se puede efectuar ninguna mejora de Pareto adicional

Usar la evidencia de investigación

7

Estudios Relevantes

• Fuchs & Fuchs (1986)

• Natriello (1987)

• Crooks (1988)

• Bangert-Drowns et al. (1991)

• Dempster (1991)

• Dempster (1992)

• Elshout-Mohr (1994)

• Kluger & DeNisi (1996)

• Black & Wiliam (1998)

• Nyquist (2003)

• Brookhart (2004)

• Allal & Lopez (2005)

• Köller (2005)

• Brookhart (2007)

• Wiliam (2007)

• Hattie & Timperley (2007)

• Shute (2008)

• Kingston & Nash (2011, 2015)

8

Evaluación formativa: un concepto controvertido

Amplitud

Período

Impacto

Ciclo largo plazo Ciclo mediano plazo Ciclo corto plazo

Entre semestres y unidades de aprendizajes

Cuatro semana a un año

Monitoreo, alineación curricular

Dentro y entre clases

Minuto a minuto y día a

día

Compromiso, receptivo

Dentro y entre unidades de aprendizaje

Una a cuatro semanas

Evaluación con estudiantes involucrados

9

Hacia dónde va el estudiante

Dónde esta ahora el estudiante

Cómo conseguir que estudiante lo alcance

Docente

Par

Estudiante

Desmenuzando la Evaluación Formativa

Aclarar, compartir y comprender

las intencionesdel

aprendizaje

Obtenerevidencias del

aprendizaje

Entregarretroalimentaciónque promueva el

avance de losestudantes

Activar a estudiantes como recursospara el aprendizaje de otros

Activar estudiantes como dueños de suspropios aprendizajes

10

A dónde va el alumno A dónde está el alumno Cómo llevar allá al alumno

Profesor

Par

Estudiante

Desmenuzando la evaluación formativa

Usar evidencia de logro para adaptar lo que pasa en

la sala de clases para satisfacer las necesidades

del estudiante

Un Sistema de posicionamiento educativo

• Un buen professor:

– Establece en que nivel están los alumnos respecto a susaprendizajes.

– Identifica el destino de las enseñanzas

– Cuidadosamente planifica un itinerario.

– Comienza el viaje del aprendizaje.

– Hace controles periódicos sobre el progreso en el tiempo.

– Hace ajustes en el curso según lo exigan las condiciones.

12

Educational Endowment Foundation toolkit13

Intervención Costos Calidad de la Evidencia

Meses extra de aprendizaje

Retroalimentación ££ +8

Metacognición y autoregulación ££ +8

Tutorías entre pares ££ +6

Primeros años de intervención £££££ +6

Tutorías uno a uno ££££ +5

Tareas para la casa (Secundaria) £ +5

Aprendizaje colaborativo £ +5

Fonoaudiología £ +4

Tutorías de pequeños grupos £££ +4

Comportamiento en intervenciones £££ +4

Tecnología Digital ££££ +4

Aprendizaje social y emocional £ +4

Educational Endowment Foundation toolkit14

Intervention Cost Quality of evidence

Extra months of learning

Involucramiento parental £££ +3

Reducción del tamaño de la clase £££££ +3

Escuelas de verano £££ +3

Participación en deportes £££ +2

Participación en Arte ££ +2

Tiempo extendido en el colegio £££ +2

Instrucción individualizada £ +2

Actividades extraprogramáticas ££££ +2

Estilos de aprendizaje £ +2

Mentoría £££ +1

Tareas para la casa (primaria) £ +1

Educational Endowment Foundation toolkit15

Intervención Costos Calidad de la Evidencia

Meses extra de aprendizaje

Asistentes de profesores ££££ 0

Pago por desempeño ££ 0

Intervenciones vocacionales £££ 0

Agrupamiento de materias £ 0

Uniforme escolar £ 0

Entorno/infraestructura ££ 0

Agrupar por habilidades £ -1

A dónde va el alumno Dónde está el alumno Cómo llevar allá al alumno

Profesor

Par

Estudiante

Desmenuzando la evaluación formativa

Clarificar, compartir y

entender intenciones de

aprendizaje

Generar discusión efectiva, tareas y actividades que

fomenten evidencia de aprendizaje

Entregar retroalimentación que movilice a los

estudiantes

Activar estudiantes como recursos entre ellos

Activar a los estudiantes como dueños de su propio aprendizaje

Estrategias y técnicaspara la evaluaciónformativa en el aula

17

Aclarar, compartir y entender los objetivosde aprendizaje

18

Compartir los objetivos de aprendizaje

• Explica los objetivos de aprendizaje al comienzo de la clase/unidad: – Objetivo de aprendizaje

– Criterio de logro

• Menciona los objetivos de aprendizaje y criterios de logro en el lenguaje de los estudiantes

• Usa posters con palabras claves para hablar del aprendizaje:– Ej., describir, explicar, evaluar

• Usa la planificación y esquemas prudentemente

• Usa ejemplos escritos de diferentes estandares para darle mássustancia a las rúbricas de evaluación (ej. Reportes de laboratorio).

• Da oportunidades a los estudiantes para diseñar sus propiaspruebas.

19

Construyendodiscusiones, actividades y tareasefectivas en la sala de clases que generenevidencia de aprendizaje

20

Obteniendo la evidencia

• Idea clave: al preguntar se debería:

– Generar pensamiento

– Proveer datos que informe sobre la enseñanza

• Mejorar las preguntas de los profesores:

– Generando preguntas con los colegas

– De bajo/alto nivel y abiertas/cerradas

– Con tiempo de espera apropiado

• Alejándose del modelo I-R-E (iniciación-respuesta-evaluación):

– Basquetbol en vez de “pimponeo”

– No “manos arriba” (excepto para preguntar algo)

– Preguntas estilo “silla caliente”

• Sistemas de respuestas para todos los estudiantes :

– Tarjetas ABCD, pizarras individuales, tickets de salida

21

Darretroalimentación que mejore los aprendizajes

22

Efectos de la retroalimentación

• Kluger & DeNisi (1996) revisaron 3000 reportes de investigaciones

• Excluyendo aquellos:

– Sin controles adecuados

– Con diseño pobre

– Con menos de 10 participantes

– Que no miden el desempeño

– Sin detalles de la magnitud de los efectos

• Lo que dejó un total de 131 reportes, 607 tamaños de efecto,incluyendo a 12652 individuos

• La evidencia señala que, en promedio, la retroalimentaciónaumenta los logros:

– Efectos son altamente variables

– 38% (231 de 607) de los efectos fueron negativos

23

Obtener bien la retroalimentación es difícil

Tipo de respuesta Retroalimentación indica desempeño…

Cuando no está la altura de la meta

Cuando excede la meta

Cambia la conducta Aumenta el esfuerzo Disminuye el esfuerzo

Cambia la meta Reduce su aspiración Aumenta su aspiración

Abandona la meta Decide que la meta es muydifícil

Decide que la meta es muyfácil

Rechaza la retroalimentación

Retroalimentación esignorada

Retroalimentación esignorada

24

Retroalimentación que promueve el aprendizaje

• Idea clave: la retroalimentación debe:

– Generar reflexión

– Dar guías de cómo mejorar

• Anotaciones sólo con comentarios

• Anotaciones enfocadas

• Referencias explicitas a rubricas

• Entregar sugerencias sobre cómo mejorar:

– No entregar soluciones completas

• Reagendar evaluaciones :

– Por ejemplo, prueba de unidad a tres cuartos del camino

25

Activadandoestudiantes comorecursos de aprendizajes entre ellos mismos

26

Ayudar a los estudiantes a ser recursos de aprendizaje

• Estudiantes evaluando el trabajo de sus compañeros:

– “Pre-flight checklist”

– “Dos estrellas y un deseo”

– Elegir-intercambiar-elegir

– Daily sign-in

• Entrenar estudiantes a plantear preguntas / identificar las debilidades del grupo

• Revisión de los estudiantes al final de la lección

27

Activando a estudiantes comodueños de su propioaprendizaje

28

Ayudar a estudiantes a que se adueñen de supropio aprendizaje

• Estudiantes evaluando su propio trabajo:

– Con rúbricas

– Con modelos

• Autoevaluación de la comprensión:

– Portafolio de aprendizajes

– Luces de tráfico

– Discos rojos/verdes

– Tazas de colores

– Más / Menos / Interesante

29

Hasta acá con la parte fácil

Un modelo para el aprendizaje de losprofesores

• Contenido, después proceso

• Contenido (lo que queremos que los profesorescambien): – Evidencia

– Ideas (estrategias y técnicas)

• Proceso (cómo hacer el cambio):– Elección

– Flexibilidad

– Pasos pequeños

– Accountability (rendición).

– Apoyo

31

Accountability con apoyo

• Qué se necesita de los profesores:

– Un compromiso con:• El mejoramiento continuo de la práctica

• Enfocarse en aquellas cosas que hacen la diferencia a losestudiantes.

• Qué se necesita de los líderes:

– Un compromiso de construir comunidades de aprendizaje efectivas para profesores a través de:• Creando expectativas para la mejora continua de las prácticas

• Manteniendo el foco en las cosas que hacen la diferencia a losestudiantes

• Entregando el tiempo, espacio, permisos y apoyos para innovar

• Apoyando el tomar riesgos

32

Para encontrar más…

www.dylanwiliam.net

www.dylanwiliamcenter.com

33

http://www.dylanwiliam.nethttp://www.dylanwiliamcenter.com