Validación de la Escala ECERS-R en dos regiones del Perú

Erika DunkelbergErik Romero

PROLEER

Con el financiamiento de la Fundación Van Leer

Antecedentes del estudio y la escala

Análisis psicométrico

Resultados del estudio

Organización de la presentación

2009

Falta de información sobre la calidad de los servicios públicos de educación inicial

Diversidad de servicios privados no regulados/supervisados

La Fundación Van Leer brindó el apoyo financiero para aplicar y adecuar una escala que evalúe la calidad de los entornos educativos del nivel inicial y de esa manera contribuir a la política pública con evidencia que facilite la toma de decisiones

1. Antecedentes

1. Se optó por trabajar con una escala utilizada ampliamente en el contexto internacional

Es utilizada para autoevaluación, acreditación, investigación, entre otros

• Calidad de los resultados : logros de aprendizaje y desarrollo de los niños

• Calidad de las condiciones : la infraestructura, el nivel educativo del personal, la proporción docente: niño

• Calidad de los procesos : las interacciones, las experiencias de los niños

1. Calidad Educativa se puede medir…

1. Por que medir la calidad de la oferta educativa

A mayor calidad de un programa, mayores los efectos en el niño, en las distintas áreas del desarrollo social y cognitivo a corto, a mediano y a largo plazo

En un programa preescolar de calidad los niñosson respetados, desafiados y cuidados,experimentan oportunidades continuas paradesñarrollar nuevas destrezas, conocimientos ydisposiciones; con capaces de tomar decisionesimportantes a lo largo del día; su cultura ylengua materna es respetada e incorporada alcurrículo; participan de actividades en grupospequeños y grandes; desarrollan habilidadesbásicas para la escuela (NIEER 2002)

Protección: salud y seguridad

Oportunidades de aprendizaje apropiadas a su edad e intereses individuales

Apoyo y guia para construir relaciones positivas - Interacciones

1.Principios sobre los que se basa el ECERS-R

1. Aplicación en el Perú

2011 Aplicación en Ventanilla, Pachacutec (n=30)

2012 Aplicación en Madre de Dios (n=38)

2013 Aplicación en Ayacucho, Apurimac por la Dirección de Educación Inicial, MED (n=50)

Evaluación Nacional de Educación Inicial

Realizada por la Dirección de Educación Inicial, MED

N=1,000 de 24 Departamentos

1. Aplicación en el Perú

1. Qué se observa…

Los ambientes

Las relaciones

Los materiales

Las experiencias que promueven el aprendizaje

Los hábitos de higiene y seguridad Las rutinas diarias

1.Qué se observa

Desde el inicio de la jornada escolar hasta que finaliza (aprox. 4 horas)

Observadores capacitados por 5 días utilizando material proporcionado por los autores (audio visual)

10 aplicaciones previas de práctica para obtener confiabilidad

1.Como se observa

De la información recogida en Pachacutec y Madre de Dios (n=68) se ha realizado el siguiente análisis:

Consistencia interna

Confiabilidad Inter jueces

Validez de Criterio

Validez de Contenido

2. Análisis psicométrico

2 ítems no fueron aplicados: ítem 11 “siesta” y ítem 23 “arena y agua”

Tres ítems de la Escala obtuvieron alto porcentaje de “no Aplica” : ítem 27 Uso de TV y videos; ítem 37 provisiones para niños con discapacidades; e ítem 41 “interacciones entre personal” ya que muchas aulas no cuenta con auxiliar

2. Análisis psicométrico

Subescala Número de ítems Número de casos Alpha de Cronbach

Espacio y Mobiliario 8 68 .769

Rutinas (Quitando itém 11) 5 67 .450

Rutinas (Neutralizando itém 11) 6 67 .633

Lenguaje 4 67 .775

Sectores (Quitando item 23) 9 48 .814

Sectores (Neutralizando item 23) 10 48 .851

Sectores (Neutralizando item 23 y quitando item

27)9 68 .882

Interacción 5 64 .889

Estructura (Quitando item 37) 3 68 .455

Estructura (Neutralizando item 37) 4 68 .728

Provisiones 6 46 .340

Provisiones (Quitando item 41) 5 65 .424

Provisiones (Neutralizando item 41) 6 65 .616

ECERS TOTAL 40 ITEMS (Quitando items 11, 23 y

37)40 33 .923

ECERS TOTAL 38 ITEMS (Quitando items

11,23,27,37 y 41)38 60 .923

Consistencia interna

Correlaciones item-test a nivel de Subescala 29 items entre .782 y.307 7 items puntajes positivos menores a 0.2 4 items negativos menores a 0.2

Correlaciones item-test a nivel de Escala Total 34 items entre .795 y .202 4 items puntajes positivos menores a 0.2 2 items negativos menores a 0.2

Menor nivel de correlación item-test y consistencia interna en la escala de provisiones

Correlaciones item-test

Confiabilidad inter jueces

Región Pachacutec Madre de Dios

N 18 18

A nivel de Item

% de Acuerdo Exacto 66.14 66.27

% de Acuerdo hasta un punto de diferencia

84.52 84.13

A nivel del puntaje total

Coeficiente de Correlación de Pearson

0.89 0.844

Coeficiente de CorrelaciónIntraclase

0.883 0.889

Publico Privado

N MediaDesviación

EstándarN Media

Desviación

Estándar

U de Mann

WhitneySignificación

Espacio y

Mobiliario39 2.32 .70 22 2.10 .59 215.500 .001

Rutinas 39 1.97 .76 22 1.56 .59 377.500 .435

Lenguaje 39 3.14 1.39 22 3.02 1.62 182.000 .000

Sectores 39 2.32 .71 22 1.44 .51 145.500 .000

Interacciones 39 2.92 1.15 22 1.80 .97 402.500 .690

Estructura 39 1.70 .69 22 1.95 .96 278.500 .022

Provisiones 39 2.47 .88 22 1.78 .66 348.000 .222

ECERS Total 39 2.41 .64 22 1.92 .62 243.500 .005

Validez de criterio

Para la versión utilizada por el MED en el 2014 se realizaron 3 tipos de adecuaciones:

- Revisión de la traducción y ajuste de términos a castellano “peruano”

- Precisar términos para reducir subjetividad en la interpretación de determinados indicadores

- Reformular ciertos indicadores y agregar otros

Validez de contenido

Ítem 1 Indicador 1.2 y 3.2 Se reemplazó materiales que absorben el sonido por “ruido del exterior que interfiere con las

actividades

Ítem 9 Indicador 1.3 – 3.3 “acompañar dentro de la sala de clase” por “ingresar con los niños dentro de la escuela”

Ítem 10 Indicador 1.5 y 3.5 Fueron eliminados los indicadores relacionadas con las alergias

Ítem 12 Agregar indicador 1.1 Se agregó “no hay inodoro ni silo ni letrina” dado que hemos encontrado escuelas sin servicios

higiénicos de ningun tipo

Ítem 13 Indicador 1.2 y3.3 Fueron eliminados los indicadores sobre fumar dentro del aula

Agrego indicador Se agregó un indicador sobre la presencia de residuos contaminantes dentro de la escuela (por

ejemplo heces de animales que se observó en muchas escuelas)

Ítem 15 Agrego indicador 7.3 “libros etiquetados y clasificados”

Ítem 39 Eliminaron indicador 1.2

y 3.4 y 7.3

“no se les da a los miembros del personal tempo aparte de los niños” y “hacen un descanso al día”,

“tiene flexibilidad en decidir cuándo hacer descansos”

Ítem 40 Indicador 3.2 y 5.1 Se precisó que el espacio para guardar material puede ser en el nivel 3.2 fuera del aula pero dentro de

la escuela sino embargo para el indicador 5.1 debe ser amplio y dentro del aula

Ítem 41 Indicador 1.3, 3.1 Se reemplazó el ítem 1.3 que señala que responsabilidades del personal no se comparten de manera

justa por “no están claramente definidas” y el ítem 3.1 por lo tanto “están claramente definidas”

Ítem 42 Indicador 7.1 y 7.2 Se reemplazó “personal hace autoevaluación” por “recibe acompañamiento de toda la jornada que

incluye autoevaluación”

Validez de contenido

La escala ha resultado valida y confiable como instrumento para medir la calidad de las experiencias de educación y cuidado.

Es una escala con mucho potencial como instrumento para 1. Gestionar mejores prácticas dentro de las escuelas, priorizar acciones

correctivas2. Elevar los estándares de calidad a nivel de distritos y regiones. Permite

establecer línea de base, identificar escuelas que requieran mayor apoyo

Continuamos trabajando con la escala no solo en aulas de 5 años sino en centros educativos y de cuidado para niños de los 6 meses en Lima Metropolitana, evaluando y capacitando para alcanzar estándares mínimos y buenos.

3. Resultados

3. Resultados Comparativos en dos regiones

Excelente

Mínimo

1

2

3

4

5

6

7

Total ECEERS Espacio yMobiliario

Rutinas deCuidado

Lenguae yRazonamiento

Sectores Interaccion Estructura delprograma

Padres yPersonal

Puerto Maldonado Ventanilla

Bueno

Inadecuado

Pobre Inadecuado Minimo a

bueno

Bueno a

Excelente

Distribución de Escuelas, Puerto Maldonado

Porcentaje de Escuelas según rango, Puerto Maldonado y Pachacutec

0

5

10

15

20

25

30

35

1 a 1.49 1.5 a1.99

2 a 2.49 2.5 a2.99

3 a 3.49 3.5 a3.99

4 a 4.49 4.5 a4.99

5 a 5.49 5.5 a5.99

6 a 6.49 6.5 a 7

Madre de Dios

Pachacutec

Pobre Inadecuado Mínimo a bueno Bueno a Excelente

Práctica apropiada

3. Resultados Comparativos , promedio de 7 escuelas en Lima Metropolitana

1

2

3

4

5

6

7

TOTAL ECERS Espacio y Mobiliario Rutinas de Cuidado Lenguaje yRazonamiento

Sectores oactividades

Interacción Estructura delPrograma

Padres y Personal

BE SMR AM CF CH MSH BK

La verdadera transformación de la educación y cuidado se da desde el centro o escuela

GRACIAS