INEE Curso UIMP 2016 - Evaluación educativa: Isabel Couso Tapia y Gillermo Gil Escudero

1

PISA para Centros Educativos en EspañaPISA for Schools in Spain

Universidad Internacional Menéndez PelayoIsabel Couso Tapia

Guillermo Gil Escudero

PISA para Centros EducativosOCDE

…”Poner más énfasis en el profundo conocimiento

conceptual que en las estrategias de la rutina cognitiva”…

IMPACTO SOBRE EL RENDIMIENTO ACADÉMICO

Países10%

Centros30%Estudiantes

60%

Variación de las puntuaciones de los estudiantes en el PISA atribuíbles a las diferencias entre países, en-

tre centros y entre las características de los estu-diantes

¿Qué saben los jóvenes de 15 años ……y qué pueden hacer con lo que saben?

Todos sabemos donde estácada país en PISA pero…..¿Dónde está mi centro?

5

PISA PARA CENTROS EDUCATIVOS NO PRETENDE

NO

… Ser una prueba estandarizada obligatoria

… Ser una alternativa a la prueba PISA internacional

… Ser una herramienta de construcción de ránkings

INFORMES: ANÁLISIS

Los Informes para los centros educativos y para los grupos de centros que pertenecen a una misma institución educativa, tienen básicamente 4 secciones:I. Introducción: Cómo interpretar los resultados de su centro educativo en la prueba PISA for

SchoolsII. Resultados Rendimiento: Lo que los alumnos de su centro educativo saben y saben hacer en Lectura, Matemáticas y CienciasIII. Comparaciones nacionales e internacionales: Los resultados de su centro educativo en los contextos nacional e internacionalIV. Resultados de variables del entorno escolar de su centro y de sus alumnos y su relación con el rendimiento: Clima escolar del centro, las estrategias de aprendizaje, la motivación y la implicación de los alumnos en comparación nacional e internacional

2016PARTICIPACIÓN:

-64 CENTROS (25 PÚBLICOS, 39 PRIVADOS)INFORMES:

-CENTROS: 49 INDIVIDUALES-GRUPOS: 5

PLAZOS 2016:1 ENERO/24 MARZO

1 ABRIL/15 JULIONOVIEMBRE-DICIEMBRE

RENDIMIENTO Datos propios del centro

.Matemáticas, Lectura, Ciencias.Comparación con centros de España (PISA 2012)

.Rendimiento/centros públicos y privados.Rendimiento/niveles competenciales PISA.Comparación Internacional: países OCDE

Perfil socioeconómico y cultural del centro.Rendimiento con valor añadido.Rendimiento/repetición escolar

CLIMA ESCOLAR

Ambiente, Entorno de aprendizaje:.Clima de disciplina

.Relaciones profesor/alumno.Hábitos de lectura: perfil lector de los alumnos

Actitudes e Implicación de los alumnos en su propio aprendizaje

.Motivación Instrumental.Confianza en la propia eficacia

RESULTADOS COMPARATIVOS(TODAS LAS COMPETENCIAS)

Lectura Matemáticas Ciencias

Su Centro 549 554 544

España 488 484 496

OCDE 496 494 501

Finlandia 524 519 545

Polonia 518 518 526

Francia 505 495 499

La competencia de los alumnos de su centro en lectura en comparación con los alumnos en España en PISA 2012

1% 3%

14%

34% 36%

12%

1%6%

13%

26%31%

19%

5%1%

Nivel <1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6

Porc

enta

je de

estu

dian

tes

Su Centro España (PISA 2012)

0

20

40

60

80

Nota: Las barras con una trama rallada indican que la distribución de los alumnos de su centro en niveles de rendimiento es estadísticamente diferente de la distribución de los estudiantes en España. Las barras de color sólido indican que la distribución de los alumnos de su centro en niveles de rendimiento no es estadísticamente diferente de la distribución de los estudiantes en España.

Dónde se sitúan los resultados de su centro en lectura en relación con los centros en España en PISA 2012

Dónde se sitúan los resultados de su centro en lectura en relación con los centros de Finlandia en PISA 2012

Distribución de estudiantes de su Centro en PISA 2012 en función de niveles de rendimiento

Distribución de estudiantes de los países seleccionados en PISA 2012 en función de niveles de rendimiento

40% 20% 0% 20% 40% 60% 80% 100%

Italia

Francia

Portugal

España

Países OCDE

Reino Unido

Alemania

Finlandia

Porcentaje de estudiantes que se encuentran en diferentes niveles de rendimiento en lecturaNivel <1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6

40% 20% 0% 20% 40% 60% 80% 100%

Su Centro

Porcentaje de estudiantes que se encuentran en diferentes niveles de rendimiento en lecturaNivel <1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6

Estudiantes en el nivel 1 o inferior Estudiantes en el nivel 2 o superior


Cómo es la distribución del rendimiento del alumno en su centro en relación con la distribución del rendimiento del alumno en otros países seleccionadas en lectura en PISA 2012

El clima de disciplina en las clases de matemáticas en su centro y entre los alumnos con mayor y menor rendimiento en España en PISA 2012

Los alumnos no atienden a lo que dice el profesor

Hay ruido y falta de orden

El profesor tiene que esperar mucho rato hasta lograr el silencio en la clase

Los alumnos no pueden trabajar bien

Los alumnos no empiezan a trabajar hasta mucho después de comenzada la clase

0 20 40 60 80 100

Su CentroPorcentaje promedio del 10% de alumnos con el rendimiento bajo en matemáticas

(en tono más oscuro si es significativamente diferente del de su Centro)Porcentaje promedio del 10% de alumnos con el rendimiento alto en matemáticas

(en tono más oscuro si es significativamente diferente del de su Centro)

Porcentaje de estudiantes que informan que lo siguiente ocurre "nunca o casi nunca" o "en algunas clases"

Dónde se sitúan los resultados de su centro en matemáticas en relación con los centros de Finlandia en PISA 2012

Me llevo bien con la mayoría de mis profesores

La mayoría de mis profesores se interesan por mi bienestar

La mayoría de mis profesores escuchan con atención lo que digo

Si necesito ayuda extra la recibo de mis profesores

La mayoría de mis profesores me trata justamente

0 20 40 60 80 100Porcentaje de estudiantes que están de acuerdo o completamente de

acuerdo con la afirmación

Su CentroPorcentaje promedio del 10% de alumnos con el rendimiento bajo en matemáticas

(en tono más oscuro si es significativamente diferente del de su Centro)Porcentaje promedio del 10% de alumnos con el rendimiento alto en matemáticas

(en tono más oscuro si es significativamente diferente del de su Centro)

Las relaciones profesor-alumno en su centro y entre los alumnos con mayor y menor rendimiento en España en PISA 2012(matemáticas)

Estudio ciencias porque sé que son útiles para mí

Merece la pena esforzarse en las asignaturas de ciencias porque eso me servirá para la profesión que quiero ejercer más adelante

Merece la pena estudiar las asignaturas de ciencias porque lo que aprendo mejorará las perspectivas de mi carrera profesional

Aprenderé muchas cosas en las asignaturas de ciencias que me ayudarán a conseguir un trabajo

Lo que aprendo en las asignaturas de ciencias es importante para lo que quiero estudiar más adelante

0 20 40 60 80 100Porcentaje de estudiantes que están de acuerdo o muy de acuerdo

con la afirmación

Su CentroEspaña (en tono más oscuro si es significativamente diferente del de su Centro)

La motivación instrumental en ciencias de los alumnos en su centro y en España en PISA 2006

La creencia sobre la propia eficacia en ciencias de los alumnos en su centro y en España en PISA 2006

Explicar por qué ocurren terremotos con más frecuencia en unas zonas que en otras

Reconocer el problema científico que subyace en un artículo periodístico sobre un tema de salud

Interpretar la información científica contenida en las etiquetas de los productos alimenticios

Predecir en qué medida los cambios medio-ambientales afectarán a la supervivencia de determinadas especies

Identificar el problema científico asociado a la eliminación de basuras

Describir la función de los antibióticos en el tratamiento de una enfermedad

Identificar la mejor de dos explicaciones sobre la formación de la lluvia ácida

Debatir si la aparición de nuevos datos puede hacerte cambiar de opinión sobre la posibilidad de que haya vida en Marte

0 20 40 60 80 100Porcentaje de estudiantes que creen que son capaces de realizar las

tareas siguientes con facilidad o con un poco de esfuerzo

Su CentroEspaña (en tono más oscuro si es significativamente diferente del de su Centro)

Web del INEE

http://mecd.gob.es/inee

GRACIAS

Síguenos en Twitter:@educaINEE

En nuestro blog:http://blog.educalab.es/inee/

Y en slideshare:http://www.slideshare.net/INEE_MECD




INFORMES de GRUPOS de CENTROS

E.E. E.E. E.E.

Grupo de centros 7,7 5,9 7,6

España 1,9 1,9 1,8

OCDE 0,5 0,5 0,5

LECTURA MATEMÁTICAS CIENCIAS

Puntuación media de rendimiento



498 502 513

496 494 501

488 484 496

Promedios de rendimiento del grupo de centros


El grupo de centros y los centros en el contexto español y su valor añadido

C1

C2

C3

C4 C5

C6

C7

C8C9

C10

C11

C12

C13

C14 C15

250

300

350

400

450

500

550

600

650

-2 -1,5 -1 -0,5 0 0,5 1 1,5 2

Esca

la d

e m

atem

átic

as e

n PI

SA 2

012

Perfil socioeconómico y cultural (ISEC)

Los centros educativos ubicados por encimade la línea diagonal obtienen una puntuación media mejor de la que se esperaría en función del nivel socioeconómico y cultural de los estudiantes.

Los centros educativos ubicados por debajode la línea diagonal obtienen una puntuación

media inferior a la que se esperaría en función del nivel socioeconómico y cultural de

los estudiantes.

Promedio España 2012 (484)

Prom

edio

Esp

aña

2012

Centros de España que han participado en PISA 2012

Centros del Grupo que han participado en PISA para Centros Educativos

Promedio del grupo (502)

Prom

edio

del

gru

po


Niveles de rendimiento del grupo de centros

FinlandiaAlemania

Reino UnidoFrancia

ItaliaPortugal

Países OCDEEspaña

Grupo de Centros

Centro Educativo 1Centro Educativo 2Centro Educativo 3Centro Educativo 4Centro Educativo 5Centro Educativo 6Centro Educativo 7Centro Educativo 8Centro Educativo 9

Centro Educativo 10Centro Educativo 11Centro Educativo 12Centro Educativo 13Centro Educativo 14Centro Educativo 15


100% 80% 60% 40% 20% 0% 20% 40% 60% 80% 100%

Porcentaje de estudiantes que se encuentran en diferentes niveles de rendimiento en matemáticas

Nivel <1 Nivel 1 Nivel 2 Nivel 3 Nivel 4 Nivel 5 Nivel 6


El grupo de centros en el contexto nacional e internacionalGrupo de Centros

Selección de países y Promedio OCDE

Comunidades Autónomas

Grupo de Centros

Punt

uaci

ón p

rom

edio

en

la e

scal

a de

mat

emát

icas

en

PIS

A 2

012

España

Países OCDEPortugal

Francia

Italia

Alemania

Reino Unido

Finlandia

Andalucía

AragónAsturias

Baleares

Cantabria

Castilla y León

Cataluña

Extremadura

Galicia

La Rioja Madrid

Murcia

Navarra

País Vasco

600

400

550

500

450


Clima de disciplina

E

75%

70%

87%

91%

95%

85%

83%

91%

90%

88%

92%

79%

92%

83%

71%

86%

87%

94%

D

79%

77%

92%

94%

95%

90%

81%

91%

96%

97%

94%

88%

100%

94%

82%

96%

92%

94%

C

75%

67%

82%

89%

98%

79%

67%

97%

84%

81%

86%

69%

100%

82%

79%

71%

82%

92%

B

70%

68%

84%

89%

95%

84%

67%

97%

82%

87%

92%

73%

100%

88%

55%

84%

81%

94%

A

70%

66%

85%

91%

89%

81%

75%

94%

70%

88%

98%

79%

88%

91%

66%

89%

81%

84%

Países OCDE

España

Grupo de Centros

Centro Educativo 1

Centro Educativo 2

Centro Educativo 3

Centro Educativo 4

Centro Educativo 5

Centro Educativo 6

Centro Educativo 7

Centro Educativo 8

Centro Educativo 9

Centro Educativo 10

Centro Educativo 11

Centro Educativo 12

Centro Educativo 13

Centro Educativo 14

Centro Educativo 15

Porcentaje de estudiantes que informan que lo siguiente

ocurre "nunca o casi nunca" o "en algunas clases"

350 400 450 500 550 600 650Rendimiento promedio

Todos los estudiantes

Cuartil inferior

Cuartil superior

Rendimiento en matemáticas en función de los cuartiles del índice del clima de disciplina

A Los alumnos no atienden a lo que dice el profesorB Hay ruido y falta de ordenC El profesor tiene que esperar mucho rato hasta lograr el silencio en la claseD Los alumnos no pueden trabajar bienE Los alumnos no empiezan a trabajar hasta mucho después de comenzada la clase


Repetición escolar en el grupo de centros en el contexto internacional

29%

12%

3% 4%

17%20%

28%33% 34%

Grupo deCentros

PromedioOCDE

ReinoUnido

Finlandia Italia Alemania Francia España Portugal

Porc

enta

je d

e re

petid

ores

a lo

s 15

año

s

80

70

60

0

20

30

40

50

10


Repetición escolar en el grupo de centros en el contexto nacional

0 10 20 30 40 50 60 70 80 90 100

C1

C2

C3

C4C5

C6C7

C8C9C10

C11

C12

C13

C14 C15

200

250

300

350

400

450

500

550

600

650

700

Esca

la d

e m

atem

átic

as e

n PI

SA 2

012

Porcentaje de repetidores

Promedio del grupo (502)

Prom

edio

del

gru

po (2

%)

Promedio España 2012 (484)

Prom

edio

Esp

aña

201

2

Centros de España que han participado en PISA 2012

Centros del Grupo que han participado en PISA para Centros Educativos

Los centros educativos en este cuadrante obtienen un rendimiento

bajo en matemáticas y cuentan con un porcentaje alto de repetidores,

comparado con el rendimiento promedio y el porcentaje de repetidores de España

en PISA 2012.

Los centros educativos en este cuadrante obtienen un rendimiento alto

en matemáticas y cuentan con un porcentaje alto de repetidores,

comparado con el rendimiento promedio y el porcentaje de repetidores de España

en PISA 2012.

Los centros educativos en este cuadrante obtienen un rendimiento alto en matemáticas y cuentan con un porcentaje bajo de repetidores, comparado con el rendimiento promedio y el porcentaje de repetidores de España en PISA 2012.

Los centros educativos en este cuadrante obtienen un rendimiento bajo en matemáticas y cuentan con un porcentaje bajo de repetidores,comparado con el rendimiento promedio y el porcentaje de repetidores de España en PISA 2012.

VALOR AÑADIDO DE LOS CENTROS

Valor añadido: Relación Rendimiento y Nivel socioeconómico y cultural

y = 59,543x + 500,14R² = 0,4821

100

200

300

400

500

600

700

-2,5 -2 -1,5 -1 -0,5 0 0,5 1 1,5

ESCS_MATH


Valor añadido: Diferencia entre rendimiento esperado y obtenido

y = 1E-07x - 1E-07R² = 4E-18

-250

-200

-150

-100

-50

0

50

100

-2,5 -2 -1,5 -1 -0,5 0 0,5 1 1,5

ESCS_VaMatToVa


Valor añadido: Diferencia entre rendimiento esperado y obtenido

-250

-200

-150

-100

-50

0

50

100

-2,5 -2 -1,5 -1 -0,5 0 0,5 1 1,5

ESCS_VaMatTo_3CAT


Valor añadido: Variables relacionadas con el valor añadido (Nivel de confianza del 99%)

Corr Eff Causa EfectoALUMNO

,167** + ANCBELONG Integración/Pertenencia x

,093** + ANCINSTMOT Motivación utilitaria MAT x

-,154** - TIMEINT Tiempo Uso Computadora x

ALUMNO_PROFESOR,139** + ANCSTUDREL Calidad relación profesor-alumno x

PROFESOR

,146** + ANCCOGACT Activación cognitiva/Estimulación MAT x

,126** + DISCLIMA Orden en las clases x

CENTRO-,375** - REPEAT Repetición de curso x x

,101** + LEADINST Liderazgo pedagógico x

,092** + SCHAUTON Autonomía del centro educativo x

Web del INEE


GRACIAS

Síguenos en Twitter:@educaINEE

En nuestro blog:http://blog.educalab.es/inee/

Y en slideshare:http://www.slideshare.net/INEE_MECD




INEE Curso UIMP 2016 - Evaluación educativa: Isabel Couso Tapia y Gillermo Gil Escudero

Education

Transcript of INEE Curso UIMP 2016 - Evaluación educativa: Isabel Couso Tapia y Gillermo Gil Escudero