El estudio PISAEl estudio PISAPPrograma para la rograma para la EEvaluación valuación

IInternacional de nternacional de AAlumnoslumnos

2

¿Qué es PISA?

• Un estudio:

– del rendimiento educativo de los alumnos de 15 años,

– de comparación internacional entre países,

– cíclico realizado con una periodicidad trienal,

– orientado a la política educativa,

– organizado y gestionado por la OCDE.

3

Materias evaluadas por PISA

• Las materias son Lectura, Matemáticas y Ciencias. • En PISA 2003 también Solución de problemas.

• En cada estudio hay una materia principal:• En PISA 2000: LECTURA, Matemáticas, Ciencias.• En PISA 2003: Lectura, MATEMÁTICAS, Ciencias, Problemas.• En PISA 2006: Lectura, Matemáticas, CIENCIAS.

– De las otras sólo se hace un sondeo.

– En PISA 2000, la materia principal ocupó 66% del tiempo, cada una de las dos secundarias 17%.

– En PISA 2003, La materia principal ocupó el 55% del estudio, cada una de las tres secundarias, el 15%.

4

Cobertura geográfica de PISA

• Países participantes:• Entre PISA 2000 y 2003 han participado 48 países.• PISA 2006 participan 58 países.

• En España:

– En 2000, participaron 6.214 alumnos y 185 centros.

– En 2003, 10.761 alumnos y 383 centros.

• Ampliaron muestra Castilla y León, Cataluña y País Vasco.

– En 2006, unos 23.000 alumnos y 707 centros.

• Ampliarán muestra 10 Comunidades Autónomas: Andalucía, Aragón, Asturias, Cantabria, Castilla y León, Cataluña, Galicia, La Rioja, Navarra, País Vasco.

5

Enfoque no-curricular de PISA

• PISA no evalúa un curso determinado o contenidos previamente definidos en el currículo.

• PISA evalúa los conocimientos y destrezas acumulados por los alumnos hasta los 15 años.

– En esta edad se suele terminar la educación obligatoria en la mayoría de los países.

• El objetivo específico de evaluación de PISA es la literacy necesaria para la vida adulta.

– El término literacy es muy difícil de traducir, pero no de explicar.

6

PISA evalúa la literacy

• El concepto de literacy:

– No es equivalente a alfabetización. Se supone que los alumnos saben ya leer.

– No consiste sólo en conocimientos sino en capacidad de aplicación en la vida diaria.

– La mejor traducción sería “preparación”.

• Como componentes de esta preparación, PISA enfatiza:

– el dominio de los procesos,

– la comprensión de los conceptos,

– la capacidad de operar en situaciones reales.

7

Organización de la evaluación PISA

• Pruebas de papel y lápiz.

• Incluye preguntas:– cerradas,

– abiertas de respuesta corta,

– abiertas de respuesta larga.

• Las preguntas se agrupan en unidades, bajo estímulos comunes cercanos a la vida real. Ventajas:– no se cambia continuamente el contexto de cada pregunta,

– permiten que las preguntas profundicen más en la materia.

• Habrá 13 cuadernos de prueba, parcialmente solapados (muestreo matricial).

• Habrá también un cuestionario de contexto para alumnos y otro para directores (pero no para profesores).

8

Eje

mp

lo d

e p

reg

un

ta 1

9

Eje

mp

lo d

e p

reg

un

ta 2

10

Ejemplode

pregunta 3

11

Ejemplode

pregunta 4

12

Ejemplode

pregunta 5

Resultadosde PISA 2003

14

Puntuaciones en Matemáticas

• En total 85 preguntas agrupadas en 4 dimensiones:

– Espacio y forma, Cambio y relaciones, Cantidad e Incertidumbre

• Las puntuaciones:

– se calculan según el modelo de Rasch (TRI de un parámetro),

– se extrapolan a la población mediante 5 valores plausibles,

– se expresan en una escala de 500 puntos de media (OCDE)y 100 de desviación típica,

• Las puntuaciones describen:

– la capacidad de los alumnos,

– la dificultad de las preguntas.

15

Media E.T. S. Media E.T. S.

1 Hong Kong-China* 550 (4,5) 21 Eslovaquia 498 (3,3)

2 Finlandia 544 (1,9) 22 Noruega 495 (2,4)

3 Corea 542 (3,2) Cataluña 494 (4,7) -

4 Holanda 538 (3,1) 23 Luxemburgo 493 (1,0)

5 Liechtenstein* 536 (4,1) 24 Polonia 490 (2,5) -

6 Japón 534 (4,0) 25 Hungría 490 (2,8) -

7 Canadá 532 (1,8) 26 España 485 (2,4) -

8 Bélgica 529 (2,3) 27 Letonia* 483 (3,7) -

9 Macao-China* 527 (2,9) 28 Estados Unidos 483 (2,9) -

10 Suiza 527 (3,4) 29 Rusia* 468 (4,2)

11 Australia 524 (2,1) 30 Portugal 466 (3,4)

12 Nueva Zelanda 523 (2,3) 31 Italia 466 (3,1)

13 República Checa 516 (3,5) 32 Grecia 445 (3,9)

14 Islandia 515 (1,4) 33 Serbia* 437 (3,8)

15 Dinamarca 514 (2,7) 34 Turquía 423 (6,7)

16 Francia 511 (2,5) 35 Uruguay* 422 (3,3)

17 Suecia 509 (2,6) 36 Tailandia* 417 (3,0)

18 Austria 506 (3,3) 37 México 385 (3,6)

Castilla y León 503 (4,0) 38 Indonesia* 360 (3,9)

19 Alemania 503 (3,3) 39 Túnez* 359 (2,5)

20 Irlanda 503 (2,4) 40 Brasil* 356 (4,8)

País Vasco 502 (2,8) Promedio OCDE 500 (0,6)

E.T. Error típico

S. Significatividad de la diferencia con España

más alta

más baja

Los países con asterisco no son miembros de la OCDE

Resultados en Matemáticas I

España queda:

• por debajo de Suecia, Francia, Alemania

• a la altura de Polonia, Hungría y Estados Unidos

• por encima de Portugal, Italia y Grecia

Con respecto a PISA 2000

mejoría en:

• Espacio y forma (geometría): + 4 puntos

• Cambio y relaciones (álgebra) + 13 puntos

16

Resultados en Matemáticas II

Resultados en Matemáticas

300

350

400

450

500

550

600

Hon

g K

ong-

Chi

na*

Fin

land

ia

Cor

ea

Hol

anda

Liec

hten

stei

n*

Japó

n

Can

adá

Bél

gica

Mac

ao-C

hina

*

Sui

za

Aus

tral

ia

Nue

va Z

elan

da

Rep

úblic

a C

heca

Isla

ndia

Din

amar

ca

Fra

ncia

Sue

cia

Aus

tria

Cas

tilla

y L

eón

Ale

man

ia

Irla

nda

Paí

s V

asco

Esl

ovaq

uia

Nor

uega

Cat

aluñ

a

Luxe

mbu

rgo

Pol

onia

Hun

gría

Esp

aña

Leto

nia*

Est

ados

Uni

dos

Rus

ia*

Por

tuga

l

Italia

Gre

cia

Ser

bia*

Tur

quía

Uru

guay

*

Tai

land

ia*

Méx

ico

Indo

nesi

a*

Tún

ez*

Bra

sil*

Pro

med

io O

CD

E

17

Resultados en Matemáticas III

Canadá

Nueva ZelandaRep. Checa

Liechtenstein*Finlandia

Francia

EstadosUnidos

Australia

Eslovaquia

Holanda

Islandia

País Vasco

Uruguay*

Hong-Kong-China*

Hungría

Bélgica

DinamarcaCastilla y León

México

Tailandia*

Polonia

Suiza

Suecia

Cataluña Luxemburgo

Rusia*

Noruega

España

Macao-China*

Brasil*

Serbia*

Austria

Italia

Indonesia*

Letonia*

Irlanda

Portugal

Japón

Túnez*

Alemania

Corea

Turquía

Grecia

350

400

450

500

550

600

Europa del sur yMediterráneo

Europa del norte Europa del centro-oeste Europa del este Asia-Pacífico América

18

Su

b-á

reas

en

Mat

emát

icas

IMedia E.T. S. Media E.T. S. Media E.T. S. Media E.T. S.

1 Hong Kong-China* 558 (4,8) 1 Holanda 551 (3,1) 1 Finlandia 549 (1,8) 1 Hong Kong-China* 558 (4,6) 2 Japón 553 (4,3) 2 Corea 548 (3,5) 2 Hong Kong-China* 545 (4,2) 2 Holanda 549 (3,0) 3 Corea 552 (3,8) 3 Finlandia 543 (2,2) 3 Corea 537 (3,0) 3 Finlandia 545 (2,1) 4 Suiza 540 (3,5) 4 Hong Kong-China* 540 (4,7) 4 Liechtenstein* 534 (4,1) 4 Canadá 542 (1,8) 5 Finlandia 539 (2,0) 5 Liechtenstein* 540 (3,7) 5 Macao-China* 533 (3,0) 5 Corea 538 (3,0) 6 Liechtenstein* 538 (4,6) 6 Canadá 537 (1,9) 6 Suiza 533 (3,1) 6 Nueva Zelanda 532 (2,3) 7 Bélgica 530 (2,3) 7 Japón 536 (4,3) 7 Bélgica 530 (2,3) 7 Macao-China* 532 (3,2) 8 Macao-China* 528 (3,3) 8 Bélgica 535 (2,4) 8 Holanda 528 (3,1) 8 Australia 531 (2,2) 9 República Checa 527 (4,1) 9 Nueva Zelanda 526 (2,4) 9 Canadá 528 (1,8) 9 Japón 528 (3,9)

10 Holanda 526 (2,9) 10 Australia 525 (2,3) 10 República Checa 528 (3,5) 10 Islandia 528 (1,5) 11 Nueva Zelanda 525 (2,3) 11 Suiza 523 (3,7) 11 Japón 527 (3,8) 11 Bélgica 526 (2,2) 12 Australia 521 (2,3) 12 Francia 520 (2,6) 12 Australia 517 (2,1) 12 Liechtenstein* 523 (3,7) 13 Canadá 518 (1,8) 13 Macao-China* 519 (3,5) 13 Dinamarca 516 (2,6) 13 Irlanda 517 (2,6) 14 Austria 515 (3,5) 14 República Checa 515 (3,5) 14 Alemania 514 (3,4) 14 Suiza 517 (3,3) 15 Dinamarca 512 (2,8) 15 Islandia 509 (1,4) 15 Suecia 514 (2,5) 15 Dinamarca 516 (2,8) 16 Francia 508 (3,0) 16 Dinamarca 509 (3,0) 16 Islandia 513 (1,5) 16 Noruega 513 (2,6) 17 Eslovaquia 505 (4,0) 17 Alemania 507 (3,7) 17 Austria 513 (3,0) 17 Suecia 511 (2,7) 18 Islandia 504 (1,5) 18 Irlanda 506 (2,4) 18 Eslovaquia 513 (3,4) Castilla y León 510 (3,9) 19 Alemania 500 (3,3) 19 Suecia 505 (2,9) País Vasco 511 (2,9) 18 Francia 506 (2,4) 20 Suecia 498 (2,6) 20 Austria 500 (3,6) 19 Nueva Zelanda 511 (2,2) País Vasco 503 (2,9)

Castilla y León 498 (4,4) País Vasco 499 (2,9) Castilla y León 508 (4,1) 19 República Checa 500 (3,1) País Vasco 493 (2,5) Castilla y León 498 (4,7) 20 Francia 507 (2,5) Cataluña 495 (5,0) -

21 Polonia 490 (2,7) 21 Hungría 495 (3,1) Cataluña 506 (4,4) - 20 Austria 494 (3,1) -

22 Luxemburgo 488 (1,4) 22 Eslovaquia 494 (3,5) 21 Irlanda 502 (2,5) - 21 Polonia 494 (2,3) -

23 Letonia* 486 (4,0) - 23 Noruega 488 (2,6) - 22 Luxemburgo 501 (1,1) 22 Alemania 493 (3,3) -

24 Noruega 483 (2,5) - Cataluña 488 (5,4) - 23 Hungría 496 (2,7) - 23 Luxemburgo 492 (1,1) -

Cataluña 482 (4,8) - 24 Letonia* 487 (4,4) - 24 Noruega 494 (2,2) - 24 Estados Unidos 491 (3,0) -

25 Hungría 479 (3,3) - 25 Luxemburgo 487 (1,2) - 25 España 492 (2,5) - 25 Hungría 489 (2,6) -

26 España 476 (2,6) - 26 Estados Unidos 486 (3,0) - 26 Polonia 492 (2,5) - 26 España 489 (2,4) -

27 Irlanda 476 (2,4) - 27 Polonia 484 (2,7) - 27 Letonia* 482 (3,6) - 27 Eslovaquia 476 (3,2)

28 Rusia* 474 (4,7) - 28 España 481 (2,8) - 28 Estados Unidos 476 (3,2) 28 Letonia* 474 (3,3)

29 Estados Unidos 472 (2,8) - 29 Rusia* 477 (4,6) - 29 Italia 475 (3,4) 29 Portugal 471 (3,4)

30 Italia 470 (3,1) - 30 Portugal 468 (4,0) - 30 Rusia* 472 (4,0) 30 Italia 463 (3,0)

31 Portugal 450 (3,4) 31 Italia 452 (3,2) 31 Portugal 465 (3,5) 31 Grecia 458 (3,5)

32 Grecia 437 (3,8) 32 Grecia 436 (4,3) 32 Serbia* 456 (3,8) 32 Turquía 443 (6,2)

33 Serbia* 432 (3,9) 33 Turquía 423 (7,6) 33 Grecia 446 (4,0) 33 Rusia* 436 (4,0)

34 Tailandia* 424 (3,3) 34 Serbia* 419 (4,0) 34 Uruguay* 430 (3,2) 34 Serbia* 428 (3,5)

35 Turquía 417 (6,3) 35 Uruguay* 417 (3,6) 35 Tailandia* 415 (3,1) 35 Tailandia* 423 (2,5)

36 Uruguay* 412 (3,0) 36 Tailandia* 405 (3,4) 36 Turquía 413 (6,8) 36 Uruguay* 419 (3,1)

37 México 382 (3,2) 37 México 364 (4,1) 37 México 394 (3,9) 37 México 390 (3,3)

38 Indonesia* 361 (3,7) 38 Túnez* 337 (2,8) 38 Túnez* 364 (2,8) 38 Indonesia* 385 (2,9)

39 Túnez* 359 (2,6) 39 Indonesia* 334 (4,6) 39 Brasil* 360 (5,0) 39 Brasil* 377 (3,9)

40 Brasil* 350 (4,1) 40 Brasil* 333 (6,0) 40 Indonesia* 357 (4,3) 40 Túnez* 363 (2,3)

Promedio OCDE 496 (0,6) Promedio OCDE 499 (0,7) Promedio OCDE 501 (0,6) Promedio OCDE 502 (0,6)

Espacio y forma Cambio y relaciones Cantidad Incertidumbre

19

Sub-áreas en Matemáticas II

500

492

489

481

476

485

450 500

Media OCDE

Cantidad

Incertidumbre

Cambio y relaciones

Espacio y forma

Media ESPAÑA

20

Niveles de rendimiento en Matemáticas

• Puntos de corte:– Nivel 6 668 puntos.

– Nivel 5 606 puntos.

– Nivel 4 544 puntos.

– Nivel 3 482 puntos.

– Nivel 2 420 puntos.

– Nivel 1 358 puntos.

– Nivel <1 hasta 358 p.

• Propiedades estadísticas:– Los niveles están separados por 62 puntos de la escala.

– Un alumno con una determinada puntuación tiene una probabilidad de 62% de contestar correctamente cualquier pregunta de esa misma puntuación.

– Un alumno en el extremo inferior de un nivel tiene una probabilidad de 50% de contestar cualquier pregunta de ese nivel.

21

Po

rcen

taje

s d

e al

um

no

sp

or

niv

eles

de

ren

dim

ien

to I

8

15

25

27

18

7

1

8

13

21

24

19

11

4

0%

5%

10%

15%

20%

25%

30%

nivel < 1 nivel 1 nivel 2 nivel 3 nivel 4 nivel 5 nivel 6Niveles de rendimiento en Matemáticas

Po

rcen

taje

de

alu

mn

os

España OCDE

22

Porcentajes de alumnospor niveles de competencia

España

8·15·25·27·18·7·1

OCDE

8·13·21·24·19·11·4

Finlandia

Corea

Canadá

Hong Kong-China*

Holanda

Macao-China*

Liechtenstein*

Japón

Australia

Suiza

Islandia

Nueva Zelanda

Dinamarca

Castilla y León

País Vasco

Bélgica

Rep. Checa

Francia

Irlanda

Suecia

Austria

Cataluña

Eslovaquia

Noruega

Alemania

Luxemburgo

Polonia

España

Hungría

Letonia*

Estados Unidos

Portugal

Rusia*

Italia

Grecia

Serbia*

Uruguay*

Turquía

Tailandia*

México

Brasil*

Túnez*

Indonesia*

Promedio OCDE

1

2

2

4

3

2

5

5

4

5

5

5

5

5

5

7

5

6

5

6

6

6

7

7

9

7

7

8

8

8

10

11

11

13

18

18

26

28

24

38

53

51

50

8

5

7

8

7

8

9

7

9

10

10

10

10

11

11

12

9

12

11

12

12

13

13

13

14

12

14

15

15

15

16

16

19

19

19

21

24

22

25

30

28

22

27

28

13

16

17

18

14

18

20

17

16

19

18

20

19

21

23

24

16

20

20

24

22

22

24

23

24

19

23

25

25

24

25

24

27

26

25

26

29

24

22

25

21

14

15

15

21

28

24

26

20

23

27

22

22

24

24

26

23

26

28

29

20

24

26

28

25

25

29

25

25

23

26

25

27

24

26

24

24

23

23

20

19

17

13

14

10

7

6

5

24

26

25

25

25

23

24

23

24

23

22

23

22

22

22

22

21

21

22

20

20

20

18

19

19

21

19

18

18

18

17

17

13

13

13

11

8

8

7

5

3

3

19

17

17

15

20

18

14

18

16

14

14

12

14

12

9

8

17

13

12

9

12

11

8

10

9

12

8

8

7

8

6

8

5

5

5

3

2

2

3

1

0

1

11

7

8

5

11

7

5

7

8

6

7

4

7

4

2

2

9

5

3

2

4

4

2

3

3

4

2

2

1

2

2

2

1

2

2

1

0

0

2

0

4

1

10

0

00

0

0

nivel < 1 nivel 1 nivel 2 nivel 3 nivel 4 nivel 5 nivel 6

23

Porcentajesde alumnosen los niveles intermedios de competencia

País Vasco

Castilla y León

Irlanda

Cataluña

Macao-China*

Finlandia

Canadá

Islandia

España

Dinamarca

Letonia*

Francia

Polonia

Noruega

Luxemburgo

Eslovaquia

Austria

Suecia

Hungría

Australia

Corea

Rep. Checa

Portugal

Suiza

Nueva Zelanda

Estados Unidos

Holanda

Rusia*

Japón

Alemania

Liechtenstein*

Italia

Hong Kong-China*

Grecia

Bélgica

Serbia*

Uruguay*

Tailandia*

Turquía

México

Brasil*

Túnez*

Indonesia*

Promedio OCDE

16

16

17

19

11

7

10

15

23

15

24

17

22

21

22

20

19

17

23

14

10

17

30

15

15

26

11

30

13

22

12

32

10

39

16

42

48

54

52

66

75

78

78

21

74

73

72

70

70

70

70

70

69

69

68

68

68

68

67

67

67

67

66

66

66

65

65

64

64

64

64

63

62

62

62

61

59

57

57

56

49

44

42

34

24

22

22

64

10

11

11

10

19

23

20

15

8

16

8

15

10

11

11

13

14

16

11

20

25

18

5

21

21

10

26

7

24

16

26

7

31

4

26

2

3

2

5

0

1

0

0

15

inferiores medios superiores

Dispersión de los resultados en Matemáticas

16,4

16,9

17,9 18,018,2

18,8

20,6

21,1

22,9

24,7

17,017,2

18,4 18,5 18,6 18,7

20,420,8

18,218,4 18,6 18,7

19,119,4

19,7

15,4

17,517,8

18,6 18,6

16,5

17,0

18,2 18,2

18,8 18,8

19,7

22,4

16,4

19,7

22,2

23,6

28,0

12

14

16

18

20

22

24

26

28

30

Paí

s V

asco

Cas

tilla

y L

eón

Cat

aluñ

a

Fra

ncia

Esp

aña

Por

tuga

l

Italia

Gre

cia

Tún

ez*

Tur

quía

Irla

nda

Hol

anda

Aus

tria

Liec

hten

stei

n*

Luxe

mbu

rgo

Sui

za

Ale

man

ia

Bél

gica

Leto

nia*

Pol

onia

Rep

úblic

a C

heca

Esl

ovaq

uia

Hun

gría

Ser

bia*

Rus

ia*

Fin

land

ia

Isla

ndia

Din

amar

ca

Sue

cia

Nor

uega

Mac

ao-C

hina

*

Cor

ea

Aus

tral

ia

Hon

g K

ong-

Chi

na*

Japó

n

Nue

va Z

elan

da

Tai

land

ia*

Indo

nesi

a*

Can

adá

Est

ados

Uni

dos

Méx

ico

Uru

guay

*

Bra

sil*

Europa del sur y Mediterráneo Europa del centro-oeste Europa del este Europa del norte Asia-Pacíf ico América

Coe

ficie

nte

de v

aria

ción

25

Resultados en Lectura, Ciencias y Solución de problemas

Resultados en Lectura

300

350

400

450

500

550

600

Fin

land

ia

Cor

ea

Can

adá

Aus

tral

ia

Liec

hten

stei

n*

Nue

va Z

elan

da

Irla

nda

Sue

cia

Hol

anda

Hon

g K

ong-

Chi

na*

Bél

gica

Nor

uega

Cas

tilla

y L

eón

Sui

za

Japó

n

Mac

ao-C

hina

*

Paí

s V

asco

Pol

onia

Fra

ncia

Est

ados

Uni

dos

Din

amar

ca

Isla

ndia

Ale

man

ia

Aus

tria

Leto

nia*

Rep

úblic

a C

heca

Cat

aluñ

a

Hun

gría

Esp

aña

Luxe

mbu

rgo

Por

tuga

l

Italia

Gre

cia

Esl

ovaq

uia

Rus

ia*

Tur

quía

Uru

guay

*

Tai

land

ia*

Ser

bia*

Bra

sil*

Méx

ico

Indo

nesi

a*

Tún

ez*

Pro

med

io O

CD

E

Resultados en Ciencias

300

350

400

450

500

550

600

Din

amar

ca

Japó

n

Hon

g K

ong-

Chi

na*

Cor

ea

Liec

hten

stei

n*

Aus

tral

ia

Mac

ao-C

hina

*

Hol

anda

Can

adá

Nue

va Z

elan

da

Bél

gica

Sui

za

Fin

land

ia

Ale

man

ia

Sue

cia

Irla

nda

Hun

gría

Cat

aluñ

a

Fra

ncia

Cas

tilla

y L

eón

Pol

onia

Esl

ovaq

uia

Isla

ndia

Est

ados

Uni

dos

Aus

tria

Rus

ia*

Leto

nia*

Esp

aña

Italia

Nor

uega

Paí

s V

asco

Luxe

mbu

rgo

Gre

cia

Rep

úblic

a C

heca

Por

tuga

l

Uru

guay

*

Ser

bia*

Tur

quía

Tai

land

ia*

Méx

ico

Indo

nesi

a*

Bra

sil*

Tún

ez*

Pro

med

io O

CD

E

Resultados en Solución de problemas

300

350

400

450

500

550

600

Cor

ea

Hon

g K

ong-

Chi

na*

Din

amar

ca

Japó

n

Nue

va Z

elan

da

Mac

ao-C

hina

*

Aus

tral

ia

Liec

hten

stei

n*

Bél

gica

Ale

man

ia

Sui

za

Hol

anda

Fin

land

ia

Rep

úblic

a C

heca

Can

adá

Fra

ncia

Sue

cia

Aus

tria

Cas

tilla

y L

eón

Isla

ndia

Hun

gría

Irla

nda

Paí

s V

asco

Luxe

mbu

rgo

Cat

aluñ

a

Esl

ovaq

uia

Nor

uega

Pol

onia

Leto

nia*

Esp

aña

Rus

ia*

Est

ados

Uni

dos

Por

tuga

l

Italia

Gre

cia

Tai

land

ia*

Ser

bia*

Uru

guay

*

Tur

quía

Méx

ico

Bra

sil*

Indo

nesi

a*

Tún

ez*

Pro

med

io O

CD

E

26

Comparación entre PISA 2000 Y PISA 2003en las restantes materias

PISA 2000 PISA 2003 Evolución

Lectura 493 481 - 12 V

Ciencias 491 487 - 4

Solución de problemas

-- 482 --

27

Correlaciones entre las materias

Matemáticas con Lectura 0,699

Matemáticas con Ciencias 0,748

Matemáticas con Problemas 0,848

Lectura con Ciencias 0,796

Lectura con Problemas 0,784

Ciencias con Problemas 0,706

28

Valoración de los resultados I

Producto Interior Bruto per capita

R2 = 0,44

300

350

400

450

500

550

600

0 10.000 20.000 30.000 40.000 50.000 60.000

PIB per capita

Pun

tuac

ión

en M

atem

átic

as

España

Grecia

Portugal Italia

Luxemburgo

Estados Unidos

Noruega

Indonesia

Brasil

Túnez

México

TurquíaUruguay

Tailandia

Serbia y M.

Rusia

Letonia

Polonia

Eslovaquia

Hungría

Rep. Checa

CoreaLiechtenstei

N. Francia

Suiza

Alemania Irlanda

FinlandiaHong-Kong

Canad

Dinamarca

Maca

Castilla y

Cataluña

P. Vasco

29

Valoración de los resultados II

Índice PISA de estatus socio-económico y cultural

R2 = 0,51

300

350

400

450

500

550

600

-1,5 -1,0 -0,5 0,0 0,5 1,0

Indice PISA de estatus socio-económico y cultural

Pun

tuac

ión

en M

atem

átic

as

España

Portugal

Uruguay

Serbia y M.

Grecia

Italia

Islandia

Noruega

Canadá

FinlandiaHong-Kong

Macao

Corea

Japón

SuizaFrancia

Polonia

Tailandia Turquía

México

BrasilIndonesiaTúnez

Letonia Estados Unidos

Luxemburgo

Suecia

Holanda

AlemaniaCastilla y

P.

CataluñaHungría

Austria

Chequia

30

Val

ora

ció

n d

e lo

s re

sult

ado

s II

I

Excelencia y equidad (medias y coeficiente de variación)

Brasil

Uruguay

Finlandia

España

Canadá

País VascoIrlanda

Castilla y León

Cataluña

CoreaHolanda

Turquía

México

Grecia

Italia

Bélgica

Alemania OCDE

EEUU

Portugal

Hungría

IslandiaAustralia

Japón

350

400

450

500

550

600

650

151617181920212223242526272829

Coeficiente de variación en Matemáticas

Pun

tuac

ión

med

ia e

n M

atem

átic

as

Mayor equidad

Ma

yo

r e

xc

ele

nc

ia

31

Distribución de la varianzainter-e intra- centros

IslandiaFinlandiaNoruegaCataluñaSueciaPaís VascoPoloniaCastilla y LeónDinamarcaIrlandaCanadáMacao*EspañaNueva ZelandaLetonia*AustraliaEstados UnidosMéxicoSerbia y M.*Rusia*PortugalTailandia*LuxemburgoIndonesia*Túnez*SuizaGreciaLiechtenstein*EslovaquiaCoreaBrasil*Rep. ChecaHong-Kong*Uruguay*HolandaAustriaAlemaniaItaliaBélgicaJapónHungríaTurquía

Promedio OCDE

4

4

6

10

11

11

12

12

13

13

15

17

17

20

21

22

27

29

30

30

30

30

31

32

33

36

39

40

42

42

49

51

53

54

55

55

56

57

57

62

66

69

34

91

77

92

80

93

68

83

71

84

71

73

75

70

91

71

82

78

45

54

69

60

51

68

39

45

70

68

55

58

58

60

55

60

69

40

49

53

52

67

55

47

56

67

0 25 50 75 100 125

Atribuible a los centros Atribuible a los alumnos

32

Diferenciaspor titularidadde los centros I

Finlandia

Japón

Canadá

Corea

Suiza

Holanda

Nueva Zelanda

Rep. Checa

Islandia

Dinamarca

Suecia

Austria

Alemania

Luxemburgo

Eslovaquia

Bélgica

Noruega

Polonia

Hungría

Castilla y León

País Vasco

Irlanda

Estados Unidos

Cataluña

España

Italia

Portugal

Grecia

Turquía

México

Global OCDE

545

543

530

528

528

521

521

517

515

515

509

504

498

498

495

495

494

490

489

488

488

485

484

481

472

467

465

442

418

374

482

539

511

574

553

504

540

580

514

508

511

516

522

564

463

523

547

533

543

507

524

511

514

509

510

507

441

484

506

569

438

520

Públicos Privados

33

Diferenciaspor titularidadde los centrosII

HolandaBélgicaPaís VascoIrlandaCoreaCataluñaCastilla y LeónEspañaJapónDinamarcaLuxemburgoMéxicoEslovaquiaHungríaAustriaAlemaniaRep. ChecaFinlandiaPortugalCanadáEstados UnidosSuizaNueva ZelandaSueciaItaliaGreciaTurquíaNoruegaPoloniaIslandia

Promedio OCDE

77%

68%

60%

58%

58%

48%

42%

38%

27%

22%

14%

13%

13%

11%

8%

8%

7%

7%

6%

6%

6%

5%

5%

4%

4%

3%

1%

1%

1%

0%

20%

Porcentaje de alumnos en centros privados

34

Diferencias por titularidadde los centros III

Sin ESEC indiv. y de centro

35 35 29 2317 17 14 151 10 8 100

10

20

30

40

España Castilla y León Cataluña País Vasco

Dif. bruta Sin ESEC indiv. Sin ESEC indiv. y de centro

35

Diferenciaspor titularidadde los centros IV

Fuente: PISA, OCDE

75 50 25 0 25 50 75

Alemania

Nueva Zelanda

México

Canadá

España

Irlanda

Corea

Eslovaquia

Holanda

Estados Unidos

Portugal

Austria

Hungría

Suecia

Rep. Checa

Dinamarca

Finlandia

Suiza

Italia

Japón

Luxemburgo

Global OCDE

Bruta Sin ESEC indiv. Sin ESEC indiv. y de centro

Dif

ere

nc

ia a

fa

vor

de

los

ce

ntr

os

pri

vad

os

Dif

ere

nc

ia a

fa

vor

de

los

ce

ntr

os

pú

bli

cos

36

Diferencias de género en Matemáticas

IslandiaTailandiaSerbia y M.*País VascoLetonia*Indonesia*Hong-Kong*HolandaAustraliaPoloniaNoruegaEstados UnidosSueciaFinlandiaBélgicaAustriaHungríaJapónFranciaEspañaAlemaniaRusia*MéxicoCanadáCastilla y LeónUruguayTúnezPortugalNueva ZelandaIrlandaRep. ChecaTurquíaBrasil*DinamarcaSuizaLuxemburgoCataluñaItaliaEslovaquiaGreciaMacao*CoreaLiechtenstein*

Promedio OCDE

-15-4

113345566677888899910111111121212

1415151516171717181819192123

29

11

37

Diferencias de génerode los resultadosde Lectura, Ciencias y Solución de problemas

Macao*

Liechtenstein*

Holanda

Corea

México

Japón

Indonesia*

Túnez

Dinamarca

Nueva Zelanda

Rusia*

Irlanda

Hungría

Rep. Checa

Canadá

Hong-Kong*

Estados Unidos

Eslovaquia

Luxemburgo

Turquía

Brasil*

Suiza

Portugal

Suecia

Bélgica

Castilla y León

Grecia

Francia

Letonia*

España

Uruguay

Australia

Italia

Polonia

Cataluña

Alemania

Tailandia

Serbia y M.*

Finlandia

País Vasco

Austria

Noruega

Islandia

Promedio OCDE

Valores negativos: diferencia a favor de las mujeres Valores positivos: diferencia a favor de los varones

Países ordenados por la diferencia de rendimiento por razón de género en Lectura

Lectura Ciencias Solución de problemas

-13

-17

-21

-21

-21

-22

-24

-25

-25

-28

-29

-29

-31

-31

-32

-32

-32

-33

-33

-33

-35

-35

-36

-37

-37

-37

-37

-38

-39

-39

-39

-39

-39

-40

-42

-42

-43

-43

-44

-45

-47

-49

-58

-34

8

26

5

18

9

4

1

-10

17

16

9

2

-1

6

11

-3

5

15

13

0

6

10

6

5

0

9

12

0

-4

4

4

0

6

7

5

6

-8

-5

-6

-6

-3

2

-10

6

11

12

4

8

5

-2

-7

3

5

-3

2

1

-4

7

0

-5

-1

7

2

2

5

-2

0

-10

-3

-6

2

-1

-3

-6

3

-6

-4

-1

-3

-6

-12

-7

-10

-12

-3

-8

-30

-2

38

Entrega, motivación y auto-imagen

-0,07

-0,05

0,14

0,2

-0,19

-0,04

Disfrute e interés por las matemáticas

Motivación instrumental

Valoración de la institución escolar

Sentimiento de pertenencia al centro

Auto-concepto en matemáticas

Auto-eficacia en matemáticas

39

Factores emocionalesy estrategias de estudio

0,28

-0,02

0,07

0,09

0,42

0,13

Ansiedad enmatemáticas

Ansiedad alumnos

Ansiedad alumnas

Estrategias de control

Estrategias dememorización

Estrategias deelaboración

40

Resultados por libros en casa

402

436

471

502

526 534

350

400

450

500

550

0-10 11-25 26-100 101-200

201-500

Más de500

41

Resultados por estudios que desea terminar

487

456

513

484

529

450

500

550

ESO Ciclos deGrado Medio

Bachillerato Ciclos deGrado

Superior

Universitarios

42

Resultados por estudios de la madre y del padre

525

491

475

525

495484

450

500

550

EstudiosUniversitarios

FormaciónProfesional deGrado Superior

FormaciónProfesional deGrado Medio

Madre

Padre

43

Resultados por actividad de la madre y del padre

494

481477

480

490

462 460

486

450

500

Trabaja atiempo

completo

Trabaja atiempoparcial

Está en paro Otras cosas

Madre

Padre

44

Resultados por profesiones de los padres

573 Profesor de universidad 549 Profesora de secundaria

551 Ingeniero 547 Profesora de universidad

551 Oficinista 546 Maestra de preescolar

549 Profesor de secundaria 543 Farmacéutica

540 Arquitecto 543 Médico

537 Militar (Suboficial) 531 Oficinista

532 Médico 530 Maestra primaria

529 Militar (Oficial) 530 Maestra educación especial

527 Maestro de primaria 524 Contable

526 Abogado 520 Ayudante Técnico Sanitario· · · ·· · · ·· · · ·

462 Zapatero 465 Cocinera

458 Mecánico 463 Limpiadora

457 Peón 460 Zapatera

454 Cocinero 460 No sé

454 Carpintero 453 Obrera de la industria

452 Marinero 453 Agricultora cualificada

447 Empleado de limpieza 453 Directora de ventas

443 Pintor 452 Servicio doméstico

437 Albañil 442 Panadera

428 Trabajador no cualificado 429 Labradora

Padres Madres

45

Papel del entornosocio-económico y cultural

46

28 2625

43

32

0

50

EstudiosObligatorios

Bachillerato Universidad

España %OCDE %

Estudios de mayor nivel alcanzado por las madres

46

Papel del entornosocio-económico y cultural

471

489

514

458

508

532

400 500 600

Estudiosobligatorios

Bachillerato

Universidad

OCDE

España

Resultados en función del mayor nivel educativoalcanzado por las madres

47

Papel del entorno socio-económicoy cultural (SEC)

485

495

500

501

400 450 500 550

Sindescontar elentorno SEC

Descontandoel entorno

SEC

España

OCDE

Impacto del entorno SEC en los resultados

48

Resultados por haber cursadoEducación Infantil

464458

491

450

500

550

No Un año omenos

Más de un año

49

Resultados por repetición de curso

512

433

391

355

300

350

400

450

500

550

No Sólo enSecundaria

Sólo enPrimaria

En Primaria yen

Secundaria

352

428

513

300

350

400

450

500

550

2º ESO3º ESO4º ESO

50

Repetición de curso: ninguno

100

200

300

400

500

600

700

800

-4 -3 -2 -1 0 1 2 3

Índice socio-económ ico y cultural

Pu

ntu

ació

n e

n M

atem

átic

as

51

Repetición de curso: uno

100

200

300

400

500

600

700

800

-4 -3 -2 -1 0 1 2 3

Índice socio-económ ico y cultural

Pu

ntu

ació

n e

n M

atem

átic

as

52

Repetición de curso: dos

100

200

300

400

500

600

700

800

-4 -3 -2 -1 0 1 2 3

Índice socio-económ ico y cultural

Pu

ntu

ació

n e

n M

atem

átic

as

53

Distribución de repetidores por centros

100

200

300

400

500

600

700

Centros en los extremos de la distribución

Pu

ntu

ació

n e

n m

atem

átic

as

La prueba finalde PISA 2006

55

PISA 2006 Trabajo de campo de la prueba final

a) Obtención de la cooperación de los centros

b) Realización del muestreo de alumnos

c) Aplicación de las pruebas y cuestionarios

Tareas

56

a) Obtención de la cooperaciónde los centros

• La empresa aplicadora se pondrá en contacto con las autoridades educativas de la CA.

• Las autoridades educativas de la CA presentarána la empresa ante los centros.

• La empresa pedirá que en cada centro hayauna persona de contacto.

• Con ayuda de esta persona, la empresa comenzará las labores encaminadas al muestreo de alumnos.

57

b) Muestreo de alumnos

• En cada centro se selecciona un máximo de 35 alumnos de 15 años.

• La empresa pide la lista completa de alumnos nacidos en 1990, con nombre, apellidos, sexo, fecha de nacimiento, curso, grupo y estatus de NEE.

• Con ayuda de un software específico, la empresa selecciona de modo aleatorio a los 35 alumnos.

• Los incluye en el Formulario de seguimiento de alumnos.

58

c) Aplicación de pruebas y cuestionarios

• Instrumentos de evaluación:

– 13 cuadernos distintos de prueba: se utilizan todos en cada centro.

– 1 único modelo de cuestionario de alumnos.

– 1 único modelo de cuestionario de centro.

• La prueba dura dos horas, con un breve descanso a la mitad.

• El cuestionario de alumnos necesita una media hora más, tras un nuevo descanso más largo.

• El cuestionario de centro unos 20 minutos.

59

• La empresa pedirá al centro:

– la fijación de una fecha adecuada,

– un aula de capacidad suficiente,

– que no haya preaviso a los alumnos.

• Debe maximizarse el número de alumnos que asisten:

– Si pueden, los alumnos con NEE deben realizar la prueba.

– Si faltan más de un 15% de los alumnos previstos, ha de celebrarse una nueva sesión.

• El contenido de los cuadernos de prueba es confidencial antes y después de la sesión.

– pero el contenido de los cuestionarios no es confidencial.

Muchas gracias

Ramón Pajares Boxramon.pajares@mec.es