Estudio Internacional de alfabetización informática y manejo de tecnologías (ICILS) - Resultados...

Estudio Internacional de alfabetizacióninformática y manejo de tecnologías

(ICILS)

Resultados 2013Dirección General de Evaluación de la Calidad

EducativaNoviembre 2014

Índice• Características Generales

• Marco de Referencia

• Resultados

• Conclusiones

• Características Generales


• Resultados

• Conclusiones

2

CARACTERÍSTICAS GENERALESICILS 2013

3

Características generales• El estudio es impulsado por la Asociación Internacional de

Evaluación Educativa (International Association for theEvaluation of Educational Achievement).

• En Argentina lo coordinó el Ministerio de Educación de laCABA, a través de la DGECE.

• ICILS es el primer estudio internacional comparativo en medirla preparación de los alumnos para su inserción en la era de lainformación.

• El estudio es impulsado por la Asociación Internacional deEvaluación Educativa (International Association for theEvaluation of Educational Achievement).

• En Argentina lo coordinó el Ministerio de Educación de laCABA, a través de la DGECE.

• ICILS es el primer estudio internacional comparativo en medirla preparación de los alumnos para su inserción en la era de lainformación.

4

¿Qué se evaluó y cómo?• ICILS mide la capacidad de utilizar computadoras

para investigar, crear y comunicar, en orden de poderparticipar efectivamente en: hogares, escuelas,trabajos y comunidades.

• La evaluación consistió en la administración de laprueba a través de un USB y una computadora, juntocon cuestionarios complementarios en papel para elalumno, docente y rector.

• ICILS mide la capacidad de utilizar computadoraspara investigar, crear y comunicar, en orden de poderparticipar efectivamente en: hogares, escuelas,trabajos y comunidades.

• La evaluación consistió en la administración de laprueba a través de un USB y una computadora, juntocon cuestionarios complementarios en papel para elalumno, docente y rector.

5

Rasgos básicos de la prueba• Se utilizó Teoría de Respuesta el ítem (TRI) que es

la metodología habitual en los exámenes a granescala.

• Consiste en estimar los niveles de habilidadutilizando preguntas o ítem.

• Es más complicada que la alternativa teoría clásica,exige software específico (y caro).

• Posee muchas ventajas sobre la teoría clásica quees más aplicable a otros contextos (por ejemploacreditar el conocimiento de los contenidos de unamateria)

• Se utilizó Teoría de Respuesta el ítem (TRI) que esla metodología habitual en los exámenes a granescala.

• Consiste en estimar los niveles de habilidadutilizando preguntas o ítem.

• Es más complicada que la alternativa teoría clásica,exige software específico (y caro).

• Posee muchas ventajas sobre la teoría clásica quees más aplicable a otros contextos (por ejemploacreditar el conocimiento de los contenidos de unamateria)

Rasgos básicos de la prueba(II)

• La respuesta a cada pregunta depende de lainteracción entre la “habilidad” del alumno y lascaracterísticas de la pregunta o ítem.

• El estudio trabaja con la metodología de valoresposible (PV por sus siglas en inglés) que realizaimputaciones alternativas para estimar niveles dehabilidad de allí que esa estimación tenga ciertomargen de imprecisión (o error estándar).

• Por ello se reportan media y error estándar

• La respuesta a cada pregunta depende de lainteracción entre la “habilidad” del alumno y lascaracterísticas de la pregunta o ítem.

• El estudio trabaja con la metodología de valoresposible (PV por sus siglas en inglés) que realizaimputaciones alternativas para estimar niveles dehabilidad de allí que esa estimación tenga ciertomargen de imprecisión (o error estándar).

• Por ello se reportan media y error estándar

¿Qué no permite la prueba?• Hablar de porcentajes de respuestas correctas

porque se utilizar TRI.• Obtener resultados a nivel de escuela porque el

estudio es muestral.• Utilizar los datos sin los ponderadores porque

cada escuela representa a N de su clase y parahablar de la CABA deben utilizarse losponderadores o pesos muestrales.

• Obtener resultados a nivel de alumno porque eldiseño por cuadernillos no lo permite.

• Hablar de porcentajes de respuestas correctasporque se utilizar TRI.

• Obtener resultados a nivel de escuela porque elestudio es muestral.

• Utilizar los datos sin los ponderadores porquecada escuela representa a N de su clase y parahablar de la CABA deben utilizarse losponderadores o pesos muestrales.

• Obtener resultados a nivel de alumno porque eldiseño por cuadernillos no lo permite.

¿Qué sistemas educativos participaron?

• En ICILS 2013 participaron 21 sistemaseducativos. Entre ellos:

- Alemania- Australia- Chile- Noruega- Rusia- Ontario, Canadá

• En ICILS 2013 participaron 21 sistemaseducativos. Entre ellos:

- Alemania- Australia- Chile- Noruega- Rusia- Ontario, Canadá

9

¿Cómo se seleccionaron escuelas yalumnos en CABA?

• Escuelas:– El diseño muestral tuvo dos criterios de

representatividad comuna y gestión.– Participó una muestra de 100 escuelas secundarias

(50 del sector de gestión estatal y 50 del sector degestión privada).

• Alumnos– En cada escuela participaron 20 alumnos de 1er año

que fueron seleccionados aleatoriamente una vezingresado el universo total de alumnos del primeraño.

• Escuelas:– El diseño muestral tuvo dos criterios de

representatividad comuna y gestión.– Participó una muestra de 100 escuelas secundarias

(50 del sector de gestión estatal y 50 del sector degestión privada).

• Alumnos– En cada escuela participaron 20 alumnos de 1er año

que fueron seleccionados aleatoriamente una vezingresado el universo total de alumnos del primeraño.

10

Índice• Características Generales


• Resultados

• Conclusiones

• Características Generales


• Resultados

• Conclusiones

11

MARCO DE REFERENCIAICILS 2013

12

Marcos de Referencia

• Tanto las pruebas de conocimiento como locuestionarios de contexto siguen una tabla deespecificaciones o referentes.

13

Marco de referencia:prueba de conocimiento

Eje 1: Recolectar y manejarinformación

Eje 2: Producir e intercambiarinformación

Aspecto 1.1. Conocer y entender eluso de computadoras

Aspecto 2.1. Transformar información

Aspecto 1.2. Acceder y evaluarinformación

Aspecto 2.2. Crear información

14

Aspecto 1.2. Acceder y evaluarinformación

Aspecto 2.2. Crear información

Aspecto 1.3. Manejar información Aspecto 2.3. Compartir información

Aspecto 2.4. Usar información demanera segura

Marco de referenciaFactores de contexto

15

RESULTADOSICILS 2013

16

La Ciudad de Buenos Aires se encuentrapor debajo del promedio de logro de los

sistemas que participaron.

450

500

550

600

17

CABA = 450

350

400

Promedio ICILS 2013Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.

Niveles de desempeño en ICILS

Debajo delnivel 1

Los resultados también se presentan según niveles dedesempeño. En ICILS se definen 4 niveles dedesempeño:

18

Debajo delnivel 1 Nivel 1 Nivel 2 Nivel 3 Nivel 4

< 407puntos

407 - 492puntos

492 - 576puntos

576 - 661puntos

> 661puntos

¿Qué puede hacer cada nivel desempeño?NIVEL DESCRIPCION

Nivel 1 Abrir un link; utilizar software para pegar imágenes; poner un títuloen posición destacada; identificar quiénes reciben mail en un grupo(CC); detectar riesgos sino se hace el log out desde sitios públicos.

Nivel 2 Agregar contactos en un sitio colaborativo; insertar información enuna hoja de cálculo; diferenciar entre contenidos con sponsor ygratis en la web; utilizar editor de páginas de web simple, entreotros

Agregar contactos en un sitio colaborativo; insertar información enuna hoja de cálculo; diferenciar entre contenidos con sponsor ygratis en la web; utilizar editor de páginas de web simple, entreotros

Nivel 3 Utilizar software para mapear una ruta; evaluar la confiabilidad dela información en la web; seleccionar información relevante;adaptar la información y controlar el manejo de una presentaciónentre otros.

Nivel 4 Evaluar la confiabilidad de los contenidos; seleccionar con éxitos losresultados de búsqueda, clasificar y adaptar; reconocer la diferencialegal, técnica y social cuando se utiliza imágines de sitios públicosentre otros.

19

En la CABA se observa una concentración en losniveles de desempeño más bajo a diferencia de

los sistemas de mayor promedio de logro.

64 67

34

30

23 24

4542

27

4042

46

47 41 3739

4642 41 42

4836

40 45

11

40

824

30

7 1321

3016 21 23

1527 32 29 29 34 30

25 23

2

25

11 4 0 0 1 2 0 2 3 1 3 5 4 4 3 5 2 2 0 4 0

30405060708090

100

20

7 5

3118 11 4 8 9 15 15

5 4 8 6 2 9 12 6

64

7

67

22 18

3025

1728 27 23 30

19 1819 20

1319 21

24 24

48

010203040

Debajo del nivel 1 Nivel 1 Nivel 2 Nivel 3 Nivel 4Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.

El de CABA es uno de los sistemas educativosdonde hay menor diferencia de logro por

género

2520

1312

3813

69

352

Ontario, CanadáPaíses Bajos

PoloniaRepública Checa

República de CoreaRepública Eslovaca

SuizaTailandia

Terranova y Labrador, CanadáTurquía

21

1624

525

1515

2913

2517

2325

0 5 10 15 20 25 30 35 40 45

AlemaniaAustralia

CABAChile

CroaciaDinamarca

EsloveniaFederación RusaHong Kong (SAR)

LituaniaNoruega

Ontario, Canadá

Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.

Los puntajes varían según sector degestión con mayor promedio en el sector

de gestión privada

440

460

480

500

22


360

380

400

420

Estatal Privado Total

Se extiende a la distribución por nivelesde desempeño

50%

60%

70%

80%

90%

100%

661 o más

Entre 577 y 661

23

0%

10%

20%

30%

40%

50%

Estatal Privado

Entre 577 y 661

Entre 491 y 577

Entre 407 y 491

Debajo de 407


RESULTADOS¿Cuáles son los factores

asociados a las variaciones?

24

Los resultados, como es deesperar, muestran una relación positiva

con el nivel educativo de los padres

350

400

450

500

550

600

25

300

350

Secundario básico o menos Secundario completoPos secundario no universitario Terciario o universitario


Que en el caso de CABA es muy marcadapara el sector de gestión privada

450

500

550

26

300

350

400

Estatal Privado

Menos de Primario Primario Inc. Secundario Inc. Universitario Inc. Universitario o más


Existen diferencias en el nivel logro de losalumnos según tenencia de computadora

Países BajosPolonia

República ChecaRepública de CoreaRepública Eslovaca

SuizaTailandia

Terranova y Labrador, CanadáTurquía

Diferencia enlos resultadosentre alumnosconcomputadoras yalumnos sincomputadoras

27

25 50 75 100 125 150

AustraliaCABAChile

CroaciaEslovenia

Federación RusaHong Kong (SAR)

LituaniaOntario, Canadá

Países Bajos

Diferencia enlos resultadosentre alumnosconcomputadoras yalumnos sincomputadoras


Y está positivamente relacionada alnúmero de libros en el hogar

391

432

462

487

400420440460480500

28

391

300320340360380400

Categoría 1 (0-10libros)



Categoría 4 (+ de100 libros)


¿Dónde y para qué utilizan lacomputadora los alumnos de

CABA?

29

El acceso es elevado como también lafrecuencia de uso

• 64% de los alumnos tiene 5 años o más deexperiencia con computadoras

• 89% de los alumnos usa la computadora en sucasa al menos una vez por semana

• 57% de los alumnos usa la computadora en laescuela al menos una vez por semana

• 64% de los alumnos tiene 5 años o más deexperiencia con computadoras

• 89% de los alumnos usa la computadora en sucasa al menos una vez por semana

• 57% de los alumnos usa la computadora en laescuela al menos una vez por semana

30

Y en la escuela

• 81% de los alumnos aprendió a buscarinformación con la computadora en la escuela

• 72% de los alumnos aprendió a definir quéinformación es relevante para un trabajoescolar y a organizar información de distintasfuentes en la escuela

• 81% de los alumnos aprendió a buscarinformación con la computadora en la escuela

• 72% de los alumnos aprendió a definir quéinformación es relevante para un trabajoescolar y a organizar información de distintasfuentes en la escuela

31

La tecnología tiene una variedad deusos didácticos

Al menos una vez por semana:• 31% de los alumnos usa computadoras fuera de la

escuela para crear o editar documentos

• 58% de los alumnos usa una computadora parabuscar información o estudiar para la escuela

• 74% de los alumnos usa la computadora paracomunicarse con otras personas a través de las redessociales

Al menos una vez por semana:• 31% de los alumnos usa computadoras fuera de la

escuela para crear o editar documentos

• 58% de los alumnos usa una computadora parabuscar información o estudiar para la escuela

• 74% de los alumnos usa la computadora paracomunicarse con otras personas a través de las redessociales

32

Para estudioAl menos una vez por mes:• 56% de los alumnos usa la computadora para

completar ejercicios

• 49% de los alumnos trabaja en conjunto conotros alumnos de su escuela en la computadora

• 44% de los alumnos usa la computadora pararealizar ensayos o reportes

Al menos una vez por mes:• 56% de los alumnos usa la computadora para

completar ejercicios

• 49% de los alumnos trabaja en conjunto conotros alumnos de su escuela en la computadora

• 44% de los alumnos usa la computadora pararealizar ensayos o reportes

33

Pero también con fines recreacionalesAl menos una vez por semana:• 84% de los alumnos usa la computadora para

escuchar música

• 73% de los alumnos usa la computadora para vervideos, series o películas

• 59% de los alumnos usa la computadora parajugar

Al menos una vez por semana:• 84% de los alumnos usa la computadora para

escuchar música

• 73% de los alumnos usa la computadora para vervideos, series o películas

• 59% de los alumnos usa la computadora parajugar

34

Los alumnos de la CABA y latecnología…

• El 95% de los alumnos de la CABA piensa que:- Trabajar con computadoras es divertido- Es importante para ellos trabajar concomputadoras- Les gusta aprender cosas nuevas paratrabajar con la computadora

• El 95% de los alumnos de la CABA piensa que:- Trabajar con computadoras es divertido- Es importante para ellos trabajar concomputadoras- Les gusta aprender cosas nuevas paratrabajar con la computadora

35

CONCLUSIONES

36

Docentes y las TICs

• El uso de las TIC en las escuelas sigue siendolimitada .

• Los profesores tienden a utilizar las TIC en laenseñanza cuando tienen confianza en estashabilidades .

• A nivel mundial el 46% de los profesoresadquieren conocimientos en TIC mediante laobservación de otros profesores que utilizanlas TIC en la clase.

• El uso de las TIC en las escuelas sigue siendolimitada .

• Los profesores tienden a utilizar las TIC en laenseñanza cuando tienen confianza en estashabilidades .

• A nivel mundial el 46% de los profesoresadquieren conocimientos en TIC mediante laobservación de otros profesores que utilizanlas TIC en la clase.

37

Alumnos y las TICs

• Aunque los estudiantes han crecido en la eradigital , no implica necesariamente que seannativos digitales .

• En todos los países participantes , enpromedio el 17% de los estudiantes noalcanzó un nivel 1.

• En promedio , sólo el 2 % de los estudiantesalcanzó un nivel 4 , con un máximo de 5 % enCorea.

• Aunque los estudiantes han crecido en la eradigital , no implica necesariamente que seannativos digitales .

• En todos los países participantes , enpromedio el 17% de los estudiantes noalcanzó un nivel 1.

• En promedio , sólo el 2 % de los estudiantesalcanzó un nivel 4 , con un máximo de 5 % enCorea.

38

Alumnos y las TICs (II)• Los tres tipos principales de software

utilizados en la escuela para los propósitos deenseñanza son los procesadores detexto, software de presentaciones y recursosde información basados en computadoras .

• Programas más complicados, tales comojuegos de aprendizaje digitales, registro dedatos y herramientas de monitorización seusan muy poco.

• Los tres tipos principales de softwareutilizados en la escuela para los propósitos deenseñanza son los procesadores detexto, software de presentaciones y recursosde información basados en computadoras .

• Programas más complicados, tales comojuegos de aprendizaje digitales, registro dedatos y herramientas de monitorización seusan muy poco.

39

Muchas graciasDirección General de Evaluación de la Calidad Educativa

https://equidadycalidadeducativa.buenosaires.gob.ar/

International Association for the Evaluation of EducationalAchievement

http://www.iea.nl/icils_2013.html

Dirección General de Evaluación de la Calidad Educativahttps://equidadycalidadeducativa.buenosaires.gob.ar/

International Association for the Evaluation of EducationalAchievement

http://www.iea.nl/icils_2013.html

BACKUP SLIDES

41

RESULTADOS¿Para qué utilizan la

tecnología?

42

Casi el 90% la usa más frecuentemente en elhogar*

88 87 8981

95 95 96 9488

95 9691 95 96 96

71

9586

59

91

62

31

81

57

35

61

76

26

73

57 55 5260 63

79

60

18

77

34

66

54

35

59 13

8 7 8 718

8 9 7 115 5 7

30

126

31

11

23

0102030405060708090

100

43

010

Hogar Escuela Otro lugar*Al menos una vez por semana


En la escuela para editar documentos y crearpresentaciones en mayor proporción que las

hojas de cálculo (% alumnos)

10

20

30

40

50

60

44

0

10

Crear o editar documentos (por ejemplo para escribir historias o hacer tareas)

Usar una hoja de cálculo para calcular, almacenar datos o crear gráficos (por ejemplo, usando Microsoft EXCEL ®)

Crear una presentación sencilla de diapositivas (por ejemplo usando Microsoft PowerPoint ®)

Crear una presentación multimedia (con sonidos, fotos, videos)Fuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.

El uso de software de cualquier tipo fuera de laescuela para fines didácticos o de

programación es bajo (% alumnos)*

05

1015202530354045

45

0

Usar software educativo diseñado para ayudarme con los estudios escolares (por ejemplo, un software de matemática o de lectura)

Programar computadoras, escribir macros o scripts (por ejemplo usando Logo, Basic o HTML)

Usar software para dibujar, pintar o realizar diseños gráficos


Pero es elevado para fines sociales (% alumnos)

0102030405060708090

100

46

0

Buscar información para estudiar o hacer los trabajos de la escuela

Acceder a wikis o enciclopedias en línea, para estudiar o hacer trabajos de la escuela

Comunicarme con otros usando mensajes instantáneos o redes sociales (por ejemplo, mensajes o actualizaciones deestado)Escribir comentarios en perfiles en línea o blogs


Y recreación (% de alumnos)

0

10

20

30

40

50

60

70

47

0

Acceder a internet para averiguar sobre lugares donde ir o actividades para hacer

Leer comentarios en internet sobre cosas que podrías querer comprar

Jugar


RESULTADOS¿Qué aprenden en la escuela?

48

Los alumnos en todos los sistemas manifiestandominar la búsqueda de documentos y de

fotografías (% alumnos)

0102030405060708090

100

49

0

Buscar y encontrar un archivo en tu computadora

Usar un software para encontrar y eliminar virus

Editar fotografías digitales u otras imágenes gráficas

Crear una base de datos (por ejemplo, usando Microsoft Access ®)


Y bastante menos para crear o editar una página ocambiar la configuración de la computadora

102030405060708090

100

50

010

Crear o editar documentos (por ejemplo, tareas de la escuela)

Buscar y encontrar información que necesitas en Internet

Crear o editar una página web

Cambiar la configuración de tu computadora para mejorar su funcionamiento o arreglar problemasFuente: Elaboración propia en base a datos de la IEA – Reporte de resultados ICILS 2013.

Relativamente más para realizar presentacionesmultimedia que para el uso de hojas de cálculo

0102030405060708090

100

51

010

Usar una hoja de cálculo para calcular, almacenar datos o crear un gráficoProgramar o crear una macro (por ejemplo en Basic, Visual Basic)Configurar una red de computadorasCrear una presentación multimedia (con sonidos, fotos o videos)Subir textos, imágenes o videos a un perfil en línea


Estudio Internacional de alfabetización informática y manejo de tecnologías (ICILS) - Resultados...

Education

Transcript of Estudio Internacional de alfabetización informática y manejo de tecnologías (ICILS) - Resultados...