Bogotá D.C. Diciembre de 2015 ISSN: 2500-445X...
4
ANÁLISIS DE LOS RESULTADOS DE LA PRUEBA SABER 11, CALENDARIO A En esta primera versión mostramos resultados de la prueba Saber 11 Calendario A agregados por Entidad Territorial Certificada (ETC). Las ETC son los departamentos, los municipios de más de cien mil habitantes en el año 2002 y los municipios con menor cantidad de habitantes que se certifiquen si cumplen con varios requisitos técnicos, administrativos y financieros (Ley 715 de 2001). Las ETC tienen la competencia de administrar el servicio educativo en su jurisdicción garantizando su adecuada prestación en condiciones de cobertura, calidad y eficiencia. A la fecha existen 95 ETC, que para efectos de este análisis, dividimos en departamentales, ciudades capitales y ciudades intermedias. Las gráficas 1, 2 y 3 muestran el puntaje global 1 de las aplicaciones en los años 2014 y 2015 para las ETC capitales, departamentales y ciudades intermedias, respectivamente. La barra representa el puntaje en 2015 y el círculo, el puntaje en 2014. El color de la barra indica si la diferencia entre los resultados de ambos años es estadísticamente significativa. 1 El puntaje global es el índice global multiplicado por cinco. El índice global es el promedio ponderado de los puntajes en las cinco pruebas, usando ponderaciones de uno para la prueba de Inglés y de tres para las pruebas de Lectura Crítica, Matemáticas, Ciencias Naturales y Sociales y Ciudadanas. De esta forma, el puntaje global se produce en una escala de 0 a 500 (Resolución 503 de 2014). Presentación Saber en Breve es una publicación mensual dirigida a toda clase de público interesado en el sector de la educación. En cada una de sus ediciones, Saber en Breve presenta resultados de investigaciones internas, explica aspectos de políticas públicas que utilizan las pruebas Saber y analiza la relación de diversas condiciones demográficas, sociales y económicas de los estudiantes con su desempeño escolar. El objetivo de Saber en Breve es hacer que la comunidad educativa se sienta más cercana al ICFES e informar constantemente sobre la diversidad de análisis que pueden hacerse con los resultados de las pruebas Saber y sus factores asociados. Por esta razón Saber en Breve es conciso y expone los análisis de forma sencilla. TUNJA BUCARAMANGA PASTO BOGOTÁ MANIZALES VILLAVICENCIO YOPAL ARMENIA NEIVA IBAGUÉ PEREIRA MEDELLÍN CÚCUTA SINCELEJO POPAYÁN FLORENCIA MONTERIA BARRANQUILLA VALLEDUPAR CALI CARTAGENA RIOHACHA SANTA MARTA QUIBDÓ 200 220 240 260 280 Puntaje gobal Positiva y significativa No significativa Negativa y significativa 2014-2 Gráfica 1 - Capitales Puntaje global, aplicaciones 2014 y 2015. Prueba de hipótesis de diferencia de medias entre ambos años por ETC. Instituto Colombiano para la Evaluación de la Educación, ICFES. Oficinas: Carrera 7 No. 32 - 12. Edificio San Martín, Torre Sur. Bogotá D.C., Colombia. Directora General Ximena Dueñas Herrera Director de Evaluación Hugo Andrés Gutiérrez Rojas Subdirectora de Análisis y Divulgación Silvana Godoy Mateus Edición Jorge Leonardo Duarte Rodríguez Diseño Gustavo Andrés Álvarez Mejía 1 Saber en Breve Diciembre de 2015, ICFES Bogotá D.C. Diciembre de 2015 ISSN: 2500-445X Edición 01 en breve Boletín
Transcript of Bogotá D.C. Diciembre de 2015 ISSN: 2500-445X...
ANÁLISIS DE LOS RESULTADOS DE LA PRUEBA SABER 11, CALENDARIO AEn esta primera versión mostramos resultados de la prueba Saber 11 Calendario A agregados por Entidad Territorial Certificada (ETC). Las ETC son los departamentos, los municipios de más de cien mil habitantes en el año 2002 y los municipios con menor cantidad de habitantes que se certifiquen si cumplen con varios requisitos técnicos, administrativos y financieros (Ley 715 de 2001). Las ETC tienen la competencia de administrar el servicio educativo en su jurisdicción garantizando su adecuada prestación en condiciones de cobertura, calidad y eficiencia. A la fecha existen 95 ETC, que para efectos de este análisis, dividimos en departamentales, ciudades capitales y ciudades intermedias.
Las gráficas 1, 2 y 3 muestran el puntaje global1 de las aplicaciones en los años 2014 y 2015 para las ETC capitales, departamentales y ciudades intermedias, respectivamente. La barra representa el puntaje en 2015 y el círculo, el puntaje en 2014. El color de la barra indica si la diferencia entre los resultados de ambos años es estadísticamente significativa.
1El puntaje global es el índice global multiplicado por cinco. El índice global es el promedio ponderado de los puntajes en las cinco pruebas, usando ponderaciones de uno para la prueba de Inglés y de tres para las pruebas de Lectura Crítica, Matemáticas, Ciencias Naturales y Sociales y Ciudadanas. De esta forma, el puntaje global se produce en una escala de 0 a 500 (Resolución 503 de 2014).
PresentaciónSaber en Breve es una publicación mensual dirigida a toda clase de público interesado en el sector de la educación. En cada una de sus ediciones, Saber en Breve presenta resultados de investigaciones internas, explica aspectos de políticas públicas que utilizan las pruebas Saber y analiza la relación de diversas condiciones demográficas, sociales y económicas de los estudiantes con su desempeño escolar. El objetivo de Saber en Breve es hacer que la comunidad educativa se sienta más cercana al ICFES e informar constantemente sobre la diversidad de análisis que pueden hacerse con los resultados de las pruebas Saber y sus factores asociados. Por esta razón Saber en Breve es conciso y expone los análisis de forma sencilla.
TUN
JA
BUC
ARAM
ANG
A
PAST
O
BOG
OTÁ
MAN
IZAL
ES
VILL
AVIC
ENC
IO
YOPA
L
ARM
ENIA
NEI
VA
IBAG
UÉ
PERE
IRA
MED
ELLÍN
CÚ
CU
TA
SIN
CEL
EJO
POPA
YÁN
FLO
REN
CIA
MO
NTE
RIA
BARR
ANQ
UILL
A
VALL
EDU
PAR
CAL
I
CAR
TAG
ENA
RIO
HAC
HA
SAN
TA M
ARTA
QU
IBD
Ó200
220
240
260
280
Punt
aje
goba
l
Positiva y significativa No significativaNegativa y significativa 2014-2
Gráfica 1 - Capitales
Puntaje global, aplicaciones 2014 y 2015. Prueba de hipótesis de diferencia de medias entre ambos años por ETC.
Instituto Colombiano para laEvaluación de la Educación, ICFES.
Oficinas: Carrera 7 No. 32 - 12.Edificio San Martín, Torre Sur.Bogotá D.C., Colombia.
Directora General Ximena Dueñas Herrera
Director de Evaluación Hugo Andrés Gutiérrez Rojas
Subdirectora de Análisis y Divulgación Silvana Godoy Mateus
Edición Jorge Leonardo Duarte Rodríguez
Diseño Gustavo Andrés Álvarez Mejía
Libertad
yO r
de n
1Saber en BreveDiciembre de 2015, ICFES
Bogotá D.C.Diciembre de 2015ISSN: 2500-445X
Edición 01 enbreveB
olet
ín
2 Saber en BreveDiciembre de 2015, ICFES
enbreveB
olet
ín
Los departamentos y municipios están presentados de forma ordenada según los resultados de 2015. De esta manera las entidades pueden saber cómo están respecto a la escala (que va de 0 a 500) y a otras entidades. Sin embargo, es muy importante no pensar en estos resultados como un ranking. La razón es que el contexto y el número de estudiantes no es el mismo entre entidades. Por ejemplo, la diferencia entre Tunja y Quibdó (que es de más de 50 puntos) puede ser causada por los múltiples factores relacionados con el sistema educativo, la condición social, los intereses propios de los estudiantes, entre otros. Esta diferencia no nos dice cuál característica pesa más; y por lo tanto, no tenemos un punto de partida equivalente que nos permita pensar que Tunja es mejor que Quibdó en un factor específico. Por lo tanto, el ordenamiento que presenta el informe no es equiparable a un ranking.
De forma similar, la comparación entre las ETC que son ciudades capitales y las que son departamentales debe hacerse con precaución. En la aplicación de 2015, todas las ETC capitales (y la mayoría de ciudades intermedias) obtuvieron resultados promedio más altos que los de sus respectivas entidades departamentales. Es probable que este hecho se deba a que las entidades departamentales atienden principalmente a población de zonas rurales. Existen importantes diferencias culturales y sociales entre la población urbana y rural.
Gráfica 2 - Departamentos
Gráfica 3 - Ciudades intermedias
200
220
240
260
CU
ND
INAM
ARC
A
SAN
TAN
DER
ARAU
CA
N. D
E SA
NTA
ND
ER
BOYA
CÁ
CAS
ANAR
E
NAR
IÑO
HU
ILA
QU
IND
ÍO
MET
A
PUTU
MAY
O
RISA
RALD
A
CAL
DAS
GU
AIN
ÍA
VALL
E D
EL C
AUC
A
ANTI
OQ
UIA
SAN
AN
DRÉ
S
GU
AVI
ARE
VIC
HA
DA
CAQ
UET
Á
TOLI
MA
CES
AR
CÓ
RDO
BA
SUC
RE
ATLÁ
NTI
CO
LA G
UAJ
IRA
CAU
CA
AMAZ
ON
AS
VAU
PÉS
BOLÍ
VAR
MAG
DAL
ENA
CH
OC
Ó
Punt
aje
glob
al
Positiva y significativa No significativaNegativa y significativa 2014-2
200
220
240
260
280
300
SABA
NET
A
DU
ITAM
A
ENVI
GAD
O
FLO
RID
ABLA
NC
A
CH
ÍA
SOG
AMO
SO
MO
SQU
ERA
PITA
LITO
FAC
ATAT
IVÁ
ZIPA
QU
IRÁ
IPIA
LES
PALM
IRA
FUSA
GAS
UG
Á
PIED
ECU
ESTA
RIO
NEG
RO
ITAG
ÜÍ
DO
S Q
UEB
RAD
AS
BARR
ANC
ABER
MEJ
A
BELL
O
GIR
ÓN
BUG
A
TULU
Á
CAR
TAG
O
SOAC
HA
SAH
AGÚ
N
JAM
UN
DÍ
SOLE
DAD
GIR
ARD
OT
APAR
TAD
Ó
MAG
ANG
UÉ
MAL
AMBO
MAI
CAO
BUEN
AVEN
TURA
LORI
CA
TURB
O
CIÉ
NAG
A
TUM
ACO
URI
BIA
Punt
aje
glob
al
Positiva y significativa No significativaNegativa y significativa 2014-2
3Saber en BreveDiciembre de 2015, ICFES
Las gráficas 4, 5 y 6 muestran el porcentaje de estudiantes en los primeros 400 puestos2 de cada ETC para las aplicaciones de los años 2005, 2010 y 2015. La prueba actual se empleó por primera vez en la segunda aplicación de 2014; por lo tanto, no es comparable con aplicaciones anteriores. La razón por la cual podemos hacer la comparación del año 2015 con los años 2005 y 2010 es que los puestos son una medida de la distribución de los estudiantes, así que la comparación no es de puntajes, sino de la distribución de todos los estudiantes en las entidades. Notemos que para el país, por definición, los primeros 400 puestos representan el 40% de los estudiantes con mejores resultados3. Sin embargo, esto no tiene que pasar si vemos los primeros 400 puestos del país en cada ETC. Es decir, analizamos cómo se distribuye el 40% de los estudiantes con mejores resultados entre las entidades.
La aclaración anterior implica que los puestos no están asociados a un puntaje específico. Si todos los estudiantes obtuvieran puntajes muy altos (o muy bajos) seguirían existiendo los puestos del 1 al 1000. Esta implicación es particularmente relevante para las universidades que basan sus procesos de admisión en el puesto de los estudiantes: existe una gran diferencia en puntajes para un mismo puesto en las aplicaciones para Calendario A y para Calendario B.
Porcentaje de estudiantes en los puestos 1 a 400 por ETC, Aplicaciones 2005, 2010 y 2015
2El puesto de los estudiantes se determina a partir de la clasificación en mililes de sus índices globales. Los mililes se determinan mediante una partición del conjunto de índices globales en mil intervalos, de forma que el número de estudiantes evaluados con índices globales en cada intervalo sea aproximadamente una milésima parte del total. El primer puesto corresponde al milil de índices globales más altos, el segundo al siguiente, y así sucesivamente hasta el milésimo puesto, que corresponde al de los índices globales más bajos (Resolución 503 de 2014).3El porcentaje puede no ser exacto debido a empates de los estudiantes en su índice global.
Sin embargo, con el ánimo de mejorar, las entidades pueden compararse con entidades similares y, si éstas obtuvieron resultados más altos, pueden saber a dónde es posible llegar en el corto plazo. Los resultados de las pruebas Saber sirven para conocer qué sabemos y en dónde estamos.
La comparación entre años para una misma entidad también nos brinda pautas para mejorar. Aunque la sola diferencia entre 2014 y 2015 no nos dice por qué aumentamos o disminuimos, cada ETC puede hacerse una idea de qué pasó en el transcurso del año. Las entidades que en promedio aumentaron el puntaje pueden tratar de identificar cambios y acciones de mejoramiento que hubo en la región, que permitieron dicho resultado, para seguir incrementando las fortalezas; y lo recíproco para las que disminuyeron.
Gráfica 4 - Capitales
020
4060
80
Porc
enta
je
2015-2 2010-2 2005-2
TUN
JA
BUC
ARAM
ANG
A
PAST
O
BOG
OTÁ
VILL
AVIC
ENC
IO
YOPA
L
MAN
IZAL
ES
NEI
VA
ARM
ENIA
IBAG
UÉ
PERE
IRA
MED
ELLÍN
FLO
REN
CIA
POPA
YÁN
CÚ
CU
TA
SIN
CEL
EJO
MO
NTE
RIA
BARR
ANQ
UILL
A
VALL
EDU
PAR
CAL
I
CAR
TAG
ENA
RIO
HAC
HA
SAN
TA M
ARTA
QU
IBD
Ó
enbreveB
olet
ín
Gráfica 5 - Departamentos
Gráfica 6 - Ciudades intermedias
La relación entre el análisis del porcentaje de estudiantes en los primeros 400 puestos y el puntaje global promedio es alta, pero no directa y exhaustiva. Por ejemplo, en el listado de ETC departamentales, Santander tiene el promedio de puntajes globales más alto, pero en el porcentaje de estudiantes en los primeros 400 puestos es superada por Cundinamarca. Este hecho se debe a que a pesar de que Cundinamarca tiene un mayor porcentaje de estudiantes en los primeros puestos, Santander tiene menor porcentaje de estudiantes en los últimos puestos, para que así, Santander obtenga un puntaje global promedio moderadamente más alto que el de Cundinamarca. También podemos afirmar que la dispersión en resultados de los estudiantes de Santander es menor que la de los estudiantes de Cundinamarca.
Lib
ertad
yO r
de n
010
2030
4050
Porc
enta
je
2015-2 2010-2 2005-2
SAN
TAN
DER
CU
ND
INAM
ARC
A
ARAU
CA
N. D
E SA
NTA
ND
ER
CAS
ANAR
E
BOYA
CÁ
NAR
IÑO
HU
ILA
GU
AIN
ÍA
MET
A
QU
IND
ÍO
RISA
RALD
A
PUTU
MAY
O
CAL
DAS
VALL
E D
EL C
AUC
A
ANTI
OQ
UIA
SAN
AN
DRÉ
S
VIC
HA
DA
CAQ
UET
Á
TOLI
MA
GU
AVI
ARE
CES
AR
SUC
RE
CÓ
RDO
BA
ATLÁ
NTI
CO
VAU
PÉS
LA G
UAJ
IRA
SCAU
CA
AMAZ
ON
AS
BOLÍ
VAR
MAG
DAL
ENA
CH
OC
Ó
020
4060
80
DU
ITAM
A
SABA
NET
A
ENVI
GAD
O
CH
ÍA
FLO
RID
ABLA
NC
A
MO
SQU
ERA
SOG
AMO
SO
PITA
LITO
FAC
ATAT
IVÁ
IPIA
LES
FUSA
GAS
UG
A
ZIPA
QU
IRÁ
PALM
IRA
PIED
ECU
ESTA
RIO
NEG
RO
DO
S Q
UEB
RAD
AS
ITAG
ÜÍ
BELL
O
BARR
ANC
ABER
MEJ
A
GIR
ÓN
BUG
A
TULU
Á
CAR
TAG
O
SOAC
HA
SAH
AGÚ
N
JAM
UN
DÍ
SOLE
DAD
GIR
ARD
OT
APAR
TAD
Ó
YUM
BO
MAG
ANG
UÉ
MAL
AMBO
MAI
CAO
BUEN
AVEN
TURA
LORI
CA
CIÉ
NAG
A
TURB
O
TUM
ACO
URI
BIA
Porc
enta
je
2015-2 2010-2 2005-2
En esta primera edición de Saber en Breve mostramos resultados de varios años de la prueba Saber 11 Calendario A, a nivel de Entidad Territorial Certificada. Aclaramos que el hecho de que los resultados puedan ordenarse no implica que formen rankings, debido a que las diferencias entre años o entre entidades no muestran efectos causales de programas específicos. Además, aprendimos que los puestos del 1 al 1000 forman una medida de la distribución de los estudiantes y que brindan información diferente al puntaje global.
enbreveB
olet
ín
