20 preguntas basicas -...

20preguntas básicassobre los Informes de laevaluación diagnóstica

2009

INTRODUCCIÓN

Según establece la Orden de 2 de diciembre de 2008, por la que regula el desarrollo, orga-nización y realización de la evaluación de diagnóstico en la Comunidad Autónoma Vasca,así como la Resolución de la Viceconsejería de Educación que dicta las instrucciones parala aplicación de las pruebas, los centros docentes, a través del Equipo de coordinación dela evaluación de diagnóstico, señalado en el artículo 5.3 de la citada Orden, deberán rea-lizar un análisis y posterior valoración de los resultados obtenidos por su alumnado en laspruebas de evaluación correspondientes a la aplicación llevada a cabo durante el curso2008-09.

El equipo directivo, como señala la citada Resolución en su artículo 10, tendrá acceso auna serie de informes en los que se recogerá la información referente a los resultadosobtenidos por el centro, por cada uno de los grupos participantes y por cada uno de losalumnos y alumnas del centro que tomaron parte en esta aplicación. Los centros escola-res obtendrán estos informes a través del servidor www.ediagnostikoak.net.

Con el objetivo de ayudar en el conocimiento y compresión de los diferentes Informes deresultados, de sus características y de los criterios que se han tenido en cuenta en su ela-boración, se presenta esta guía informativa.

La evaluación de diagnóstico sólo es una fotografía de situación, que muestra en unmomento concreto y a través de unos determinados instrumentos de medición, una ima-gen, siempre parcial, de la realidad de cada centro. Los resultados deben ser contempla-dos desde esta perspectiva y desde las condiciones concretas bajo las que se aplicaron laspruebas.

20 PREGUNTAS BÁSICAS SOBRE LOS INFORMES DE LA EVALUACIÓN DIAGNÓSTICA 20092

¿Por qué se usan las mis-mas pruebas para evaluara todos los alumnos y alum-nas, sin considerar quealgunos centros escolarestienen alumnado con ca-racterísticas específicas?

Por un principio de equidad, ya que laeducación tiene como objetivo que todoslos alumnos y alumnas sean cuales seansus características individuales o familia-res, logren el desarrollo de las competen-cias básicas definidas en el Decreto175/2007, que define el currículo de laEducación Básica. La evaluación diagnósti-ca es una evaluación estandarizada; esdecir, igual para todos los estudiantes de laComunidad Autónoma Vasca.

¿De cuántas preguntasconstaba cada una de laspruebas y de qué tipo eran?

Una parte importante de las respuestas alas preguntas, en ambas etapas educativasy en todas las competencias, eran deopción múltiple. Una menor proporción deellas eran semiabiertas o de desarrollobreve y en las competencias en comunica-ción lingüística en euskara y castellanotenían que completar una pregunta de

expresión escrita amplia (escribir un míni-mo de 60 palabras en 4º de E. Primaria yde 100 palabras en 2º de ESO) a partir deun tema dado.

¿Todo el alumnado con-testaba a la misma pruebaen cada una de las compe-tencias básicas?

SÍ, salvo en el caso de la Competen-cia en comunicación lingüística eneuskara, en la que ha habido dos mo-

delos de prueba: uno para medir la com-petencia del alumnado del modelo A y otropara medir la competencia del alumnadode los modelos B y D. En ambos casoshabía una parte común para todo el alum-nado, tanto en comprensión oral como encomprensión escrita. Esta parte común, queocupaba dos tercios de la prueba, es la queha permitido comparar los resultados detodo el alumnado, aun cuando no hayancontestado los mismos ítems.

La estructura definitiva de la prueba paraesta competencia fue la siguiente:

¿Cómo se han corregidolas pruebas?

La corrección de las pruebas ha sido distin-ta según el formato de las preguntas:

a) Las preguntas de opción múltiplese han corregido de forma automática,sin la intervención de personas, me-diante una aplicación informática espe-cífica. Esta aplicación ha chequeado silos alumnos y alumnas habían marcadoo no la alternativa correcta en cadapregunta y les asignaba la puntuacióncorrespondiente.

b) Las preguntas abiertas, de construc-ción más o menos amplia, se han corre-gido por personal externo a los centros,expresamente contratado para realizareste trabajo, y con criterios precisos.

¿Todos los centros esco-lares que tomaron parteen la aplicación 2009 re-cibirán sus resultados?

SÍ. Sin embargo, hay que tener en cuentaque los resultados de algunos centros conun número muy bajo de alumnos y alum-nas no tienen la misma garantía ni fiabili-dad que el resto de las informaciones. 6 es


1

23

Competencias básicas DimensionesNº de ítems

4.º E. Primaria 2.º ESO

Comunicación lingüística Comprensión oral 2022 (modelo A)

en euskara 23 (modelo B-D)

Comprensión y expresión escrita 23 28

Comunicación lingüística Comprensión oral 22 23en castellano Comprensión y expresión escrita 24 24

Competencia matemática 20 24

Competencia en cultura científica, tecnológica y de la salud 26 41

Número y tipo de preguntas

4

5

el número mínimo de alumnos yalumnas de un mismo centro que debenhaber contestado las pruebas y cuya pun-tuación haya sido incluida en la puntua-ción media. Cuando la muestra es inferiora ese número es difícil asegurar que losresultados se deben a la influencia del cen-tro, más que a los alumnos o alumnas con-cretos que fueron evaluados, por lo que esun indicador inapropiado para establecercomparaciones. Por este motivo, este tipode centros pequeños recibirán sus resulta-dos con un asterisco que indicará que esosresultados tienen menor fiabilidad.

¿Qué tipos de informeshay como resultado de laevaluación diagnóstica?

Hay, al menos, tres tipos de informes:

a) Informe de centro, con datos globa-les y por grupos evaluados.

b) Informe del alumno o alumna, diri-gido a la familia, que incluye el nivel decompetencia alcanzado en cada una delas competencias básicas evaluadas.

c) Informe general de la Comunidad,que recoge los datos globales de laCAV, así como la correlación de losresultados con diversas variables.

¿Qué características tieneel Informe de centro?

Se trata de un informe amplio en el quese recogen tanto los resultados medios delcentro como de cada uno de los gruposque han tomado parte en esta evaluación,

en cada una de las competencias básicasevaluadas; así como la correlación con al-gunas variables que, en otras evaluaciones,han demostrado tener una clara influenciaen los resultados.

Se han seguido dos criterios básicos en laelaboración de este informe:

a) Aportar información suficiente-mente válida y significativa queayude a los centros docentes a valorarsu situación educativa a partir de unosdatos externos.

b) Presentar datos comparativos entrerealidades educativas que realmen-te sean comparables, evitando com-paraciones que, aunque aparentementepuedan parecer neutras, no toman en con-sideración características claves de cadacentro educativo, como son el nivel socio-económico y cultural de su alumnado, elmodelo lingüístico y la red educativa.

¿De qué apartados constael informe de centro?

Toda la información se presenta organiza-da en cinco apartados:

a) Resultados medios en cada una de lascompetencias básicas evaluadas.

Se presentan los resultados mediosalcanzados por cada uno de losgrupos que tomaron parte en cadauna de las competencias, así comolos resultados medios del centro.Los resultados indican el nivel decompetencia en el que se sitúan. Eneste primer apartado, no se estable-cen comparaciones con datos exter-nos, sino entre los grupos del cen-tro que han participado en la eva-luación 2009.

b) Distribución porcentual del alumnadopor niveles de competencia.

En este apartado, se presenta elporcentaje de alumnos y alumnasque se sitúan en cada uno de losniveles de competencia estableci-dos, de esta manera el centro puedeconocer la dispersión de los resulta-dos de su alumnado y si hay muchasdiferencias de nivel dentro de cadauno de los grupos. Tampoco en estecaso se dan comparaciones condatos externos, sino entre los gru-pos que han tomado parte en estaevaluación.


67

8

c) Resultados según el estrato (red educa-tiva + modelo lingüístico).

Los resultados presentados en el pri-mer apartado —resultados mediosen cada una de las competenciasbásicas— se comparan con los re-sultados medios alcanzados portodo el alumnado de la Comunidadque tiene su mismo estrato. No seofrecen comparaciones con estratosque no existen en el centro, los resul-tados de otros estratos se podránconsultar en el Informe general de laevaluación de diagnóstico.

d) Resultados según el Índice socioeconó-mico y cultural del centro (ISEC).

En este apartado se presenta unasegunda comparación, ya que seconfrontan los resultados del cen-tro y de cada uno de sus gruposcon los resultados medios logradospor los centros que tienen su mis-mo índice socioeconómico y cultu-ral, de esta manera se podrá com-probar si se encuentra por encimao por debajo.

e) Resultados logrados y resultados espe-rados según el ISEC del centro.

En este apartado final se añade unainformación de gran interés: saber siel centro y cada uno de sus gruposhan obtenido los resultados quecorresponden a su índice socioeconó-mico y cultural y, por lo tanto, si hansido capaces de, en cierta forma,superar la situación de partida de sualumnado. Para ello, se presenta lapuntuación que ha obtenido el centroy cada uno de los grupos —que ya seconoce de los apartados anteriores—y la puntuación esperada en virtud desu índice socioeconómico y cultural.

¿Qué tipo de resultadosse presentan en el Infor-me de centro?

Todos los resultados del Informe de centrotienen dos características:

a) No se dan puntuaciones numéri-cas, sino que se sitúa cada uno de losresultados en una posición dentro deuno de los tres niveles de competenciaestablecidos (ver pregunta 11).

b) En todos los gráficos del informe, lapuntuación media del centro o de losgrupos no viene indicada con un puntoconcreto, sino con una barra más omenos amplia. Esta barra significa que,con un 95% de probabilidades, la pun-

tuación del centro o del grupo se sitúaen algún punto de esa barra, siendomás probable que esté en el centro queen los extremos de la misma.

Algunos de los gráficos que aparecen en elinforme tienen un formato similar al que semuestra a continuación.

En algunos casos, la longitud de las barrases distinta. Esta diferencia se debe a dosrazones:

– Por una parte, al número de ítems conque se ha evaluado cada competencia ocada dimensión de las competencias, deforma que a mayor número de ítemsla barra será más corta debido a queel error en la medición es menor y losresultados tienen mayor fiabilidad.


9

– Por otra, a la influencia del número dealumnos y alumnas del grupo, así comoa la dispersión de sus resultados.

¿Por qué no se danpuntuaciones numé-ricas?

Por varias razones fundamentales:

a) Para eliminar al máximo el peligro deque se puedan establecer rankings,algo expresamente prohibido tanto porel Decreto de enseñanzas básicas comopor la Orden de evaluación diagnóstica.

b) Para que no se pueda identificarcon una nota académica. Compararlos resultados académicos, responsabi-lidad de cada centro y de cada profesoro profesora, con los resultados de unaevaluación de diagnóstico con estascaracterísticas es un error.

c) Porque no interesa tanto el dato con-creto, sino la situación en la que seencuentra el centro y el o los gruposevaluados. Dar un rango de pun-tuación es estadísticamente máscorrecto y adecuado en una evalua-ción de este tipo. Cuando damos unrango estamos incluyendo el error quesiempre existe en este tipo de evalua-

ciones y reconociendo que las puntua-ciones nunca son exactas.

¿Qué son los niveles decompetencia y cuántosse han establecido?

Los niveles de competencia descri-ben los conocimientos, habilidades ycapacidades que muestran los alum-nos y alumnas al responder a las pruebasde la evaluación diagnóstica. Estas des-cripciones están basadas en el “Documen-to Marco” que desarrolla cada una de lascompetencias básicas. A partir de estosniveles de competencia, los centros escola-res pueden conocer los aprendizajes logra-dos por sus estudiantes.

Los resultados se presentan organizados entres niveles de competencia: inicial,medio y avanzado. Cuando un alumno oalumna está situado en un determinadonivel, se puede afirmar que es competenteen las habilidades de dicho nivel y en las delos niveles anteriores. En cada nivel hayestudiantes que han consolidado el dominiode los mismos, junto a otros que están apunto de dominar los del nivel siguiente.

• El NIVEL AVANZADO recoge las habili-dades y contenidos más complejos eva-luados en las pruebas.

• El NIVEL MEDIO muestra habilidades ycontenidos más básicos evaluados en laspruebas.

• El NIVEL INICIAL no tiene las mismascaracterísticas que los otros dos, ya queagrupa a alumnos y alumnas de muy dife-rente tipo: desde quienes están iniciandoel aprendizaje de habilidades y conteni-dos propios del ciclo educativo correspon-diente, hasta quienes, con un poco deapoyo, podrían enfrentarse con éxito a lasexigencias propias del nivel intermedio.

Un aspecto a tener muy en cuenta es queal utilizar el rango como referencia paradar resultados ocurre que, a veces, en elgráfico correspondiente a un alumno oalumna determinado o a un grupo o cen-tro concreto, el rango se encuentra situadoentre dos niveles de competencia, lo queindicaría que se encuentra en ese procesode consolidación del nivel inferior y acce-diendo a conocimientos y habilidades pro-pios del nivel superior, tal y como se haseñalado anteriormente.

¿Hay un nivel mínimoque indique que unacompetencia básicaha sido superada?

No. Es muy importante no confundir la

finalidad de esta evaluación y tener muyclaros los siguientes criterios:

• La evaluación de diagnóstico no es unaevaluación final ni sustituye a laevaluación curricular que realiza elprofesorado, por lo tanto, no pretendedar una referencia de suspensos y apro-bados, algo que sólo corresponde a loscentros y a su profesorado. Lo que seofrece es una información externa quesitúa a cada alumno o alumna, grupo ycentro en un continuo de desarrollo decada competencia básica y se le dancomparaciones con centros de sus mis-mas características.

• El referente a alcanzar debe sersiempre el más ambicioso. El desarro-llo de una competencia, en sentido estric-to, no termina nunca. Los centros debentrabajar para que cada alumno o alumnallegue al máximo nivel de desarrollo delas competencias básicas que sea capaz, yeste debería ser el objetivo de todos loscentros. Por eso es bueno conocer, enmomentos intermedios de cada una delas etapas obligatorias, en qué nivel nosencontramos, para ser conscientes de loque hemos hecho y de lo que nos quedapor conseguir, sobre todo en comparacióncon centros que tienen unas característi-cas similares al nuestro.


10 11

12

• Esta es una evaluación de los aspec-tos básicos de las competencias, porlo tanto, no mide todo lo que un centroescolar enseña a su alumnado y todo loque su alumnado ha aprendido en el pro-ceso de enseñanza-aprendizaje. Conseguridad, los centros escolares trabajanmuchos más contenidos que lo quecorresponde a una evaluación de compe-tencias básicas, y sobre ellos realizan susevaluaciones académicas. Con esta eva-luación no es posible, y ni siquiera se pre-tende, medir todo lo que se puede e inclu-so se debe trabajar en cada centro.

• Los resultados no son directamentecomparables con los resultados quese dan en el centro (porcentaje de sus-pensos y aprobados o alumnado que pro-mociona…). Es un error comparar los re-sultados de esta evaluación con las califi-caciones del profesorado porque para queun alumno o alumna apruebe un áreaconcreta, el profesorado tiene en cuentamuchos más aspectos de los que es posi-ble medir en una evaluación de este tipo—externa, de lápiz y papel y aplicada enun momento concreto—. Aunque se basaen competencias desarrolladas en el currí-culo, esta evaluación está desvinculadadel desarrollo específico de los contenidosen cada centro docente.

¿Se pueden comparardirectamente los resul-tados obtenidos en lasdiferentes competen-cias básicas?

No. Aunque en la elaboración de las prue-bas se han seguido unos criterios comu-nes, cada competencia tiene su espe-cificidad y los niveles de competen-cia establecidos en cada una de ellasson distintos.

¿Qué comparacionesse establecen entrecentros escolares?

Partiendo del hecho de que las circunstan-cias específicas de cada centro afectan demanera significativa a sus resultados, en elinforme de centro sólo se establecen dostipos de comparaciones:

a) Según el nivel socioeconómico y cul-tural (ISEC) de su alumnado. Los re-sultados han demostrado que las gran-des diferencias se dan entre grupossocioeconómicos más que por tipos decentro.

b) Según el estrato al que pertenece elcentro, resultado de la combinaciónentre red educativa y modelo lingüísti-

co. Hay que tener en cuenta que, enmuchos casos, el modelo lingüístico noestá ligado al centro sino a grupo ogrupos específicos del centro. Esto ocu-rre en el caso de centros escolares conmás de un modelo lingüístico.

¿Cómo se calcula el ín-dice socioeconómico ycultural o ISEC?

Sabemos por múltiples evaluaciones einvestigaciones que los logros de aprendi-zaje y el desarrollo de las competenciasbásicas están determinados por múltiplesfactores, tanto internos como externos alos centros escolares. Entre los factoresexternos de mayor interés e influencia enlos resultados destaca el Índice socioeco-nómico y cultural (ISEC).

La información para calcular el ISEC pro-cede de las respuestas facilitadaspor el alumnado en el cuestionario.En este índice se incluyen aspectos rela-cionados con el nivel profesional familiar,el nivel máximo de estudios de la familia yla posesión de una serie de bienes mate-riales y culturales que la experiencia pre-via ha determinado que son especialmen-te relevantes (número de libros en casa,lectura de prensa diaria y revistas especia-

lizadas y posesión de ordenador y accesoa Internet).

A partir de los datos individuales, secalcula la media del alumnado decada centro. Este valor está centrado en0 —correspondiente a la media de laComunidad Autónoma— con una desvia-ción típica de 1. Se ha dividido el totalde la población en 4 niveles (bajo,medio bajo, medio alto y alto) en cadauno de los cuales se sitúa un 25% de lapoblación, según su ISEC sea más bajo omás elevado.

Hay que tener en cuenta que se tratade niveles no absolutos, sino com-parativos en relación con el alumnadodel nivel evaluado en cada una de lasetapas. Esta circunstancia puede provo-car incluso que un centro que tenga lasdos etapas educativas evaluadas, se sitúeen un nivel de ISEC distinto en cadaetapa, ya que los datos proceden de losgrupos evaluados y no de todo el alum-nado del centro. Por lo tanto, cuando sehabla en este informe de ISEC decentro, ha de interpretarse comoISEC medio del alumnado de losgrupos evaluados.


13

14

15

¿Se ha tenido en cuentala puntuación de todoslos estudiantes que hi-cieron las pruebas?

No. En los resultados medios de cada cen-tro y grupo participante se han tenido encuenta todos los resultados individuales decada uno de los alumnos y alumnas quehan participado en las pruebas, exceptuan-do los siguientes casos:

– Alumnado con adaptación curricu-lar individualizada significativa,cuya participación no era posiblesiguiendo los criterios y protocolos esta-blecidos en el proceso general.

– Alumnado que, en el momento de apli-cación de las pruebas, llevaba menosde un año de escolarización en elsistema educativo vasco y ademásdesconocía la lengua de aplicaciónde las diferentes pruebas.

– En el caso de los resultados en comunica-ción lingüística en euskara, no se incluyenlos resultados de todos aquellos alumnosy alumnas exentos de euskara, auncuando hayan contestado esta prueba.

– Tampoco se han tenido en cuenta en lapuntuación media de cada centro losabsentistas habituales y el alumnadoescolarizado en programas de escolari-zación complementaria.

¿Cómo se garantiza laconfidencialidad delos resultados?

Debido a que en esta evaluación se mane-ja información sensible sobre centros yalumnado se ha establecido un sistemapara garantizar tanto la confidencialidad yprotección de todos los datos, como paraevitar la realización de ranking de centros,expresamente prohibidos por la Ley.

Por ello se emplean dos sistemas:

a) Toda la información que se utilizaen esta evaluación está codifica-da, a fin de impedir la identificaciónnominal. En la portada de los informesde centro y de alumno o alumna noconsta ningún nombre, sólo un códigoque exclusivamente conocerá cadacentro.

b) Se ha establecido un sistema restrin-gido de acceso a la información,con perfiles de usuario. Sólo la Vicecon-sejería de Educación y el ISEI-IVEI ten-drán acceso a todos los datos, el restode los usuarios tienen acceso a infor-maciones parciales, siempre codificada,y con el permiso del centro docente. Lacustodia de los datos de cada centrocorresponde al director o directora delmismo.

¿Qué característicastiene el Informe indi-vidual dirigido a la fa-milia?

Se trata de un informe breve y sencillo,con información básica, dirigida a lafamilia de cada uno de los alumnos yalumnas que han tomado parte en la apli-cación 2009. Además de los resultadosespecíficos en cada una de las competen-cias básicas evaluadas, se ofrecen algunassugerencias generales sobre determinadosaspectos en los que la familia puede ayu-dar a su hijo o hija en el ámbito escolar.

¿Qué criterios se hanutilizado para elaborarel Informe individual?

Se han tenido en cuenta varios criterios:

– Que la información aportada sea fácilde entender, no numérica, sino decontenido.

– Que la información que se aporta a lasfamilias no colisione con las notasque se dan en el centro en las distin-tas evaluaciones curriculares. Por ello, eltipo de información que se presenta enestos informes es difícilmente compara-ble con la puntuación numérica que seda en el centro escolar.

– Que se eviten comparaciones injus-tas, por ello la información que se pre-senta en el informe a las familias sólodescribe la situación del hijo o hija eva-luado, sin ningún tipo de comparación

– Que sirva para describir lo quécada alumno o alumna es capaz dehacer, en términos generales, en cadauna de las competencias evaluadas.

¿Serán comparableslos resultados de laaplicación 2009 y2010?

A pesar de que las pruebas 2009 y 2010estarán compuestas por preguntas distin-tas, será posible hacer comparaciones,dado que ambas pruebas serán escaladasen la misma métrica, lo que permitiráhacer un “puente” entre ambas evaluacio-nes.

Este dato longitudinal será de gran interéspara los centros docentes, ya que podránpercibir la evolución de sus resultados amedio plazo y percibir si éstos se mantie-nen o están influidos por contingenciasconcretas: cohorte peor o mejor de alum-nos y alumnas en un determinado año,procesos de mejora desarrollados u otrascircunstancias.


16 17 18

1920

20 preguntas basicas -...

Documents

Transcript of 20 preguntas basicas -...