Elaboracioìn de instrumentos de evaluacioìn tema nâ° 3

Curso: “ELABORACIÓN DE

INSTRUMENTOS DE EVALUACIÓN”

Tema 3: Fases para la elaboración deuna buena prueba. Profesor: Dr. C. Héctor Valdés

5 de marzo de 2013

CONCEPTOS DE “ÍTEM” Y DE “PRUEBA” Un ítem puede definirse como la enunciación de una tareaa partir de cuya respuesta se infiere la habilidad[1] odominio para desarrollar la tarea planteada. Es unasituación demandante, intencionalmente diseñada paraponer en evidencia la habilidad de quien se enfrente a ella. Una prueba es un conjunto intencionalmente diseñado deítems a través de cuyas respuestas se infiere el grado dehabilidad de quienes son evaluados, en relación con elobjeto de evaluación. Una prueba constituye la agregaciónsinérgica y articulada de ítems para “decir algo” sobre lapersona que los responde, en función de la eficacia conque lo hace.

(1) Habilidad en sentido genérico. Puede ser asumidacomo conocimiento, competencia, saber, desempeño, etc.

¿Cuándo ocurre entonces lamedición?

La medición de un constructoocurre cuando se asigna un valora la muestra de conductarecolectada por un test.

FASES DEL DISEÑO DE PRUEBAS 1. MARCO CONCEPTUAL 2. ESTRUCTURA DE LA PRUEBA. TABLA DE

ESPECIFICACIONES 3. DESARROLLO DE LA PRUEBA 4. APLICACIÓN PILOTO O CONTROL DE CALIDAD 5. APLICACIÓN DEFINITIVA 6. ANÁLISIS DE ÍTEMS Y DE PRUEBA 7. ESCALAS DE CALIFICACIÓN 8. PRODUCCIÓN Y DIVULGACIÓN DE RESULTADOS

1. MARCO CONCEPTUAL• El proceso de evaluación se inicia conla elaboración de un Marco Conceptual,documento que ordena las ideas sobreel propósito y el enfoque que tendrá laprueba.• Este marco orienta las etapassubsiguientes en tanto que en él sedescribe el propósito de la evaluación.

¿QUÉ EVALUAR?• Los objetivos y sus alcances.• Selección de la TAXONOMÍALa preparación de una prueba paramedir objetivos instruccionalesespecíficos es más efectiva cuandolas conductas que van a evaluarse sedefinen claramente al inicio.

TAXONOMÍASLa palabra “taxonomía” viene del griego“ταξІƩ”, que significa orden, disposición,ley, norma, regla. Es un término queprocede del campo de las cienciasbiológicas donde se usa para expresar laclasificación, especialmente de animales oplantas, según sus relaciones naturales oafinidades morfológicas, fisiológicas,genéticas y filogenéticas(*)* Diccionario de las Ciencias de la Educación,Editorial Santillana, 1995, México DF, p. 1327

TAXONOMÍAS

Carlos Linneo(1707 – 1778)

Se considera el “Padre dela Taxonomía” a este grannaturalista sueco, quienintrodujo la metodologíapara clasificar organismosy realizó la titánica tareade clasificar casi 8000especies conocidas en sutiempo, con lanomenclatura binomialpropuesta por él.

TAXONOMÍAS• En el terreno de la Lógica se trata de laparte de la ciencia que brinda las leyes oprincipios clasificatorios de los objetos dela ciencia.• Dentro del campo de la Pedagogía y de laPsicología se utiliza esta palabra“taxonomía educativa”, entendiendo poresta la clasificación de los niveles dedesarrollo humano en un dominiodeterminado.

Principios del diseño de una taxonomía1.Se debe hacer con un mismo criterio oprincipio de clasificación, lo cual permitetener una lógica o regla con la que seconstruye la taxonomía.2.Debe ser exhaustiva o completa, lo cualquiere decir que debe contener todas lasespecies o miembros del conceptogenérico.3.Las especies o clases resultantes debenser mutuamente excluyentes.

Principios del diseño de una taxonomía4. Debe ser ordenada ( o sucesiva), de tal formaque se obtengan metódicamente los diversosgrupos de especies o miembros. NOTA: De acuerdo con estos principios podemosafirmar que varias de las llamadas taxonomía nolo son en realidad por incumplir alguno (s) deellos.

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES

• La Taxonomía del DominioCognitivo de Bloom (comenzadoen 1948 y terminado en 1956) fueuna de los mas influyentes obrassobre los niveles delconocimiento. •El titulo oficial del libro es La Taxonomía de los objetivoseducativos: La Clasificación delas metas educativas. ManualGuía 1: Dominio Cognitivo. Eltexto tiene cuatro autores más.(M. Englehart, E. Furst, W. Hill yD. Krathwohl).

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES • Es la más completa en el sentido de los requisitos acumplir, pues cuenta con una lista de verbos y hastacolecciones de ítems para evaluar las distintas categorías. • Parte de la idea de describir los procesos depensamiento desde niveles inferiores (asociados con lamemoria y la evocación), hasta pensamiento de alto orden(análisis, síntesis y evaluación). • Cuenta con seis categorías o niveles, divididas a su vezen subcategorías, definidas indistintamente en términosde productos o de procesos. • Por la importancia que reviste esta taxonomía, laestudiaremos con profundidad en este curso.

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES 1. Conocimiento: Se refiere a la capacidad de recordar hechosespecíficos y universales, métodos yprocesos, esquemas, estructuras o marcosde referencia sin elaboración de ningunaespecie, puesto que cualquier cambio yaimplica un proceso de nivel superior.Requiere que el alumno repita algún dato,teoría o principio en su forma original.

¿Qué se evalúa en este nivel taxonómico?NIVELTAXONÓMICO

HABILIDAD INSTRUCCIÓN

1°.CONOCIMIENTO

• Observar• Recordarinformación• Conocer fechas,eventos, lugares• Conocer ideasprincipales• Conocertérminos,definiciones,conceptos yprincipios

• Liste, nombre• Defina• Menciones• Describa• Identifique• Muestre• Recopile• ¿Quién, qué,cuándo, dónde?

EJEMPLO DE ÍTEM QUE EVALÚA A NIVELTAXONÓMICO DE “CONOCIMIENTO”

Una sinapsis es

(A) una masa o capa de protoplasma que contienemuchos núcleos, pero carece de límites claramente definidos entre las células. (B) un lapsus en la memoria provocado por unairrigación sanguínea inadecuada al cerebro. (C) el apareamiento de los cromosomas paterno ymaterno durante la maduración de las células germinales. (D) la porción cilíndrica de un axón. (E) el punto en el cual el impulso nervioso pasa de unaneurona a otra.

OTROS EJEMPLOS DE ÍTEMS QUE EVALÚAN A NIVELTAXONÓMICO DE “CONOCIMIENTO”

Change the word in parentheses to complete the sentences usingthe correct prefix or suffix. a. The train made a late____________ (depart)b. She was the only ________________(inhabit)c. He looked_______________(thought)d. You can trust her. She is a very___________ girl. (truth)e. I’ve put on____________ since I arrived here (weigh)f. It was very_____________ this morning.(mist)g. She lives in a very____________ flat. (luxury)h. He slipped on the___________ ground. (mud)i. I think the most_____________ idea is to go by bus. (sense)j. She was very kind and ______________ about the issue.(sympathy)k. They made a__________ about the heating. (complain)

OTROS EJEMPLOS DE ÍTEM QUE EVALÚA A NIVELTAXONÓMICO DE “CONOCIMIENTO”

Complete con una V si la afirmación esverdadera o una F si es falsa de acuerdo alo estudiado en clases sobre la cultura ycivilización Inglesa.1. ___ Londres es la capital de Inglaterra2. ___ La reina del Reino Unido es Isabel I3. ___ La moneda del Reino Unido es laLibra Esterlina


¿Cuál de las siguientes alternativas define quées un sustantivo?a) ___ Sustantivo es una palabra que caracterizaobjetos.b) ___ Sustantivo es un tipo de palabra quecaracteriza acciones.c) ___ Sustantivo es un tipo de palabra quesirve para nombrar.d) ___ Sustantivo es un tipo de palabra quesirve para caracterizare) ___ Sustantivo es un tipo de palabra quefunciona sin concordancia.


La resistencia aeróbica es:a) ___ La capacidad que posee el cuerpohumano para soportar una actividad físicaprolongada durante el mayor tiempo posible.b) ___ La capacidad que posee el cuerpohumano para soportar una actividad física decorta duración durante el menor tiempo posible.c) ___ La capacidad psico-física de resistir elcansancio durante esfuerzos prolongados,donde predomina la ausencia de oxígeno.d) ___ Es aquella que permite soportar duranteel mayor tiempo posible una deuda de oxigenoproducida por el alto ritmo de trabajo.

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES 2. Comprensión: Se refiere a la capacidad de entender oaprehender; el estudiante sabe qué se leestá comunicando y hace uso de losmateriales o ideas que se le presentan, sintener que relacionarlos con otros materialeso percibir la totalidad de sus implicaciones.El material requiere de un proceso detransferencia y generalización, lo quedemanda una mayor capacidad depensamiento abstracto.



2°.COMPRENSIÓN

• Entenderinformación• Entender elsignificado delmaterial• Traducirconocimiento a unnuevo contexto• Interpretarhechos, comparar,contrastar• Ordenar,agrupar, inferircausas

• Resuma• Describa• Explique• De ejemplos• Traduzca• Interprete• Asocie• Distinga• Estime• Diferencie• Discuta

EJEMPLO DE ÍTEM QUE EVALÚA EN A NIVELTAXONÓMICO DE “COMPRENSIÓN”

Cuando una corriente es inducida por elmovimiento relativo de un conductor y un campomagnético, la dirección de la corriente inducidaes tal que establece un campo magnético que seopone al movimiento. Este principio semanifiesta en (A) un imán que atrae un clavo. (B) un generador eléctrico o dinamo. (C) el movimiento de la aguja de una brújula. (D) un timbre eléctrico. Requiere que traduzca una definición formal yabstracta en un ejemplo específico.

OTROS EJEMPLOS DE ÍTEMS QUE EVALÚAN A NIVELTAXONÓMICO DE “COMPRENSIÓN”

Si un signo lingüístico forma parte de unalengua vernacular se entiende que:a) ___ Este signo pertenece a una lengua detradición milenaria.b) ___ Este signo se encuentra en desarrollocultural.c) ___ Este signo existe en una lengua inmersadentro de otra cultura.d) ___ Este signo es fundamentalmente unpréstamo de otra lengua.e) ___ Este signo es conocido como unarcaísmo de la lengua.

OTROS EJEMPLOS DE ÍTEMS QUE EVALÚAN A NIVELTAXONÓMICO DE “COMPRENSIÓN”

Cuando el cuerpo está en movimientorealizando ejercicios bajo el sol y pormuchos minutos, poco a poco comienza aagotar su energía provocando cansancioy fatiga. Esto sucede porque: (A) ___ Por dormir poco(B) ___ Por comer muchos alimentos(C) ___ Por no tomar agua

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES 3. Aplicación: Se guía por los mismos principios de lacomprensión y la única diferencia perceptible es lacantidad de elementos novedosos en la tarea porrealizar. Requiere el uso de abstracciones en situacionesparticulares y concretas. Pueden presentarse enforma de ideas generales, reglas de procedimientoo métodos generalizados y pueden ser tambiénprincipios, ideas y teorías que deben recordarsede memoria y aplicarse. Se trata de la solución deproblemas en situaciones particulares y concretas



3°. APLICACIÓN

• Usar información• Usar métodos,conceptos, teoríasen nuevassituaciones• Resolverproblemasutilizandohabilidades oconceptos

• Aplique• Demuestre• Construya• Examine• Modifique• Relacione• Clasifique• Experimente

EJEMPLO DE ÍTEM QUE EVALÚA EN A NIVELTAXONÓMICO DE “APLICACIÓN”

El ácido sulfúrico diluido reacciona rápidamente antevirutas de hierro y, sin embargo, el ácido sulfúricoconcentrado puede almacenarse sin peligro en recipientesde hierro. Esto sucede porque (A) ___ el ácido sulfúrico concentrado está menosionizado que el ácido sulfúrico diluido. (B) ___ el hierro ocupa una posición superior al hidrógenoen la serie de actividades. (C) ___ del recipiente de hierro, por ser más macizo, es unconductor del calor de la reacción. (D) ___ el hierro contiene carbón que no es afectado por elácido sulfúrico. (E) ___ el azufre en el ácido sulfúrico cubre al hierro y loprotege.

OTROS EJEMPLOS DE ÍTEMS QUE EVALÚAN A NIVELTAXONÓMICO DE “APLICACIÓN”

La electricidad que recibimos en casa dependede los embalses y ellos, a su vez, dependen dela cantidad de lluvia y nieve que cae en épocade invierno y de la crecida de los ríos enprimavera. Uno de los embalses se llena con900.000 metros cúbicos de agua y estaba seco,las lluvias de invierno fueron escasas y sólohicieron 258.000 metros cúbicos de agua, losdeshielos de primavera aportaron al embalse312.000 metros cúbicos de agua.a) ¿Cuánta agua tiene el embalse?b) ¿Cuánta agua le falta para que se llene?


El Invierno Boliviano El invierno boliviano es un período de lluvias en plena época de verano. Es un fenómenoclimático que se produce principalmente durante los meses de enero y febrero en la región deArica y Parinacota debido al recalentamiento de las masas de aire húmedo que llegan desde ellado oriental de la Cordillera de los Andes. Esto significa que son nubes que viajan desde elcentro del continente, especialmente del Amazonas, y que al chocar con la pared cordillerana seconcentran y producen lluvias.Este evento, que ocurre todos los años en Arica, para algunos es un problema y para otros unabendición del cielo.Cuando llega el invierno boliviano los ríos Lluta y San José se desbordan. Pero principalmentees el Lluta el que provoca más problemas, pues aumenta tanto su caudal que se transforma enuna amenaza para cientos de veraneantes. Su hilo de agua se transforma en un torrente de agua,cuya fuerza arrastra mucha tierra. Esta agua llega hasta la costa por la desembocadura del río enel sector de Chinchorro, dejando en el mar una gran mancha café que impide a los bañistasdisfrutar de la playa. El agua de río tiñe el mar como una gota de pintura en un vaso de aguacristalina.Pero en otro lado de la región, el invierno boliviano es una bendición, pues las lluvias estivalesson muy esperadas por las comunidades andinas que viven de la agricultura y los valles venasegurada el agua para la temporada agrícola.Como dicen las abuelitas ¡No hay mal que por bien no venga! El invierno boliviano tiene un ladopositivo. Lo importante es que los bañistas que acostumbran a nadar en la desembocadura delrío tomen precauciones y acudan a otros sectores de la playa donde están más protegidos.


¿Qué harán probablemente los veraneantes delas playas de Arica después de leer el artículo? a) ___ Cambiarán el destino de sus vacaciones.b) ___ Buscarán una playa que no sea afectadapor el fenómeno del invierno boliviano.c) ___ Viajarán a Arica en una fecha en que no sepresente el invierno boliviano.d) ___ No irán a la playa y hallarán otras formasde entretención.

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES 4. Análisis: Consiste en descomponer un problema dado ensus partes y descubrir las relaciones existentesentre ellas. En general, la eventual solución sedesprende de las relaciones que se descubrenentre los elementos constituyentes. Implica el fraccionamiento de una comunicaciónen sus elementos constitutivos de tal modo, queaparezca claramente la jerarquía relativa de lasideas y se exprese explícitamente la relaciónexistente entre éstas.



4°. ANÁLISIS

• Ver patrones• Organizar partes• Reconocersignificadosocultos• Identificarcomponentes• Descomponermaterial en suspartes y explicarlas relacionesjerárquicasexistentes entreestas

• Analice• Separe• Ordene• Conecte• Clasifique(analizando)• Compare• Infiera

EJEMPLO DE ÍTEM QUE EVALÚA EN A NIVELTAXONÓMICO DE “ANÁLISIS”

En el pasado, los glaciares cubrieron la región de losgrandes lagos. ¿Cuál de las siguientes situacionesofrece el apoyo experimental más directo para estaafirmación? (A) La región es relativamente fresca en verano. (B) En la región se encuentran depósitos noordenados. (C) En la región se encuentran rocas ígneas. (D) Todavía están presentes capas de hielo enGroenlandia. (E) La vegetación tropical está ausente en la región. Requiere que se determine el tipo de evidencia que daapoyo a un determinado enunciado teórico. Analizarcierta información para relacionar la evidencia con lateoría.

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES 5. Síntesis: Es el proceso de trabajar con fragmentos,partes, elementos, organizarlos, ordenarlosy combinarlos para formar un todo, unesquema o estructura que antes no estabapresente de manera clara. Requiere la reunión de los elementos y laspartes para formar un todo.



5°. SÍNTESIS

• Usar viejas ideaspara crear nuevas• Generalizar apartir de hechos• Relacionarconocimiento devarias áreas• Predecir• Sacarconclusiones• Producir algooriginal defraccionar elmaterial

• Planee• Invente• Diseñe• Formule• Componga• Prepare• Genere• Reescriba• Prediga

EJEMPLO DE ÍTEM QUE EVALÚA EN A NIVELTAXONÓMICO DE “SÍNTESIS”

El pueblo de Medina está situado a orillas del LagoÁguila. La ciudad de Cardona está al oeste de Medina. Laaldea de Salinas está al este de Cardona pero al oeste deMedina. El pueblo de Dávila se encuentra al este deRibera, pero al oeste de Salinas y de Cardona.Suponiendo que todos estos poblados están en elmismo país, ¿cuál de ellos está más al oeste? (A) Medina (B) Dávila (C) Cardona (D) Salinas (E) Ribera Requiere de la habilidad para planear.

TAXONOMÍA DE BENJAMÍN BLOOM YCOLABORADORES 6. Evaluación: Se refiere a la capacidad para evaluar; semide a través de los procesos de análisis ysíntesis. Requiere formular juicios sobre el valor demateriales y métodos, de acuerdo condeterminados propósitos. Incluye los juicioscuantitativos y cualitativos de acuerdo a loscriterios que se sugieran (los cuales sonasignados).



6°. EVALUACIÓN

• Comparar ydiscriminar entreideas• Valorar teorías ypresentaciones• Escoger conbase enargumentos• Verificar el valorde una evidencia• Juzgar basadoen criterios pre-establecidos

• Valore• Decida,seleccione• Evalúe• Verifique• Recomiende• Juzgue• Discrimine• Apoye• Concluya

EJEMPLO DE ÍTEM QUE EVALÚA EN A NIVELTAXONÓMICO DE “EVALUACIÓN” ¿Cuál de las siguientes afirmaciones interpreta y aclara mejor laafirmación: "La geología es en su mayor parte una ciencia deobservación y no una ciencia experimental"?

(A) Los fenómenos de la geología son por lo general demasiadoamplios en tiempo y escala para una investigación en condicionescontroladas. (B) Es imposible investigar fenómenos geológicos en ellaboratorio. (C) Una mente despierta puede ser atraída por la observación de lanaturaleza tal cual es en mayor grado que por la observación de éstaen condiciones artificiales. (D) Mientras los procesos geológicos sean fácilmente visibles, noes necesario llevar a cabo experimentos. (E) La afirmación se basa en la errónea distinción entre laevidencia directa tal como es obtenida por nuestros sentidos y lainferencia obtenida por razonamientos a partir de los hechos: laafirmación se contradice a sí misma.

TAXONOMÍA DE BENJAMÍN BLOOM Y OTROS

2. ESPECIFICACIONES DE LA PRUEBA Se refieren a una descomposición en categoríasdel objeto de evaluación; en el ámbito educativoeste generalmente alude a constructos o rasgoscomo “conocimiento”, “rendimiento”,“comprensión”, etc., y estos constructosusualmente se ligan al dominio en una disciplinao campo del saber como “matemáticas”,“ciencias naturales”, etcétera. Ladescomposición del objeto de evaluación encategorías se realiza tanto en lo disciplinar comoen lo cognitivo.

2. ESPECIFICACIONES DE LA PRUEBA En lo disciplinar, la categorización puede orientarse enfunción de temas – práctica que resulta tradicional enevaluaciones educativas – pero también puede hacerseen función de conceptos o de problemas propios de ladisciplina evaluada. Así, un objeto de evaluación comolas matemáticas puede ser categorizada, para efectos deevaluación, bien en temas como aritmética o álgebra,, obien en conceptos como número, proporción, medida,etcétera. Vale decir, que una categorización conceptual opor problemas puede resultar más pertinente si elpropósito es la evaluación de competencias, mientrasque si se busca evaluar conocimientos, la categorizaciónpor temas cumple un mejor papel.

2. ESPECIFICACIONES DE LA PRUEBA En el objeto de evaluación se enuncian también losprocesos cognitivos subyacentes a este. Como ya hemosvisto existen numerosas taxonomías de procesoscognitivos que se utilizan para realizar tal categorización.Independientemente de la taxonomía utilizada, esimportante que las categorías cognitivas definidasapunten a dar cuenta del objeto de evaluación planteadoen el Marco Conceptual del instrumento. Así, si se hadefinido que el objeto de evaluación es, por ejemplo“conocimientos en matemáticas”, el dominio cognitivo“conocimientos” debe ser evaluado a partir de lascategorías cognitivas que, de acuerdo con el criterioteóricamente sustentado por el equipo que diseña laprueba, den cuenta de lo que se quiere significar con elconstructo “conocimientos”.

2. ESPECIFICACIONES DE LA PRUEBA

¿Qué es una Tabla de Especificaciones? "Una tabla de especificaciones sirve para relacionar losobjetivos con la evaluación. En una tabla de este tipo seseñalan los distintos objetivos de un curso, unaasignatura, un parcial, etc. A continuación se asigna unpeso o puntuación a cada objetivo (o agrupación deestos) dependiendo de la importancia que tenga, deltiempo dedicado o de cualquier otra consideración queestime relevante el profesor. Por último, el número depreguntas de un examen que se deben incluir referidas acada objetivo viene determinado por el peso asignado almismo en la tabla de especificaciones."

2. ESPECIFICACIONES DE LA PRUEBA

Las taxonomías o categorizaciones del objeto deevaluación, tanto en el orden disciplinar como en el deprocesos cognitivos, deben responder a doscondiciones:• exhaustividad y• mutua exclusión.La exhaustividad significa que, en conjunto, todas lascategorías descritas den cuenta de todo el dominiodescrito.La mutua exclusión se refiere a la característica quedeben cumplir las categorías definidas en el sentido deque cada una de ellas aborde un proceso diferenciable delos procesos abordados en las demás categorías; esdecir, que las categorías de la taxonomía elegida nodeben solaparse entre sí.

3. ESTRUCTURA DE LA PRUEBA (O TABLA DEESPECIFICACIONES)El entrecruzamiento de las categorías disciplinary cognitiva da lugar a lo que se conoce comoEstructura de Prueba o la hoja de ruta para laelaboración de los ítems. Esta consiste en unamatriz que combina los dominios del objeto deevaluación, pues en sus celdas se determina eltipo de tareas que la resolución de los ítems vaa demandar, así como el número de estos queserán necesarios para dar cuenta de esa partedel objeto de evaluación que es señalado por talcelda

ALGORITMO PARA LA ELABORACIÓN DE UNATABLA DE ESPECIFICACIONES1.Determinar los objetivos o agrupación de estos(tópicos, ejes curriculares o aprendizajesesperados) que serán objeto de evaluación, losque ocuparán la primera columna de la tabla.2.Precisar la cantidad de horas aproximadas quese le dedica a cada uno de los objetivos o tópicosa evaluar, según el Programa. Dichas cantidadesocupan la segunda columna de la tabla.3.Determinar el número total de ítems que tendrála prueba (al menos el cuadrado perfecto delnúmero de tópicos a evaluar)

0

Tabla de especificaciones.Matemática. 6to. Año de Básica

Tópicos Horascla-ses

Porciento

Totalde ítem Conocimiento Compren-

sión Aplicación

Numeración 20Cálculo 67Magnitudes 27Geometría 30

Trabajo convariables 40

TOTAL 184 25

EJEMPLO DE TABLA DE ESPECIFICACIONES

ALGORITMO PARA LA ELABORACIÓN DEUNA TABLA DE ESPECIFICACIONES4. Calcular el porcentaje del total deltiempo dedicado al tratamiento de loscontenidos que representa cada tópicoque se evaluará:(Horas dedicadas al tópico / total dehoras) X 100

0

Tabla de especificaciones.Matemática. 6to. Año de Primaria


Porciento


sión Aplicación

Numeración 20 11%Cálculo 67 36%Magnitudes 27 15%Geometría 30 16%

Trabajo convariables 40 22%

TOTAL 184 100% 25


ALGORITMO PARA LA ELABORACIÓN DEUNA TABLA DE ESPECIFICACIONES5. Determinar el total de ítems quedeberán formularse sobre cada uno de lostópicos que se evaluarán en dicha prueba:(Porcentaje que representa / 100) X (totalde preguntas de la prueba)

0



Porciento


sión Aplicación

Numeración 20 11% 3Cálculo 67 36% 9Magnitudes 27 15% 4Geometría 30 16% 4

Trabajo convariables 40 22% 5

TOTAL 184 100% 25


ALGORITMO PARA LA ELABORACIÓN DEUNA TABLA DE ESPECIFICACIONES6. Dividir el total de preguntas que seformularán para cada uno de los tópicos aevaluar entre los niveles taxonómicos queserán explorados, de tal manera que lasuma del total de preguntas de los dosprimeros niveles taxonómicos a evaluar,resulte igual o superior al 60 % del total depreguntas de la prueba.Nota: Debe evitarse que haya un solo ítemen alguna de las celdas de la tabla.

0



Porciento


sión Aplicación

Numeración 20 11% 3 1 1 1Cálculo 67 36% 9 3 3 3Magnitudes 27 15% 4 2 1 1Geometría 30 16% 4 2 1 1

Trabajo convariables 40 22% 5 2 2 1

TOTAL 184 100% 25 10 8 7


> 60 %

ACTIVIDAD PRÁCTICA Nº 1Sector: Ciencias Naturales 5° año de

básica

Elaborar una tabla deespecificaciones para evaluar suprimera unidad del programa deestudio de este sector.

Unidad 1: Materia y sus transformaciones:sustancias puras, mezclas e introducción a laenergía

APRENDIZAJES ESPERADOS TIEMPOI. Distinguir sustancias puras y mezclas homogéneas y

heterogéneas en materiales y objetos que seencuentran en el entorno.

4 horas

II. Distinguir el estado físico de las mezclas y de sus componentes.

5 horas

III. Investigar las características de las mezclas y de sus componentes.

6 horas

IV. Utilizar una noción básica de energía para explicar, mediante ejemplos, manifestaciones de ella en su

entorno.

7 horas

V. Explicar de manera general, utilizando ejemplosdiversos, que la energía se transforma y se conserva.

8 horas

TOTAL 30 horas

0

UNIDAD 1Ciencias Naturales 5to. Año de Básica

Objetivos Horascla-ses

Porciento


sión Aplicación

I 4

II 5

III 6

IV 7

V 8TOTAL 30 25

TABLA DE ESPECIFICACIONES PARA UNAPRUEBA DE CIENCIAS NATURALES 5° AÑO

0



Porciento


sión Aplicación

I 4 13,33

II 5 16,66

III 6 20

IV 7 23,3

V 8 26,6TOTAL 30 100 25


0



Porciento


sión Aplicación

I 4 13,33 3

II 5 16,66 4

III 6 20 5

IV 7 23,3 6

V 8 26,6 7TOTAL 30 100 25


0



Porciento


sión Aplicación

I 4 13,33 3 1 1 1

II 5 16,66 4 2 1 1

III 6 20 5 2 2 1

IV 7 23,3 6 2 2 2

V 8 26,6 7 3 2 2TOTAL 30 100 25 10 8 7


ACTIVIDAD PRÁCTICA Nº 2Sector: Historia, Geografía y Ciencias

Sociales 8° año Básico Elaborar una tabla de

especificaciones para evaluar lasegunda unidad de esteprograma

Unidad 2: La expansión europea y suexpresión geográfica.

APRENDIZAJES ESPERADOS TIEMPOI. Dimensionar geográficamente la expansión de la

influencia europea hacia otros continentes a través deprocesos de exploración y conquista, durante la épocamoderna.

5 horas

II. Describir y evaluar las consecuencias económicas yterritoriales del proceso de la expansión europea.

7 horas

(a) Reconocer manifestaciones culturales del impactodel

descubrimiento de América en el mundo europeo y enla población nativa del contenido.

8 horas

IV. Utilizar una noción básica de energía para explicar, mediante ejemplos, manifestaciones de ella en su

entorno.

7 horas

TOTAL 27 horas

0

UNIDAD 2La expansión europea y su expresión geográfica


Porciento


sión Aplicación

I 5 18,5 5

II 7 25,9 6

III 8 29,6 8

IV 7 25,9 6TOTAL 27 100 25

TABLA DE ESPECIFICACIONES

0



Porciento


sión Aplicación

I 5 18,5 5 2 2 1

II 7 25,9 6 2 2 2

III 8 29,6 8 3 3 2

IV 7 25,9 6 2 2 2TOTAL 27 100 25 9 7 7


0



Porciento


sión Aplicación

I 5 18,5 6 2 2 2

II 7 25,9 6 2 2 2

III 8 29,6 8 3 3 2

IV 7 25,9 6 2 2 2TOTAL 27 100 26 9 7 7


ACTIVIDAD PRÁCTICA Nº 3Sector: Inglés 7° año Básico Elaborar una tabla de especificaciones

para evaluar el primer semestre de esteprograma

Unidad 1: Los amigosUnidad 2: Deportes y eventos deportivos

0

Primer Semestre Inglés 7° BásicoUnidades 1 y 2

Ejes Horasclases

Porciento


sión Aplicación

Comprensiónauditiva

Comprensiónlectora

Expresión OralExpresión

escritaTOTAL


4. DESARROLLO DE LA PRUEBAEl desarrollo implica redactar los ítems opreguntas siguiendo las pautas plasmadas en elMarco Conceptual y, más precisamente, en laEstructura de Prueba. Elaborar ítems en lacantidad y de las categorías requeridas, queapunten al propósito de la prueba, quedemanden el grado de exigencia apropiado parala población objetivo y que se apeguen a lasreglas técnicas establecidas para suconstrucción, asegura en gran medida quetodos los ítems de la prueba cumplan con cuatrocaracterísticas que resultan esenciales:equidad, pertinencia, relevancia y calidadtécnica.

5. APLICACIÓN PILOTOEl objetivo de realizar la aplicaciónpiloto de una prueba es evaluar sucalidad técnica, valorar lapertinencia de las preguntas parala población y afinar los criteriosde calificación.

5. APLICACIÓN PILOTOAl hacer una aplicación piloto se recogen lasrespuestas dadas por la muestra seleccionada ycon ellas se procede a estimar indicadorespsicométricos (índice de discriminación (a), dedificultad (b) y de seudo-adivinación (c)) quepermiten reconocer las necesidades de ajustedel instrumento en términos del nivel dedificultad de las preguntas (por ejemplo, si losítems resultaron demasiado fáciles para lapoblación será necesario elaborar algunos demayor nivel de dificultad para la aplicacióndefinitiva), de la redacción de las opciones derespuesta y de organización de la prueba.

6. APLICACIÓN DEFINITIVAUna vez que se dispone de una pruebadebidamente validada, la siguiente fasecorresponde a la aplicación o AdministraciónDefinitiva de la prueba. Ya desde la aplicaciónpiloto, si la hubo, o en su defecto, desde unmomento previo a la fase de aplicación se handebido definir las condiciones de administraciónconvenientes y necesarias para los propósitosde evaluación. Se trata de garantizar que lascondiciones para responder la prueba seanequitativas y confortables para la poblaciónobjetivo.

7. ANÁLISIS DE ÍTEMS Y DE PRUEBA Algunos indicadores fácilmente estimables son: • Porcentaje de respuestas correctas para cada pregunta, • Errores más frecuentes en las respuestas, • Preguntas que no fueron respondidas por ningúnevaluado (o que muchos dejaron de responder), • Preguntas respondidas correctamente por casi todos, • Preguntas respondidas correctamente por muy pocos, • Respuesta más común o respuesta menos común (enpreguntas de producción de respuesta),

7. ANÁLISIS DE ÍTEMS Y DE PRUEBA • Preguntas en las que se equivocaron evaluados cuyodominio del saber se ha interpretado como alto o buenopor otras fuentes de evaluación, • Opción de respuesta preferida (en ítems de selección), • Cantidad de evaluados que tuvieron dudas pararesponder un mismo ítem, • Cantidad de evaluados a quienes el tiempo pararesponder les fue suficiente/insuficiente.

8. ESCALAS DE CALIFICACIÓN El paso a seguir, una vez hecho el análisis deítems y tomadas las decisiones pertinentes alrespecto, es la definición de Escalas deCalificación que, desde el punto de vista técnico,se define como la asignación de valores, deacuerdo con ciertas reglas, a los desempeños delos evaluados cuando se les aplica uninstrumento de evaluación (Fenton y Pleeger,1997). La construcción de escalas es la fase en laque se definen las reglas de asignación de esosvalores, con el fin de asegurar que lasinterpretaciones de los resultados de laevaluación sean comprensibles y pertinentes.

8. ESCALAS DE CALIFICACIÓN Es importante reconocer que cada pregunta queconforma el instrumento tiene asociado un nivelde dificultad particular que debe ser tenido encuenta en el momento de asignar la calificación acada evaluado. Los modelos modernos de procesamiento dedatos basados en la Teoría de Respuesta al Ítemutilizan formulaciones matemáticas que tienen encuenta el nivel de dificultad de los ítems paraproducir una calificación.

8. ESCALAS DE CALIFICACIÓN Es también importante asegurarse de que lasvaloraciones asignadas tengan en cuenta lasdiferencias en los instrumentos si se aplicandistintas formas del mismo a subgrupos deevaluados (cuando un docente diseña un temarioA y un temario B, por ejemplo, para que la mitadde los estudiantes responda cada temario, sinconsiderar el nivel de dificultad que reviste cadatemario, puede estar ofreciendo ventajas aaquella parte de evaluados que responda el temamenos exigente).

8. ESCALAS DE CALIFICACIÓN Escalas propiamente dichas implican la estandarización delos datos usando el promedio y la desviación estándar delos mismos para llevar todas las puntuaciones brutas(respuestas correctas) a puntuaciones que cobran sentidocomo parte de una distribución (por ejemplo ladistribución normal o gaussiana) o de un criterio oestándar externo (por ejemplo escalas de niveles dedesempeño). Actualmente se dispone de modelosmatemáticos más avanzados como los de la Teoría deRespuesta al Ítem, que convierten las puntuaciones brutasen puntuaciones log intervalares y permiten laconstrucción de escalas de calificación con mayoresposibilidades de interpretación.

9. PRODUCCIÓN Y DIVULGACIÓN DERESULTADOS La fase final del proceso de evaluación es lasocialización o la Divulgación de los Resultados,no solamente a los evaluados, sino también a otrosgrupos interesados en conocer tales resultados(padres de familia, directivos de la institución,organismos gubernamentales, sociedad civil,etcétera). Esta es una fase crucial del proceso deevaluación porque, de la claridad y oportunidadcon que se comuniquen los resultados, depende engran medida que se cumpla o no con lospropósitos esenciales de la evaluación comoproceso y de la prueba propiamente dichos.

9. PRODUCCIÓN Y DIVULGACIÓN DERESULTADOS El verdadero valor de la evaluación como base dela cualificación educativa se da cuando losusuarios se informan de manera detallada deaquellos aspectos en los que se detectan fallas yen aquellos en los que se infiere fortaleza, de talsuerte que los diferentes actores del procesoeducativo puedan tomar decisiones acertadassobre las acciones que conviene implementar conmiras a la cualificación permanente. En el aula, laretroalimentación personalizada y pormenorizadade los resultados puede marcar la diferencia entreel sistema tradicional y un sistema educativoeficaz.

Elaboracioìn de instrumentos de evaluacioìn tema nâ° 3

Documents

Transcript of Elaboracioìn de instrumentos de evaluacioìn tema nâ° 3