Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems •...

36
Diseño de pruebas de contenidos teóricos Elaborar una prueba de evaluación de contenido teórico con diferentes ítems. Aplicar las normas de elaboración y corrección de los diferentes tipos de ítems. Realizar la tabla de especificaciones de una prueba teórica 05/09/2012 1 Adela Valenciano Suárez

Transcript of Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems •...

Page 1: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Diseño de pruebas de contenidos teóricosteóricos

Elaborar una prueba de evaluación de contenido teórico con diferentes ítems.

Aplicar las normas de elaboración y corrección de los diferentes tipos de ítems.

Realizar la tabla de especificaciones de una prueba teórica

05/09/2012 1Adela Valenciano Suárez

Page 2: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Prueba de contenidos teóricos

Examen escrito cuyas características principales son:

• Presencia de un alto número de preguntas breves en su enunciado y sobre todo en su respuesta.en su enunciado y sobre todo en su respuesta.

• La valoración de los resultados y las respuestas aceptables están previamente fijadas.

• El procedimiento de la prueba está previamente determinado

05/09/2012 2Adela Valenciano Suárez

Page 3: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Tabla de especificaciones

• Finalidad: lograr que la prueba sea representativa de los objetivos que queremos evaluar.

• Pasos a seguir:– Determinar las áreas de contenido a evaluar dentro de

cada U.D.cada U.D.– Otorgar un porcentaje de importancia a cada una de

las áreas (U.D. o partes de contenido)– Fijar el número de ítems para cada contenido en

función del número de ítems de la prueba– Repartir los ítems en función de los niveles de

conocimiento

05/09/2012 3Adela Valenciano Suárez

Page 4: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Tabla de especificaciones

05/09/2012 4Adela Valenciano Suárez

Page 5: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Tabla de especificaciones: Niveles de conocimiento

• El conocimiento de un determinado contenido puede exigirse a distintos niveles– Recordar datos– Interpretación correcta de información– Resolver un problema

• Suponen distintos grados de complejidad intelectual.• Suponen distintos grados de complejidad intelectual.• Para distinguirlos se utiliza la taxonomía de Bloom

– Conocimiento

– Comprensión

– Aplicación

– Análisis– Síntesis– Evaluación

05/09/2012 5Adela Valenciano Suárez

Page 6: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Tabla de especificaciones: Niveles de conocimiento

• Conocimiento: Recordar o reconocer información específica como: hechos, fechas, nombres, símbolos, teorías, definiciones y otros

• Comprensión: Entender el material que se ha aprendido. Esto se demuestra cuando se presenta la información de otro modo, se transforma, se buscan relaciones, se asocia, se interpreta lo aprendido o se presentan posibles efectos o consecuencias.efectos o consecuencias.

• Aplicación: Llevar el conocimiento y destrezas adquiridas a nuevas situaciones.

• Análisis: Encontrar patrones; organizar las partes; reconocer significados ocultos; identificar componentes.

• Síntesis: Generar, organizando los elementos de la información disponible, un producto original, que puede ser la comunicación de ideas o experiencias sobre un tema, un determinado plan de acción o un modelo hipotético para explicar distintos fenómenos.

• Evaluación: El alumnado emitirá un juicio de valor sobre un determinado material. Los criterios de evaluación se le pueden suministrar o dejar que el propio alumnado los determine.

05/09/2012 6Adela Valenciano Suárez

Page 7: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Tabla de especificaciones: Niveles de conocimiento

¿Cuál es el nombre de este botón en Microsoft Excel ?– Fuente– Cuadro de texto– Combinar y centrar

– Cambiar mayúsculas y minúsculas

En una hoja de cálculo, necesito saber cuantas celdas contienen un valor mayor que 100 ¿Qué función o funciones serían las más adecuadas para calcularlo?

– Sumar.si– Sumar.si– Contar.si

– Contar y si– Sumar y si

Si aparecen los siguientes símbolos “###” en una celda de Microsoft Excel ¿A qué es debido?

– El contenido de la celda es numérico y se le ha aplicado un formato inadecuado– Se ha escrito texto en una celda cuyo formato es numérico– Error en una fórmula cuyo resultado es numérico– Falta espacio en una celda con contenido numérico, para poder ver su contenido

05/09/2012 7Adela Valenciano Suárez

Page 8: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Clasificación de ítems

Ítems de la prueba teórica OBJETIVA

EvocaciónReconocimiento

Ítems para la evaluación de aprendizajes

complejos

Pruebas de ensayoPruebas de ejercicios

Evocación

Respuesta breve

Texto incompleto

Reconocimiento

Selección

Verdadero o falso

Correspondencia

Selección múltiple

Pruebas de ensayoPruebas de ejercicios

interpretativos

Miden aprendizajes a nivel de:

Conocimiento, Comprensión o

Aplicación

Miden aprendizajes a nivel de:

Análisis, Síntesis o Evaluación

05/09/2012 8Adela Valenciano Suárez

Page 9: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Clasificación de ítems

Dependiendo del nivel de aprendizaje u objetivo a evaluar utilizaremos un tipo de ítems u otros

Tipo de ítem

Objetivos

Evocación Reconocimiento

Selección

Ensayo

Breve

Ensayo

extenso

Ejercicio

interpretativo

Objetivos

Conocimiento X X X

Comprensión X X X X

Aplicación X X X X

Análisis X X X

Síntesis X X

Evaluación X X

05/09/2012 9Adela Valenciano Suárez

Page 10: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de evocación

05/09/2012 10Adela Valenciano Suárez

Page 11: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de evocación: Normas de elaboración

• Redactar la pregunta de manera que únicamente sea posible una respuesta.

• Evitar el uso de expresiones idénticas a las que figuran en los manuales.

• Cuando la respuesta al ítem sean números indicar el tipo de unidades exigidas.

• Cuando la respuesta al ítem sean números indicar el tipo de unidades exigidas.

• Considerar válida toda respuesta que exprese correctamente el concepto requerido.

• Los espacios en blanco de la misma longitud.• Limitar la cantidad de ítems de evocación a un 20% del

total, pues miden objetivos sencillos.

05/09/2012 11Adela Valenciano Suárez

Page 12: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de evocación: Normas de corrección

La suma de los aciertos será la puntuación total.

05/09/2012 12Adela Valenciano Suárez

Page 13: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de reconocimiento: Verdadero o falso

Miden capacidades del alumnado para:• Diferenciar hechos y opiniones• Identificar relaciones causa-efecto• Distinguir conclusiones válidas de las que no lo sonSu uso debe ser limitado:Su uso debe ser limitado:• Reconocer una proposición como falsa no garantiza que se

conozca la respuesta correcta• El alumnado puede fijar o recordar enunciados falsos como

verdaderos• Es difícil encontrar situaciones reales en las que algo sea

categóricamente falso o verdadero.• La incidencia del azar es del 50%

05/09/2012 13Adela Valenciano Suárez

Page 14: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Verdadero/Falso: Normas de elaboración

• Cada enunciado sólo debe incluir una idea o concepto.

• Evitar formulaciones negativas y especialmente la doble negación.

05/09/2012 14Adela Valenciano Suárez

Page 15: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Verdadero/Falso: Normas de elaboración

• La verdad o falsedad de los ítems debe ser lo más categórica posible.

• Las proposiciones muy generales deben evitarse.

05/09/2012 15Adela Valenciano Suárez

Page 16: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Verdadero/Falso: Normas de elaboración

• Redactar los ítems verdaderos con la misma extensión que los falsos.

• Evitar términos como:– siempre, nunca, sólo, nadie, ninguno. Se asocian con

respuestas falsas. Son escasas las situaciones respuestas falsas. Son escasas las situaciones verdaderas que no tienen excepciones.

– con frecuencia, usualmente, a veces. Se asocian con respuestas verdaderas.

• El porcentaje de ítems verdaderos y falsos debe variar.

05/09/2012 16Adela Valenciano Suárez

Page 17: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Verdadero/Falso: Normas de corrección

• Para compensar las respuestas que puedan deberse al azar, se resta al total de aciertos el número de errores.

• Si la puntuación resultante fuese negativa se califica con cero.

05/09/2012 17Adela Valenciano Suárez

Page 18: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de reconocimiento: Correspondencia

• Miden la capacidad de identificar relaciones basándose en el conocimiento de asociaciones concretas.

05/09/2012 18Adela Valenciano Suárez

Page 19: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de reconocimiento: Correspondencia

• La variedad de campos a asociar es amplia. Por ejemplo:

05/09/2012 19Adela Valenciano Suárez

Page 20: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de reconocimiento: Correspondencia

• Ventaja: se puede medir gran cantidad de información en poco tiempo. Dada la variedad de conceptos que incluye cada ítem.

• Limitaciones:• Limitaciones:

– Dificultad de encontrar material homogéneo para la construcción de listas amplias de elementos a asociar.

– Frecuente riesgo de que existan claves, que favorecen la elección de la respuesta correcta

05/09/2012 20Adela Valenciano Suárez

Page 21: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Correspondencia: Normas de elaboración

• Establecer un número desigual de premisas– Especificando en las instrucciones que las premisas y

respuestas pueden relacionarse una vez, varias veces o ninguna vez. Evitando el acierto por eliminación.

• El material que compone el ítem debe ser homogéneo.

• El material que compone el ítem debe ser homogéneo.

• La lista de premisas debe ser breve (3-6)• El ítem no debe dividirse en varias hojas• Evitar claves reveladoras• La lista de premisas debe estar colocada en orden

lógico: alfabético o secuencia numérica

05/09/2012 21Adela Valenciano Suárez

Page 22: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Correspondencia: Normas de corrección

• Cada ítem de correspondencia se corregirá según una de las siguientes fórmulas:

– Puntuación=Número de aciertos dividido entre número de alternativas.número de alternativas.

– Puntuación=Número de aciertos

05/09/2012 22Adela Valenciano Suárez

Page 23: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de reconocimiento: Selección múltiple

• Es el más utilizado porque mide aprendizajes más complejos.

• El ítem está formado por:

– Base o pregunta: Enunciado del problema– Base o pregunta: Enunciado del problema

– Opciones o alternativas: Posibilidades que se ofrecen para la respuesta

– Distractores: Alternativas incorrectas

05/09/2012 23Adela Valenciano Suárez

Page 24: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de reconocimiento: Selección múltiple

• Selección de la respuesta correcta

• Selección de la respuesta más correcta

05/09/2012 24Adela Valenciano Suárez

Page 25: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Ítems de reconocimiento: Selección múltiple

Ventajas Limitaciones

• Incapacidad para medir objetivos que supongan creatividad

• Dificultad para elaborar

• Amplia aplicabilidad a los distintos objetivos del aprendizaje.

• Reduce el acierto por azar • Dificultad para elaborar suficientes distractores aceptables

• Reduce el acierto por azar

• Su valor diagnóstico

• Son adecuadas para el alumnado de bajo nivel verbal.

05/09/2012 25Adela Valenciano Suárez

Page 26: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Selección múltiple: Normas de elaboración

• La pregunta debe tener sentido por sí sola, sin alternativas.

• Evitar formulación negativa, si se usa destacarla.destacarla.

• Evitar sobrecargar de información la pregunta

• Evitar la inclusión de términos absolutos en los distractores

• Las palabras que se vayan a repetir en todas las alternativas las incluimos en la pregunta

05/09/2012 26Adela Valenciano Suárez

Page 27: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Selección múltiple: Normas de elaboración

• Cuando se pretende medir la comprensión de términos, conceptos,… éstos deben figurar en la pregunta, mientras que definiciones o descripciones figurarán en las alternativas.

• Evitar claves reveladoras:• Evitar claves reveladoras:– Verbales

– Gramaticales

– Por heterogeneidad

• Se recomienda 4 alternativas y que la verdadera sea sólo una

05/09/2012 27Adela Valenciano Suárez

Page 28: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Selección múltiple: Normas de corrección

Para controlar la incidencia del azar, dividimos los errores entre la diferencia del número de alternativas total y las alternativas correctas, el resultado lo restamos a los aciertos.resultado lo restamos a los aciertos.

05/09/2012 28Adela Valenciano Suárez

Page 29: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Selección múltiple: Ejemplos

05/09/2012 29Adela Valenciano Suárez

Page 30: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Selección múltiple: Ejemplos

05/09/2012 30Adela Valenciano Suárez

Page 31: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Corrección de pruebas con distintos tipos de ítems

• Corregir cada tipo de ítems según formulación específica.

• Sumar todas las puntuaciones directas.

• Pasar a puntuación decimal utilizando la • Pasar a puntuación decimal utilizando la fórmula:

05/09/2012 31Adela Valenciano Suárez

Page 32: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Resumen Corrección de pruebasTipo de ítem Fórmula Aclaración de abreviaturas

Respuesta breve y texto incompleto

P=AP=PuntuaciónA=Aciertos

Verdadero / Falso P=A-EP=PuntuaciónA=AciertosE=Errores

P=PuntuaciónA=Aciertos

ESelección múltiple

A=AciertosE=ErroresN=Nº total de alternativasN=nº de alternativas verdaderas

CorrespondenciaP=A/N

ÓP=A

P=PuntuaciónA=AciertosN=Nº total de alternativas

Prueba formulada con distintos tipos de ítems

1. Agrupar los ítems según tipo2. Corregir cada tipo de ítems por separado3. Sumar todas las puntuaciones directas4. Pasarlo a puntuación decimal (regla de tres en base a

puntuación máxima 10)

nN

EAP

−−=

05/09/2012 32Adela Valenciano Suárez

Page 33: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

05/09/2012 33Adela Valenciano Suárez

Page 34: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

05/09/2012 34Adela Valenciano Suárez

Page 35: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Encabezado de una prueba de conocimiento

• Las pruebas de conocimiento deben tener un encabezado y unas instrucciones generales con el fin de presentarlas y dejar claro al alumnado el modo de cumplimentarla.

• Encabezado– Nombre y número de curso– Tipo de prueba– Nombre de módulo y/o U.U.D.D, que se evalúan– Nombre de módulo y/o U.U.D.D, que se evalúan– Centro– Nombre apellidos del alumno– Fecha

• Instrucciones– Nº de ítems, tipo, tiempo estimado– Normas de cumplimentación– Forma de calificación, calificación mínima para apto

05/09/2012 35Adela Valenciano Suárez

Page 36: Diseño de pruebas teoricas - … · Corrección de pruebas con distintos tipos de ítems • Corregir cada tipo de ítems según formulación específica.

Bibiografía

• CENTRO DE REFERENCIA NACIONAL DE FORMACIÓN PROFESIONAL EN JARDINERÍA DE LOS REALEJOS. (2010): “Introducción a la metodología didáctica”, Tenerifemetodología didáctica”, Tenerife

• CENTRO NACIONAL DE FORMACIÓN PROFESIONAL – LAS PALMAS. (2012): “Manual de metodología didáctica”, Las Palmas

05/09/2012 36Adela Valenciano Suárez