Elaboración y análisis de examenes tiipo test

download Elaboración y análisis de examenes tiipo test

If you can't read please download the document

description

Presentación que comenta cómo redactar los ítems de los examenes tipo test, así como algunos de los criterios de calidad, y la forma de calificar a los alumnos.Presentation discussing how to write the items in multiple choice exams, and some of the quality criteria, and how students qualify.

Transcript of Elaboración y análisis de examenes tiipo test

  • 1.
    • Exmenes tipo test: Redaccin y valoracin
    Antonio Matas Terrn Universidad de Mlaga Enero 2010

2. ndice:

  • Redaccin de los test.

3. Anlisis de los tems. 4. Calidad de los test. 5. Calificacin en un test. 6. I - Redaccin de los test

  • Componentes del examen tipo test.

7. Componentes del tem. 8. Redaccin de los tems. 9. Ejercicio 1

  • Antes de comenzar asumimos que todos hemos pasado alguna vez por un examen tipo test, y por tanto se sabe cmo son y para qu se utilizan.

10. Si es as, pasemos a realizar el siguiente ejercicio:

  • Elijamos un tema acadmico cualquiera.

11. Escribamos en un papel (y debe hacerse realmente en un papel o en el procesador de textos) 10 preguntas tipo tem sobre dicho tema. 12. Guardemos el papel o archivo hasta dentro de un rato. 13. Componentes del examen tipo test

  • Un examen tipo test es una coleccin de tems que presentan estimulos (en distintos formatos: texto, grfico, imagen, etc.) con el objetivo de recoger informacin sobre el grado de conocimiento, habilidades, actitudes, emociones, compromiso, valores, etc., de una persona.

14. Cuestiones sobre la persona que contesta: Nombre, grupo de clase, fecha, etc. 15. Componentes del tem

  • Los tems tienen dos elementos bsicos:
    • Tronco: Se trata del argumento del estmulo, la parte principal que contextualiza la cuestin. Puede ser una pregunta, un enunciado, un prrafo incompleto, unas directrices, una imagen, un sonido, etc.
  • 16. Opciones: Conjunto de elementos entre los que debe elegir la persona. A su vez las opciones son dos:
  • Distractores: Opciones no pertinentes (incorrectas) repecto al tronco del tem.

17. Clave: Opcin coherente (correcta) y pertinente con el tronco del tem. Ejemplo: - El caballo blanco de Santiago es de color: a) Blanco b) Verde c) Azul Tronco Clave Distractores Opciones 18. Redaccin de los tems

  • Antes de redactar un tem debe estar claro el nivel de aprendizaje sobre el que versar.

19. Puede utilizarse como referente alguna de las propuestas psicopedaggicas como la taxonoma de Bloom, por ejemplo.

  • Taxonoma de Bloom -> objetivo del tem:
  • Conocimiento-> tems que tratan de hacen recordar.

20. Comprensin-> La persona debe interpretar. 21. Aplicacin->Saber cmo intervenir. 22. Anlisis-> Capacidad de conocer y comprender cmo funciona un todo. 23. Evaluacin-> Valoracin 24. Redaccin de los tems

  • Consejos:
  • No hacer preguntas triviales.

25. Utilizar un vocabulario conocido (adecuado) por las personas que contestarn. 26. Redactar con claridad. 27. Una sola opcin correcta (clave). 28. Independencia entre tems. 29. Evitar giros expresivos, noes o negaciones, abreviaturas innecesarias, etc.

  • Consejos:
  • El tronco debe ser claro y breve, no debe instruir.

30. Los distractores se pueden obtener de errores habituales en profanos a la materia o de temas relacionados con el que se pregunta. 31. Todas las opciones deben tener la misma longitud y estilo literario. 32. Utilizar 3 opciones de respuesta. 33. Redaccin de los tems

  • La prueba del 9 de las opciones:
  • Una opcin clave es buena y efectiva si toda persona instruida sobre la temtica de la que versa el tem, identifica la clave sin ningn tipo de problemas.

34. Un distractor es bueno y efectivo si cualquier persona sin formacin en la temtica sobre la que versa el tem, aunque con un nivel de formacin suficiente como para compreder el tem sin dificultad, tiene la misma probabilidad de elegir el distractor que la clave. 35. Ejercicio 1 (continuacin)

  • Vamos a sacar ahora el papel o archivo con nuestra prueba de 10 tems que hicimos antes:
  • Qu opinamos sobre nuestra forma de redactar tems?

36. Deberamos cambiar nuestro enfoque de redaccin? 37. Hemos ido en contra de muchos de los consejos ofrecidos anteriormente? 38. ... 39. II Anlisis de los tems

  • Dificutad.

40. Discriminacin. 41. Homogeneidad. 42. Dificultad

  • ndice de dificultad:
  • Indica lo difcil que es contestar correctamente (elegir la clave) al tem.

43. Se calcula diviendiendo el nmero de personas que han contestado correctamente al tem, entre todas las que han contestado. 44. Su valor se mueve entre 0 (muy difcil) y 1 (muy fcil). Expresin: i.d : ndice de dificultad. n : Nmero de personas que han contestado correctamente. N : Nmero de personas totales que han contestado al tem. Interpretacin : 0---------i.d---------1 Difcil------------Fcil 45. Discriminacin

  • ndice de discriminacin:
  • Indica la capacidad del tem para diferenciar entre las personas que saben la respuesta del tem de los que no.

46. El ndice de discriminacin se calcula a partir del percentil 25 y 75 del test. 47. 0 indica una discriminacin nula, y 1 una discriminacin mxima. Expresin: na : Nmero de personas del percentil 25 que ha contestado correctamente al tem. nb : Idem del percentil 75. Na : Nmero de personas totales del percentil 25 que han contestado al tem. Nb : Idem del percentil 75 Interpretacin : 0----------------i.ds----------------1 No discrimina-Alta discriminacin 48. Homogeneidad

  • ndice de homogeneidad:
  • Indica en qu grado un tem es homogeneo con el resto del test. Ofrece una medida cuanto un tem trabaja a favor de la misma medicin que el resto del test.

49. Se calcula a partir de la correlacin del tem con el resto del test. 50. 0 suponen baja homogeneidad y 1 alta homogeneidad.Expresin: r ix : Correlacin test-item. S x : Desviacin tpica del test. El cuadrado es la varianza del test. S i : Desviacin tpica del tem, su cuadrado es la varianza del tem. Interpretacin : 0---------i.h---------1 No homogeneo-------Homogeneo 51. III Calidad del test

  • Fiabilidad.

52. Validez 53. Fiabilidad

  • La fiabilidad puede entenderse en dos sentidos:
  • Como estabilidad o constancia de varias medidas obtenidas con un mismo test. Se trata de lafiabilidad relativa.

54. Como precisin de las medidas obtenidas por un test. Se trata de lafiabilidad absoluta . Fiabilidad relativa Fiabilidad absoluta 55. Validez

  • Un test es vlido si realmente mide lo que afirma medir.

56. Tipos de validez:

  • Aparente.

57. Comprobada:

  • Terica:
  • Validez de contenido.

58. Validez de constructo. Emprica:

  • Validez relativa.

59. Validez absoluta. 60. IV Calificacin en un test

  • Calificacin: ndice de dificultad de la persona

61. Calificacin: i. d. de la persona

  • Supuesto: Un alumno contesta a un examen de 20 tems con 3 opciones cada tem. Obtiene 15 aciertos y 3 errores. Deja sin contestar 2 tems.
  • Para corregir los posibles aciertos por azar, se calcula la calificacin restando a los aciertosuna cantidad proporcional al nmero de opciones.
  • Expresiones parael clculo:
  • Desarrollo del ejemplo:

A: Aciertos. E: Errores. np: Nmero de opciones de los tems. N: Nmero de tems que tiene el test. C: Calificacin.