INSTRUMENTO PARA LA ELABORACION DE ITEMS Y

ESTRUCTURACION DE PRUEBAS

Documento dirigido a Docentes, Tutores , líderes académicos y de

investigación, con el fin de fortalecer el proceso de evaluación del

aprendizaje en la UNAD

JOSE JAVIER ACHICANOY MIRANDA

Consejero Académico CEAD Florencia

Octubre 2010

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

INTRODUCCION

El documento de trabajo presenta los elementos básicos a tener en cuenta

para la CONSTRUCCION DE ITEMS y la ESTRUCTURACIÓN DE

PRUEBAS OBJETIVAS A UTLIZAR EN LA EVALUACIÓN DEL

PORCENTAJE FINAL (40%), de los cursos académicos ofertados por la

UNAD.

A mediado plazo se orienta como parte fundamental para iniciar la

construcción del “BANCO DE PREGUNTAS” según el enfoque de

evaluación por competencias.

Que vamos a trabajar: 1.- Conceptos básicos utilizados en el proceso de

construcción de ítems. 2.- Recomendaciones generales.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

EVALUACION POR COMPETENCIAS:

“En el ámbito educativo colombiano el Ministerio de

Educación plantea la competencia como “un saber

hacer en contexto, es decir el conjunto de acciones

que un estudiante realiza en un contexto particular y

que cumple con las exigencias específicas del mismo”

ICFES. “Nuevo examen de estado, cambios para el siglo XXI, propuesta

general”, Bogotá. 1998)

“Capacidad de responder a demandas complejas y

llevar a cabo tareas diversas de forma adecuada.

Supone una combinación de habilidades prácticas,

conocimientos, motivación, valores éticos, actitudes,

emociones y otros componentes sociales y de

comportamiento que se movilizan conjuntamente para

lograr una acción eficaz”http://www.concejoeducativo.org/article.php?id_article=164

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

1.- CONCEPTOS BÁSICOS UTILIZADOS

EN EL PROCESO DE CONSTRUCCIÓN DE

ÍTEMS.

¿Qué es un curso académico?

“Es la unidad fundamental de formación, enlaza

las intencionalidades pedagógicas con los

procesos propios de los saberes disciplinares: Se

expresa en créditos académicos o en la cantidad

de trabajo académico y/o de aprendizaje que

requiere adelantar el estudiante para adquirir las

competencias previstas en el respectivo curso”

UNAD" Acuerdo 000018 de Junio 29 de 2005, por el cual se adopta el Reglamente General estudiantil. Art. 16

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

¿Qué es una unidad didáctica?

“Son el conjunto de conocimientos seleccionados,

organizados y desarrollados a partir de palabras clave

tomados como conceptos que los tipifican, en

articulación con las intencionalidades formativas,

destinadas a potenciar y hacer efectivo el aprendizaje

mediante el desarrollo de operaciones, modificaciones

y actualizaciones cognitivas y nuevas actuaciones o

competencias por parte del estudiante.

El número de las unidades didácticas está en

correlación directa con el número de créditos

académicos asignados al curso”

SALAZAR RAMOS, Roberto de J. “El material didáctico y el acompañamiento tutorial en el

contexto de la formación a distancia y el sistema de créditos académicos”. Universidad

Nacional Abierta y a Distancia – UNAD-Bogotá. 2004

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

¿Qué es una pregunta?

Es un enunciado que pide seleccionar o plantear una

respuesta específica sobre una incógnita de

conocimiento, de desempeño o de referencia a un

sistema de valores. Es una indagación o

cuestionamiento sobre algo.

¿Qué es una pregunta contextualizada?

La técnica de la pregunta contextualizada dentro de la

evaluación es importante, pues dependiendo de su

diseño permite obtener de los estudiantes información

sobre conceptos, procedimientos, habilidades cognitivas,

sentimientos, experiencias, etc., disponibles en la

memoria a corto o a largo plazo. Es posible indagar por

el nivel de procesamiento de la información que el

alumno utiliza sobre el contenido.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

Características de la pregunta contextualizada las

siguientes:

Permite fortalecer los procesos cognitivos, por lo tanto se debe

mostrar al máximo toda la información posible (se trata de no

esconder información), frente a ella se estable la pregunta orientada a

movilizar esquemas mentales, creando así el conflicto cognitivo como

posibilidad de generar nuevas formas de pensar y aprender. No es útil

para privilegiar la memorización y la reproducción de información.

Es propicia para indagar por el logro de las metas de contenidos o

evidencias como resultado de las competencias propuestas, por

ejemplo las comunicativas: interpretar, argumentar y proponer.

Como comunicación maestro – alumno, colabora en la construcción

de conocimiento desde la interacción con la pregunta, los

protagonistas del proceso invisiblemente se reconocen en la posibilidad

del otro, se internan en el dialogo silencioso del saber, para

reconocer sus aciertos y desaciertos creando la posibilidad de nuevos

encuentros, desafíos y retos cognitivos.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

PREGUNTA CONTEXTUALIZADA:

El desafío mental es estimular las operaciones cognitivas como el

análisis, la síntesis, la inferencia, la deducción, la inducción, la

argumentación, etc.; se enfrentan estos procesos hacia un referente

para la construcción de nueva información.

PROCESAMIENTO: Definir la operación mental requerida

NUEVA INFORMACION: El saber acerca de la respuesta.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

¿Qué es un ítem?

Según el diccionario de la Real Academia de la Lengua ítem se

define como cada una de las partes o unidades que conforman una

prueba, un test o un cuestionario.

El ítem está conformado:

contexto (opcional): es la situación, planteamiento, problema,

tesis, caso o gráfico en el cual se basa la pregunta

Enunciado o cuestionamiento: Frase (afirmativa) que presenta la

situación que debe ser respondida o resuelta.

Opciones de respuesta o distractores: Frases, datos o

informaciones que se consideran respuestas posibles al enunciado

y entre las cuales el examinado hace su elección.

Respuesta correcta o clave: Opción (es) que se consideran

responde al enunciado o pregunta

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

Clases de ítems:

Se refiere a las habilidades de pensamiento que el estudiante aplica en el proceso de resolución

de la pregunta planteada. Entre las diversas clases de ítems de evaluación, se encuentran los

siguientes:

De proceso de pensamiento inferior: Requieren de pocas interacciones de las habilidades de

pensamiento, tales como recordar o realizar algunos procesos de relación de la información:

RECONOCIMIENTO: pertenecen aquellas preguntas que requieren traer a la memoria datos,

fechas, definiciones, enumeraciones, etc., es la clase que presenta el más bajo nivel de proceso

mental.

COMPRENSION: las preguntas que corresponden a esta clase requieren de procesos de

relación de información para poderla interpretar, desarrollando acciones como organización,

discriminación, clasificación entre otras.

Correspondería a competencias cognitivas de tipo interpretativo

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

De proceso de pensamiento medio

A este tipo corresponden las clases de ítems que desarrollan procesos

mentales que implican la utilización de herramientas conceptuales,

metodológicas o técnicas para lograr un fin deseado o para prever

algún desenlace, entre estas se encuentran:

APLICACIÓN: especifica la habilidad que tiene el estudiante para

seleccionar reglas, métodos, conceptos, principios, leyes o teorías

que debe utilizar para resolver una situación determinada.

ANÁLISIS: representa la habilidad que tiene el estudiante para

identificar las partes constitutivas de un todo, entender e

interpretar las relaciones que hay entre ellas, comprender los

principios de su organización y predecir las causas y efectos dados por

la variabilidad de las características de las partes.

Es posible considerar que en este nivel estarían las competencias

argumentativa

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

De proceso de pensamiento superior.

A esta clasificación corresponden los ítems que requieren

complejos procesos de pensamiento, entre ellas

tenemos:

EVALUACIÓN: evidencia la capacidad del estudiante para

formar juicios de valor frente a una situación, producto

o procedimiento, este ítem permite al evaluador

evidenciar la capacidad predictiva y valorativa del

estudiante.

SINTESIS: indica la capacidad que tiene un estudiante

para reunir los elementos y formar un todo, está

relacionada con la capacidad de producción intelectual,

mediante esta clase de ítems se evalúa la capacidad de

creación.

Se pensaría en las competencias argumentativas.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

COMPETENCIA:

Competencias a evaluar. Para el caso de la UNAD se tiene en cuenta las competencias

que el ICFES evalúa en las pruebas ECAES: interpretativa, argumentativa y propositiva,

referidas al proceso que el evaluado lleva a cabo para responder la pregunta.

Competencia Interpretativa:

Definición conceptual. Acciones que realiza una persona con el propósito de

comprender una situación.

Definición operacional. Una competencia interpretativa, se activa cuando se requiere

descifrar, traducir o dilucidar informaciones que ofrece una situación problema, para

relacionarlas y darle sentido, de tal manera que el problema adquiera significado.

Algunas Estrategias.

Se sugiere que al momento de elaborar el ítem se le proponga al estudiante:

Comprender o traducir el significado de un texto específico, de un problema, un esquema,

una gráfica o un vídeo.

Describir las variables involucradas en una situación problema y sus relaciones.

Comprender posturas teóricas o planteamiento de Escuelas a partir de un texto o

situación.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

Competencia Argumentativa:

Definición conceptual: Acciones que realiza una persona con el

propósito de fundamentar o sustentar un planteamiento, una decisión o

un evento.

Definición operacional: Se activa cuando se requiere presentar,

entender, y aclarar diferentes razones que apoyan el planteamiento de

objetivos, acciones, procesos, decisiones, eventos, conceptos, entre

otros, que comprenden la situación problema o su explicación.

Algunas estrategias: Se sugiere que al momento de elaborar el ítem

se le proponga al estudiante:

-Juzgar si un planteamiento es viable, dando razones ( contradicciones

y el porque de las mismas).

-Analizar la ocurrencia de determinados hechos o situaciones o

fenómenos con base en planteamientos teóricos.

-Seleccionar la mejor definición, argumentando la respuesta.

-Reconocer la condiciones de necesidad o suficiencia en un enunciado,

argumentando la respuesta.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

Competencia propositiva:

Definición conceptual: Acción que realiza una persona para plantear alternativas de

decisión, de acción o solución, estableciendo nuevas relaciones o vínculos, entre los

eventos o perspectivas teóricas.

Definición operacional: Se evidencia cuando se enmarca dentro de un conjunto de

acciones que se despliegan de manera integral para resolver un problema con el mayor

grado de pertinencia. Para activar esta competencia se requiere exponer ciertas

situaciones, problemas o casos de tal manera que se conduzca a proponer alternativas

de solución o de propuestas para resolver una determinada situación.

Algunas estrategias: Se requiere que al momento de elaborar el ítem se le proponga

al estudiante:

--Resolver un problema o caso –situación, según condiciones determinadas por el

contexto y la pregunta.

--Plantear hipótesis a partir de una situación o planteamiento.

Se aclara que las competencias interpretativas, argumentativas y

propositivas, dentro de una prueba deben estar presentes porque

cada una de ellas es complemento de las otras dos, máxime cuando

se requiere en forma integral

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

PRUEBA:

Es un instrumento de evaluación conformado por un conjunto

intencionalmente articulado de ítems que responden a los

propósitos planteados en la estructura de la prueba y cuya

aplicación permite evaluar el desempeño del estudiante.

-Probable poder discriminativo: Grupos de interés – sus

capacidades- efectividad de la prueba.

-Confiabilidad: valides de la misma – banco pruebas.

-Confidencialidad: Estricta reserva – autores. (NO SE

DEBEN TOMAR ITEMS DEL BANCO PRUEBAS – ICFES-

OTRAS)

-Validez: Relevancia – pertinencia de la prueba- propósito por

el cual fue construida.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

RECOMENDACIONES GENERALES PARA LA CONSTRUCCION DE ITEMS

Un ítem debe tener algunas características que se enuncian a continuación (ICFES 2006):

•Ajustarse a los objetivos de la prueba.

•Ser una unidad independiente con un objetivo específico dentro de la prueba.

•Incluir toda la información necesaria para responder la pregunta.

•Expresarse tan claramente como sea posible.

•Tener un nivel de dificultad que corresponda a las exigencias del objetivo que se está evaluando, a las características de

los evaluados y a los propósitos de la prueba

•Ser preciso en todas y cada una de sus partes.

•Emplear un lenguaje adecuado, simple y directo al nivel de la población evaluada.

•Evitar cualquier señal que conduzca al evaluado a la respuesta correcta aún cuando no posea el conocimiento.

•Evitar implicaciones partidistas, religiosas, sexuales o regionales que puedan viciar la respuesta con connotaciones

emocionales.

•Evitar, en la medida de lo posible, el uso de negaciones que compliquen la estructura gramatical y eleven el nivel de

dificultad de la pregunta.

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS

INSTRUMENTO PARA LA ELABORACION DE

ITEMS Y ESTRUCTURACION DE PRUEBAS