ITEMS DE EMPAREJAMIENTO

AMPLIADOJuliana Gómez AbantoYvan Maque Acosta

Maestría en Medicina-TrujilloEvaluación del Aprendizaje

Dos familias de ítems :

ITEMS DE EMPAREJAMIENTO AMPLIADO

Son items de selección múltiple. Se organizan en grupos que usan una

sola lista de opciones para todos los items del conjunto.

No existe una traducción universalmente aceptada para “extended matching items”. Incluso para ítems de “matching” éstos se traducen de diferentes maneras: ítemes de términos pareados, de respuesta por pares, de correspondencia.

Componentes de los Items de Emparejamiento Ampliado

1. Un tema 2. Una lista de opciones 3. Una declaración introductoria4. Al menos dos enunciados de items.

TEMA

LISTA DE OPCIONES

DECLARACIÓN

INTRODUCTORIA

ENUNCIADOS

Como evitar errores al redactar ítemes de Emparejamiento

Ampliado

Recordar que los 4 componentes son esenciales.

Evitar omitir la declaración introductoria. Evitar usar declaraciones introductorias

inespecíficas, Vg. “Encuentre la correspondencia de cada ítem con la mejor opción”. Pueden confundir o resultar ambiguos.

Las reglas para ítemes de Emparejamiento Ampliado son análogas a la de los ítemes de una mejor respuesta .

Ejemplo de Emparejamiento Ampliado con errores

Cómo evitar errores al redactar ítemes de Emparejamiento Ampliado?

Si una opción no es absolutamente verdadera o falsa, no debe incluirse.

La pregunta debería poder responderse sin leer las opciones.

Los enunciados deben ser extensos y las opciones cortas.

DEBE existir una declaración introductoria que establezca una relación entre los ítemes y las opciones.

NO debe haber verbos en las opciones.

Declaraciones Introductorias

Las declaraciones introductorias comienzan generalmente así: “Para cada uno de los siguientes pacientes…”.

A menudo estos conjuntos se organizan alrededor de motivos de consulta u otro factor específico (Tema)

La segunda parte describe la tarea y el conjunto de opciones: “seleccione el diagnóstico más probable”.

Aspectos importantes sobre las opciones…

Sirven como opciones, cualquier asunto que pueda expresarse como lista.

Debieran ser palabras únicas o frases muy cortas.

Ser homogéneas (sólo Dx., sólo Tto, sólo vitaminas, etc.)

Aspectos importantes sobre las opciones…

Pueden ser gráficos u otro material pictórico que contenga rótulos en áreas significativas.

Pueden expresarse como tablas (vg. Laboratorio).

Probablemente no es apropiado incluir distinciones sutiles o diagnósticos raros.

Según el tópico, pueden ser adecuadas 3 -26 opciones.

A continuación se presentan una serie de patrones de proteinogramas electroforéticos séricos (A-E). Para cada diagnóstico dado, escoja el perfil de proteinograma electroforético con el cuál está más probablemente asociado.

1) La hipergammaglobulinemia policlonal está asociada con cuál de los siguientes patrones?

2) El mieloma múltiple está asociado con cuál de los siguientes patrones?

3) Cuál de los patrones se vería en una persona normal?

E

A

C

Redacción de Enunciados

LAS VIÑETAS

Buena estructura

como enunciado

CIENCIAS CLÍNICAS

Muestra: edad de pcte, género, motivo de

consulta, lugar dónde se ha dado cuidado

clínico

CIENCIAS BÁSICAS

Suelen ser descripciones menos

detalladas.

Historia personal, familiar.Examen físico y ex.

auxiliares

.En cada ítem: misma estructura

Eg. raza, ocupación> si se incluye en 1, se debe incluir en

todos..Preferible no mezclar adultos

con niños

Redacción de Enunciados

Una ventaja de usar viñetas de pacientes es que sirve para asegurar que se está evaluando aplicación del conocimiento.

Es muy importante que los ítemes sean honestos. No usar trucos.

La regla de “cubrir las opciones” es importante.

Los estudiantes con conocimientos debieran poder generar una respuesta a la pregunta y luego encontrarla entre la lista de opciones alfabéticas.

Redacción de Enunciados

Verificar que existe sólo una “mejor respuesta” para cada pregunta.

Asegurarse que por lo menos hay 4 distractores razonables para cada ítem.

Finalmente, se recomienda que un colega revise los ítemes (sin mostrarle la rpta. correcta). Si él tiene dificultad para encontrar la rpta. correcta se debe modificar la lista de opciones o el ítem para eliminar ambigüedades.

Ejemplos de buenos y malos enunciados usando la misma lista de opciones

Ejemplos de buenos y malos enunciados usando la misma lista de

opciones

Resumiendo…

Resumen de los pasos a seguir al confeccionar ítemes de Emparejamiento

Ampliado

1. Identificar el tema para el conjunto. El tema puede ser un motivo de consulta (cefales, fatiga), una clase de medicamentos (vg. antipsicóticos, ATB), etc.

2. Redactar la declaración introductoria para el conjunto. Indica la relación entre los enunciados y las opciones, clarificando la pregunta que se pone a los examinados.Ejemplo: Para cada pcte. descrito más abajo, seleccione el dx. más probable

Resumen de los pasos a seguir al confeccionar ítemes de Emparejamiento

Ampliado

3. Preparar la lista de opciones. Utilizando palabras únicas o frases muy breves. Ordenar las opciones alfabéticamente a menos que exista otra forma lógica de hacerlo.

4. Redactar los ítemes. Los ítemes dentro de un conjunto deben tener una estructura similar. A menudo es apropiado usar las viñetas de pacientes.

5. Revisar los ítemes. Debe existir sólo 1 mejor rpta. para cada pregunta. .Verificar que haya cuatro o más distractores para cada ítem. .Finalmente, pedir a un colega que revise los ítemes (sin indicar la rpta. correcta). Si el colega tiene dificultades para indicar la rpta. correcta debe modificarse la lista de opciones o el ítem para evitar ambigüedades.

http://www.facebook.com/photo.php?op=1&view=global&subj=22883093163&pid=125302&id=100000887268753&oid=22883093163

Organización de un Grupo para Redactar Preguntas de Emparejamiento Ampliado

El organizador del grupo debe preocuparse por cómo utilizar mejor el tiempo de cada participante. (selección de tópicos, lista de opciones, etc).

Decidir acerca de la composición de las parejas de redactores de ítems (libre vs asignarlos). Ejm: ítems multidisciplinarios.

Redacción de ítems en computadoras: ahorro, de tiempo, ayuda en la revisión.

1. Definir el área del contenido del examen.2. Entrenar a un conjunto de docentes como

redactores de ítems3. Dividir al grupo en parejas para redactar

ítems.4. Enfatizar las pautas para redactar enunciados5. Juntar las parejas en un grupo más grande

para revisar los ítems.6. Digitar en la computadora, editar y someter

los ítems a revisión externa.7. Construir el examen.

Organización de un Grupo para Redactar Preguntas de Emparejamiento Ampliado

1. Definir el área del contenido del examen.Ejm: Habilidad para diagnosticar problemas clínicos comunes motivos de consulta

Pasos para redactar Ítems tipo R

Pasos para redactar Ítems tipo R

2. Entrenar a un conjunto de docentes como redactores de ítems (propósito del examen, ejms ítems, redacción)

3. Dividir al grupo en parejas para redactar ítems: 2-4 motivos de consulta por pareja lista de diagnósticos 10-20 enunciados por c/motivo.

4. Enfatizar las pautas para redactar enunciados: Describir un pte con un Dx de la lista: edad, sexo,

motivo consulta, lugar de atención, historia, ex físico, lab.

Breves vs detalllados. Las descripciones deben ser similares.

5. Juntar las parejas en un grupo más grande para revisar los ítems: leer e identificar la rpta, ambigüedades.

6. Digitar en la computadora, editar y someter los ítems a revisión externa.

7. Construir el examen: seleccionar ítems.

Pasos para redactar Ítems tipo R

Formulario para redactar preguntas de Emparejamiento

Ampliado

Comparación: Ítems de Formato de Cinco Opciones vs Emparejamiento

Ampliado

Más opciones es mejor que menos. Ítems tipo R: <probabilidad de

adivinar rpta, mejor discriminación

Ítems de Emp. Ampliado Ítems de 5

opciones Preguntas de V y F.

Case SM and Swanson DB, Ripkey DR. Comparison of items in five-option and extended-matching format for assessment of diagnostic skills. Academic Medicine. 1994;69(suppl): S1-S3

Comparación: Ítems de Formato de Cinco Opciones vs Emparejamiento

Ampliado

Case SM and Swanson DB, Ripkey DR. Comparison of items in five-option and extended-matching format for assessment of diagnostic skills. Academic Medicine. 1994;69(suppl): S1-S3

Comparación: Ítems de Formato de Cinco Opciones vs Emparejamiento

Ampliado

Los Ítems tipo R permiten incluir más y mejores distractores.

Hay mayor probabilidad de que adivinen la rpta correcta en el formato

de 5 opciones.

Los ítems tipo R separan mejor a los estudiantes con menores habilidades.

Desde los A Hasta las R y de Vuelta Ítem tipo A con 5 opciones.

Transformación hacia un Ítem tipo R. Pudiendo agregar nuevos enunciados para expandir el conjunto.

También se pueden agregar más opciones.

Desde los A Hasta las R y de Vuelta

14 opcion

es

Ítems de “Seleccione N”: Una extensión del formato de emparejamiento ampliado

Similar al formato anterior, solo que aquí se le solicita al evaluado que escoja 2, 3 , 4 ó incluso 5 opciones de una lista de hasta 26.

Útil en áreas de Promoción de la salud, Prevención (vacunas, exám lab) , Manejo de emergencias (proced.).

Las reglas de redacción son iguales. Especificar el número de opciones a seleccionar.

Calificación de puntajes parciales vs Sistema Todo o Nada (elegir no más de 2-3 opciones).

Ítems de “Seleccione N”: Una extensión del formato de emparejamiento ampliado

Ítems de “Seleccione N”: Una extensión del formato de emparejamiento ampliado

Ítems de “Seleccione N”: Una extensión del formato de emparejamiento ampliado

Gracias por su atención.