CAPITULO 7

CONCEPTUALIZACIÓN DE LA PRUEBA

1. Este proceso ocurre en cinco etapas iniciando con: la conceptualización de

la prueba, construcción de la prueba, ensayo de la misma, análisis de reactivos y

concluye con la revisión de la prueba:

R: proceso de elaboración de una prueba.

2. Son procedimientos estadísticos en forma colectiva, que ayudan a hacer

juicios respecto a cuales reactivos son buenos tal como están, cuáles pueden ser

necesarios para revisar y cuáles deberían descartarse:

R: análisis de reactivos.

3. Este conjunto de procedimientos estadísticos pueden incluir análisis de la

confiabilidad de los reactivos, validez de los reactivos y dependiendo del tipo de

prueba el nivel de dificultad:

R: análisis de reactivos.

4. Nos podría servir como un estímulo para el desarrollo de una prueba nueva:

R: algún fenómeno social o patrón de comportamiento.

5. Se puede dar en respuesta a una necesidad de evaluar el dominio en una

ocupación o profesión recién aparecida:

R: la elaboración de una prueba nueva.

6. Pregunta engañosamente simple que su respuesta está ligada en forma

muy estrecha con la forma en que el elaborador de la prueba define el constructo

que se va a medir:

R: ¿Qué es lo que la prueba medirá según su diseño?

7. Enfoque que sigue un buen reactivo en una prueba al que responden de

manera correcta quienes obtienen puntuaciones altas en la prueba; quienes

obtienen puntuaciones bajas tienden a responder en forma incorrecta a ese mismo

reactivo:

R: con referencia a una norma.

8. En este tipo de referencia en una prueba puede darse el caso de que el

mismo patrón de resultados de la prueba ocurran para un reactivo: quienes

obtienen puntuaciones altas tienen correcto un reactivo particular, mientras

quienes obtienen puntuaciones bajas equivocan ese mismo reactivo:

R: con referencia a criterio.

9. Generalmente las comparaciones en este tipo de referencia son

insuficientes e inapropiadas cuando lo que requiere el administrador de la prueba

es conocimiento o dominio:

R: con referencia a una norma.

10. También se emplean en contextos educativos en los que se debe demostrar

el dominio de material particular antes de que el estudiante pase a un material

avanzado fundamentado en la base de conocimientos o habilidades existentes:

R: enfoques con referencia a un criterio.

11. Se deriva de una conceptualización del conocimientos o habilidades que se

han de dominar:

R: elaboración de instrumentos con base en un criterio.

12. Implica un estudio piloto al menos con dos grupos de personas que

responderán la prueba:

R: elaboración de una prueba o técnica orientada hacia un criterio.

13. Se refieren, en general, a la investigación preliminar que rodea a la creación

de un prototipo de la prueba:

R: trabajo piloto, estudio piloto e investigación piloto.

14. En este estudio quien elabora la prueba generalmente intenta determinar

cómo medir mejor el constructo que tiene como objetivo:

R: estudio piloto.

15. Proceso que puede implicar la creación, revisión, y eliminación de muchos

reactivos de prueba, al igual que revisiones de la literatura, experimentación e

incluso examen de conciencia:

R: el estudio piloto.

16. Una vez completado el estudio piloto, comienza:

R: el proceso de elaboración de la prueba.

CONSTRUCCIÓN DE LA PRUEBA

1. Medición: asignación numérica de acuerdo con reglas.

2. Escalas: reglas de medición, según la psicometría es un instrumento usado para

medir algo (rasgo, característica o atributo psicológico). Forma unidimensional (solo

una estimación subyace en las estimaciones) en oposición a multidimensional (más

de una de ellas guía las respuestas de quienes responden) y comparativa en

oposición categórica.

3. Elaboración de escalas: proceso de establecimiento e reglas para la asignación

numérica en la medición. Proceso por el que se diseña y calibra un dispositivo de

medición, y la forma en que se asignan números, valores de escala, a diferentes

cantidades del rasgo, atributo o característica que se está midiendo.

4. Articulo Thurstone 1929: “A method of scaling Psychological and educational

tests”

5. Elaboración de escalas absolutas: procedimiento para obtener una medida de la

dificultad de los reactivos.

6. Escala de estimación (ordinal): agrupamiento de palabras, afirmaciones o

símbolos en los que los juicios relativos a la intensidad de un rasgo, actitud o

emoción particular es indicada por quien responde la prueba. (Likert 1932, escala

de actitudes)

7. Método de elaboración de escala que produce datos ordinales: método de

comparaciones apareada.

8. Escala comparativa: implica juicios de un estímulo en comparación con todos los

demás estímulos en escala.

9. Escala categórica: los estímulos se colocan en una o de dos a más categorías

alternativas que difieren en forma cuantitativa con respecto a algún continuo.

10. Escala Guttman (ordinal) (1944,1947) los reactivos en ella varían en forma

secuencial de expresiones más débiles a otras más fuertes de la actitud, creencia o

sentimiento que se está midiendo.

11. Thurstone 1929: describió el método de intervalos aparentemente iguales, método

de elaboración de escalas para obtener datos que se supone son de intervalo.

(Método de elaboración de escalas de variedad de evaluación directa)

REDACCION DE REACTIVOS

1. Las consideraciones relacionadas con la redacción real de los reactivos de la

prueba van de la mano con:

Las consideraciones de la elaboración de escalas.

2. Tres cuestiones que un elaborador de pruebas o redactor de reactivos debe tener

en consideración

1Rango del contenido,2 Formato de reactivos y 3 cantidad de reactivos

3. Que se recomienda en cuestión a la cantidad de reactivos para una prueba

estandarizada

Se recomienda tener el doble de cantidad de reactivos que contendrá la

prueba final

4. Es el deposito o provisión de el que se extraerán o descartaran los reactivos para

la versión de la prueba

Reserva de reactivos.

5. Proporciona una base para la validez de contenido de la versión final de la prueba

Muestreo General

6. Que se recomienda para la creación de reactivos de las pruebas psicológicas

Entrevistar a los psicólogos clínicos, pacientes o familiares de pacientes.

7. Que se recomienda para la creación de reactivos de las pruebas psicológicas pero

laborales

Entrevistas con los integrantes dela industria o empresa

8. Que se recomienda para la creación de reactivos de las pruebas para

psicopedagógicos

Entrevistas a maestros y psicólogos educativos

9. Facilitan la calificación automatizada y pueden aplicase con facilidad a gran

cantidad de examinados.

Los formatos de selección de respuesta

10. Presenta al examinado una elección de respuestas y requiere la selección de una

alternativa

Formato de selección de respuestas

11. Cuales son los 3 tipos diferentes de preguntas cerradas

Reactivos de opción múltiple, reactivos de relación y reactivos de

cierto/falso.

12. Cuales son el elementos de un reactivo de opción múltiple

1)tronco,2)una alternativa u opción correcta y 3)varias alternativas u

opciones incorrectas

13. Como se les denomina a varias alternativas u opciones incorrectas

Distracciones u hojas

14. Es una variante de un reactivo de opción múltiple

Reactivo de relación

15. Al examinado se le presentan dos columnas de respuestas y la tarea es terminar

cual respuesta de una columna corresponde a cual respuesta de la otra

Reactivo de relación

16. Es otro de la variedad de respuesta seleccionada, este en forma de oración

requiere que el examinado indique si la afirmación es un hecho o no

Reactivo cierto/falso

17. Que contiene un buen reactivo de cierto/falso

1 Una sola idea,2 No es largo ni excesivo,3 No esta sujeto al debate

18. Probabilidad de obtener una respuesta correcta con base al azar en los reactivos

cierto/falso es de

.5 o 50%

19. Probabilidad de obtener una respuesta correcta adivinando en los reactivos opción

múltiple con 4 alternativas es de

.25 o 25%

20. Se requiere que el examinado suministre o cree la respuesta correcta

Preguntas abiertas

21. Cuales son los 3 tipos de reactivos de respuestas abiertas

1Reactivo de acompletar,2La respuesta breve y 3 El ensayo

22. Requiere que el examinador proporcione una palabra o frase que complete una

oración

Reactivo de acompletar

23. Debe ser redactado con la suficiente claridad para quien la responda pueda

hacerlo en forma sucinta con una respuesta corta.

Respuesta breve

24. Se utiliza cuando el elaborador de la prueba desea que el examinado muestre una

profundidad de conocimientos de un solo tema

El ensayo

25. Permite el replanteamiento del material aprendido sino también la integración

creativa y la expresión del material en palabras propias del examinado

El ensayo

26. Este tipo de reactivos requieren reconocimiento

Reactivo de acompletar y reactivo de respuesta breve

27. Este tipo de reactivo requiere recuerdo, organización, planeación y capacidad de

redacción

El ensayo

28. Entre mayor es la puntuación en la prueba, mas alto se encuentra quien la

responde en la capacidad , el rasgo o alguna otra característica que pretenda

medir la prueba

Modelo acumulativo para calificar

29. La persona que responde la prueba obtiene crédito hacia la colocación en una

clase o categoría particular con otros quienes han respondido cuyos patrones de

respuesta se suponen semejantes de alguna manera

Enfoque de clase o categoría para calificar

30. El objetivo es la comparación de una prueba con otra escala dentro de esa misma

prueba

Calificación ipsativa

31. Ejemplo de una prueba que maneje la Calificación ipsativa

Lista de Preferencias Personales de Edwars EPPS

ENSAYO DE LA PRUEBA

1. ¿En quienes debe ensayarse la prueba? La prueba debe ensayarse con

personas similares críticos a las personas para las que está diseñada.

2. ¿En cuántas personas debería ensayarse la prueba? No hay reglas inflexibles

aquí, pero algunos han recomendado que no deben ser menos de cinco

sujetos, y de preferencia con diez sujetos.

3. ¿Qué son los factores fantasmas? Son factores inexistentes que en realidad

son consecuencia del tamaño pequeño de la muestra.

4. ¿Cómo debe llevarse a cabo el ensayo de la prueba? El ensayo de la prueba

debe llevarse a cabo bajo condiciones que sean lo más similares posible a

las condiciones bajo las cuales se aplicará la prueba estandarizada.

5. Expreso lo siguiente “Si los reactivos para un inventario de personalidad son

aplicados en una atmósfera que fomenta la franqueza y la prueba final se llevará a

cabo en una atmósfera donde los sujetos serán reacios a decir aspectos negativos

de sí mismo, el análisis de los reactivos reflejará una historia defectuosa.”:

Nunnally (978)

6. Un reactivo de prueba es bueno cuando: es confiable y válido

7. ¿En qué nos ayuda un buen reactivo de prueba? Un buen reactivo de prueba

ayuda a discriminar a quienes responden la prueba; asimismo es uno que

responderán de forma correcta quienes obtienen puntuaciones altas en la

prueba en conjunto.

8. ¿Cómo se le conoce a los diferentes tipos de escrutinio estadístico que pueden

sufrir de manera potencial los datos de la prueba? Análisis de reactivos

ANÁLISIS DE REACTIVOS

1. Herramientas que emplean los elaboradores de pruebas para analizar y

seleccionar reactivos:

Índice de la dificultad de un reactivo, índice de validez del reactivo, índice de

la confiabilidad del reactivo y el índice de la discriminación de un reactivo.

2. De dónde se obtiene un índice de la dificultad de un reactivo

Calculando la proporción del número total de quienes respondieron la

prueba que tuvieron correcto el reactivo.

3. Qué se usa para denotar la dificultad del reactivo

Una p cursiva minúscula (p), y un subíndice se refiere al número de reactivo

(𝒑𝟏 se lee “índice de dificultad del reactivo para el reactivo 1).

4. El índice de dificultad del reactivo en el contexto de las pruebas de rendimiento

puede ser un “índice de aprobación del reactivo”

5. Cómo puede calcularse un índice promedio de la dificultad del reactivo de prueba

para una prueba particular…

Promediando los índices de dificultad del reactivo para todos los reactivos

de la prueba. Esto se logra sumando los índices de dificultad del reactivo

para todos los reactivos de la prueba y dividiéndolo entre el número total de

reactivos en la prueba.

6. El índice de validez del reactivo puede calcularse una vez que se conocen los

siguientes dos estadígrafos:

*La desviación estándar de la puntuación del reactivo.

*La correlación entre la puntuación del reactivo y la puntuación criterio.

7. Cómo puede calcularse la desviación estándar de la puntuación del reactivo para

el reactivo 1

Puede hacerse usando el índice de dificultad del reactivo (𝒑𝟏) en la fórmula:

𝑆1=√𝑝1(1−𝑝1)

8. Qué hace el índice de confiabilidad del reactivo

Proporciona un indicio de la consistencia interna de una prueba; entre

mayor sea este índice, será mayor la consistencia interna.

9. A qué es igual el índice de confiabilidad del reactivo

Es igual al producto de la desviación estándar de la puntuación del reactivo

(s) y la correlación (r) entre la puntuación del reactivo y la puntuación total

de la prueba.

10. Qué indican la medidas de discriminación de reactivos?

Indican qué tan adecuadamente separa o discrimina un reactivo a quienes

obtienen puntuaciones altas y quienes obtienen puntuaciones bajas en una

prueba.

11. Qué es el índice de discriminación de reactivos

Es una medida de discriminación de reactivos simbolizada por una letra

cursiva minúscula d (d). Compara el desempeño en un reactivo particular

con el desempeño en las regiones superior e inferior de una distribución de

puntuaciones de prueba continuas.

12. Qué significa un valor d negativo en un reactivo particular

Es una bandera roja, debido a que indica una situación donde los

examinados que obtienen puntuaciones bajas tienen mayor probabilidad de

responder el reactivo en forma correcta que los examinados que obtienen

puntuaciones altas.

13. Cuál es el valor más bajo que puede tomar un índice de discriminación de

reactivos?

El valor más bajo es -1, indica una situación donde todos los miembros del

grupo S fallaron en el reactivo y todos los miembros del grupo I lo pasaron.

CURVAS DE CARACTERISTICAS DEL REACTIVO

1. Con ella puede hacerse una representación gráfica de la dificultad y discriminación

del reactivo:

Curva de características del reactivo (CCR).

2. Es una gráfica en la que la capacidad se traza en el eje horizontal y la probabilidad

de la respuesta correcta en el eje vertical.

Curva de características del reactivo (CCR).

3. ¿Qué señala la pendiente de la curva?

Entre más inclinada sea, mayor la discriminación del reactivo.

4. ¿Qué indica una pendiente positiva?

Que más personas que obtienen puntuaciones altas están teniendo correcto el

reactivo que personas que obtienen puntuaciones bajas. Una pendiente negativa

indica lo contrario.

Modelos de rasgo latente

5. ¿Cómo se dan los rasgos latentes?

Como los factores en el análisis factorial, los cuales no son medidos de forma directa

sino que se reflejan en los reactivos de la prueba.

6. De acuerdo con el modelo de medición del rasgo latente, ¿cómo es esta variable

inobservable?

Unidimensional.

7. Difieren en algunas formas importantes de la teoría de la prueba de “puntuación

verdadera” clásica:

Los modelos de rasgo latente.

8. Proponen nuevos modelos que describen cómo influye el rasgo latente en el

desempeño de cada reactivo de prueba. Pueden adoptar valores desde -∞ a +∞:

Las teorías de rasgo latente.

Otras consideraciones en el análisis de reactivos

Adivinación

9. Tres criterios que debe cumplir cualquier corrección para la adivinación:

o Cuando una persona adivina una respuesta, no lo hace por completo al azar. El

sujeto puede basarse en su conocimiento de la materia y en la capacidad de

descartar alternativas.

o En ocasiones, quien responde la prueba tan sólo omitirá una respuesta a un

reactivo.

o Algunas personas que responden una prueba pueden tener más suerte que otras

para adivinar las opciones que están codificadas como correctas.

10. Es una de las soluciones al problema de la adivinación:

Darle instrucciones a quienes responden de que proporcionen una respuesta sólo

cuando estén seguros (sin adivinar), o para que completen todos los reactivos y

adivinen sólo cuando tengan dudas.

Imparcialidad del reactivo

11. Proporcionan una herramienta para identificar cuáles reactivos se pueden

considerar imparciales y cuáles están sesgados:

Las curvas de características del reactivo.

12. Así se identifica un reactivo específico como sesgado:

En un sentido estadístico si exhiben un funcionamiento diferencial del reactivo.

13. Reactivo que favorece a un grupo particular de examinados en relación con otro

cuando se controlan las diferencias en la capacidad del grupo:

Reactivo sesgado.

Imparcialidad de límite de tiempo

14. Producen resultados engañosos o poco interpretables; entre más hacia el final de

la prueba se encuentra un reactivo, más difícil parece ser:

Los análisis de reactivos de pruebas presentadas bajo condiciones de límite de

tiempo.

15. Tienen mayor probabilidad de mostrar correlaciones positivas entre el reactivo y el

total debido al selecto grupo de examinados que llegan a esos reactivos:

Reactivos que aparecen al final en una prueba de límite de tiempo

REVISIÓN DE LA PRUEBA

1. Etapa en la que se genera una cantidad tremenda de información:

En la etapa de análisis de reactivos.

2. Que pasara con algunos reactivos de la reserva de reactivos original:

Serán eliminados y potros redactados de nuevo.

3. Una de las formas de enfocar la revisión seria:

Caracterizar cada reactivo de acuerdo con sus virtudes y defectos

4. Tienen un rango restringido, lo cual disminuye los coeficientes de correlación y

tienden a carecer de confiabilidad y validez:

Los reactivos muy difíciles

5. También influye en la forma en que se hace la revisión:

El propósito de la prueba

6. Es cuando el elaborador tendrá que interesarse en los problemas de seso de los

reactivos.

Cuando la prueba influye en las decisiones importante concernientes a la

ubicación educativa o al empleo

7. Se enfatizaran los reactivos que demuestren una discriminación de reactivo

optimizada, cuando:

Hay necesidad de identificar a los individuos más experimentados entre los

que se examinan.

8. Que ventaja se tiene mientras se revisa la prueba:

Contar con una reserva de reactivos grande

9. Esta acción podría causar que los aspectos del dominio quedaran fuera de la

prueba:

La eliminación indiscriminada de todos los reactivos que funcionan mal

10. Después de la revisión de la prueba se hace una:

Aplicación de la prueba revisada bajo condiciones estandarizadas a una

segunda muestra apropiada de examinados

11. Cuando se dice que la prueba ha sido “estandarizada”:

Cuando se aplica la segunda muestra

12. Proceso empleado para introducir objetividad y uniformidad en la aplicación,

calificación e interpretación de la prueba:

La estandarización

13. Representa al grupo o grupos de individuos con quienes se comparara el

desempeño de los examinados:

Una nuestra de estandarización.