DIARIO DE CAMPO

SEMILLERO COMPHOR

UdeA

Fecha: Lunes 19 de abril de 2010 Lugar: Aula 13-322 Dimensión: Investigación Cuantitativa Fase: 1 Facilitador: Alejandro Sanín Posada Documento guía: Introducción a la psicometría

DESARROLLO Momento 1: Repaso Alejandro solicita ejemplos de cada una de las escalas vistas. Con respecto a la de intervalo, pe diseñamos una escala de satisfacción con el jefe, con los compañeros y con los recursos. Se diseñan 5 ítems para medir cada tipo de satisfacción y la escala es 5: Completamente satisfecho 4: Medianamente satisfecho 3: 2: 1: Puedo promediar los resultados de una persona y me da 1,7 y para otro da 2,3 y son puntuaciones directas. Es una escala ordinal que la convertí en intervalo porque puedo comparar estos resultados. Se puede normalizar o estandarizar la medida, pe si saco 2 estoy en la media, si saco 1 estoy por debajo de la media y si saco 3 estoy por encima de la media. En las ciencias sociales es difícil hablar de ceros absolutos porque no podemos hablar de ausencia completa de absolutos. Lo que se mide debe estar en alguno de los dos lados: escala o ítem. Momento 2: Criterios para construir adecuadamente un ítem La primera pregunta es ¿Qué voy a medir? Por ejemplo: la satisfacción, la calidad de vida, la aplicación de conocimientos en GTH, o la RS. Lo segundo es definirla con base en modelos teóricos que ya estén sustentados. Se puede diseñar la propia

PERCEPCIONES Los chicos deben detallar en sus proyectos cuáles son las variables que componen la realidad que se quiere estudiar y qué es lo que se quiere medir. Considero que es clave aplicar todos estos conceptos a un ejercicio de diseño de instrumentos. Pero además permite evaluar esta primera fase. Debe diseñarse este ejercicio y esto queda resuelto con el compromiso.

DIARIO DE CAMPO

SEMILLERO COMPHOR

UdeA

definición explicando por qué se desechan las demás; esto puede hacerse tomando los elementos centrales de las dos. Luego, ver que en toda definición hay elementos, pe, en satisfacción el nivel de contento con diferentes realidades del trabajo. Hay que preguntarse a cuáles realidades de trabajo se refiere. Estas son las variables. Una variable es un atributo que se quiere medir. Por ejemplo apoyo del jefe, con el trabajo en general, con los recursos, con los compañeros. Y se llama variable porque ese atributo cambia, se modifica, puede adquirir diferentes magnitudes. Siguiendo con el ejemplo de satisfacción, supóngase que esta tiene 10 variables y que cada una necesita de unos 10 ítems para ser medida. Un solo ítem no es una medida confiable de la variable. En el diseño, la recomendación es hacer entre 12 y 15 ítems por variable, para que después de la revisión piloto, cada variable quede con 3 o 4 ítems buenos. Momento 3: Construcción de ítems

1. Fácil de comprender, que todo el mundo lo comprenda.

2. El vocabulario debe ser adecuado al grupo. Tener en cuenta el contexto.

3. Debe contener una sola idea o unidad de información.

4. Referirse a un aspecto concreto de la realidad de la persona.

5. Tener un propósito claro. 6. Operacionalizarse una sola variable. 7. No debe hacer sentir mal a la persona. 8. No debe sugerir la respuesta.

CALIDAD DEL ITEM

1. Capacidad de discriminación: Se refiere a que cualquier ítem que utilice me debe permitir diferenciar entre aquellos que tienen el atributo y los que no lo tienen. Pe: SI NO

Sin embargo, la idea al discriminar no es solo dicotomizar. Puede ser SI, Mas o menos, NO. Me distingue los diferentes niveles de presencia del atributo. Por ejemplo,

DIARIO DE CAMPO

SEMILLERO COMPHOR

UdeA

el metro no mide en metros sino en centímetros, porque todos pesaríamos 1 metro o 2 metros. Más que el sí o el no, lo que se busca es medir la magnitud arrancando desde lo menor hasta lo mayor. Dos formas de medir la capacidad de discriminación son: Análisis de frecuencias CO (Clima Organizacional) 15 variables 150 reactivos Escala likert: 4. Completamente de acuerdo . . 1: Completamente en desacuerdo El software me hace un análisis de frecuencias. Me dice que cada ítem tiene 4 posibilidades de respuesta. El ítem ideal en capacidad de discriminación va a tener: Es Excelente si sale 25% para cada opción: 1,2,3 y 4 Puede ser 1: 70%, 2:25%, 3: 5% y 4: 0 Puede estar mal diseñado porque sugiere ciertas respuestas. Los autores varían entre un 5% y 10% como el mínimo porcentaje aceptable para la frecuencia de los ítems. Por ejemplo: 4%, 80%, 5% y 5% podría ser válido en tanto a pesar de que hay más respuestas favorables, permite ver otras respuestas. La muestra debe ser heterogénea y representativa. Los ítems con buena capacidad de discriminación se conservan y los demás se eliminan. Promedio y desviaciones de las puntuaciones del ítem

Ítem P1 P2 Promedio Desviación típica

1 0 0 3 12

2 1 4 3 1 4

4 2 3

5 1 1 6 1 1

Lo que hace el software es que toma el ítem 1 y promedia para todas las personas cada ítem, luego saca la desviación típica

DIARIO DE CAMPO

SEMILLERO COMPHOR

UdeA

Si mi promedio está cerca de la escala y las desviaciones típicas son altas eso significa que todos los criterios de la escala fueron utilizados. Si por el contrario, la escala de promedio es muy alta y la desviación es baja indica que las personas se quedaron solo los ítems muy altos o bajos. Un ítem es bueno con un promedio entre 2 y 3 y una desviación típica mayor a 1 Bueno: promedio entre 2 y 3 y la desviación típica es mayor que 0.5 y menor que 1 Aceptable: Malo: promedio mayor a 3,5 o menor a 1,5 y la desviación típica es menor que 0.5 Al final se conservan los que están de aceptable hacia arriba.

2. Relación del ítem con la variable Ahora los ítems deben pasar esta segunda prueba que es la relación del ítem con la variable: Correlación, Signo y Nivel de significación: + Es que las variables se mueven en la misma dirección: arriba, abajo, igual

- Las dos variables se mueven en diferentes direcciones

Los índices de correlación van de -1 pasando por cero hasta Lo que se espera es que cada uno de los ítems de una variable tenga correlaciones de tipo positivo. Porque esto demuestra que el ítem está asociado a la variable. Debe existir correlación, de tipo positivo y de manera significativa. Correlación ítem test:

Apoyo del jefe

1 1 2 0.300 1

3 0.270 1 4 0.450 1

DIARIO DE CAMPO

SEMILLERO COMPHOR

UdeA

5 0. 1

6 1 Deben ser superiores a 0.30, ideales superiores a 1. Podríamos conservar el ítem 1, 3 y 4. Los que son negativos puede ser porque se está preguntando en forma negativa lo mismo. Esto funciona como ítems de control. Por ejemplo, una persona se puede aburrir y llenar en todo 4 y estos ítems de control son muy útiles. Esta tabla muestra el nivel de significación. Los índices van de 0.00 a 1. Un nivel de significación cercano a 1, no hay muchas posibilidades de significación Suele aceptarse como significativos aquellos valores entre 0, 00 hasta 0,010. <significa que esto es cierto y que la correlación que se encontró no es producto del azar. Si se aplica el instrumento 1000 veces, tiene cero posibilidades de equivocarse. Si son superiores a 0,30 las correlaciones están bien y si el nivel de significación es menor a 0.10 están bien. Ejercicio con ítems ficticios: Se diseña un instrumento para medir la motivación de la gente y se va a analizar la capacidad de discriminación de 6 ítems con escala de 5 a 1: Análisis de frecuencias

1

5 25

4 20

3 20 2 5

1 10 Buena Análisis de frecuencias

2

5 40 4 30

3 15 2 10

1 5

Regular Análisis de frecuencias

DIARIO DE CAMPO

SEMILLERO COMPHOR

UdeA

Mala

Promedio y desviación Item 3: Bueno porque usó todas las opciones y la

desviación es alta Item 4 : Malo porque nadie uso el 1 y el 2 y la desviación típica es muy bajita. Item 5: Regular porque el promedio es bajo y la desviación es alta La correlación del ítem con la variable:

6 Correlación N/S

350 600

7 Correlación N/S

297 000

8 Correlación N/S

700 010

Item 6: Malo porque la correlación es falsa Item 7: Aceptable porque aunque la correlación no alcanza el nivel hay significatividad Item 8: Muy bueno Este es solo el principio para evaluar el ítem. Sugerencia es como ejercicio empezar a diseñar los ítems de las variables que se van a medir. Todo ítem que se diseña es una parte de la variable. Y los ítems salen de la definición, si tiene tres partes hay que diseñar ítems para las tres y varios para cada parte. Se debe focalizar el objetivo. Pasa que después del cuarto ítem sentimos que estamos

3

5 2

4 3 3 3

2 2 1 90

3 1 5 3,9 2 4 3 5 3,9 0,2

5 1 5 1,6 2,5

DIARIO DE CAMPO

SEMILLERO COMPHOR

UdeA

preguntando lo mismo. Pero no importa porque un giro gramatical puede cambiar la comprensión del ítem. La prueba piloto debe superar en 3 el número de variables. Por ejemplo si se tienen 3 variables deben ser 30 personas. Y esto es lo mínimo. La matriz debe ser más vertical que horizontal. Es decir, lo vertical, que son personas que responden debe ser 3 veces más que lo horizontal, que son las variables. Momento 3: Introducción a los criterios de validez y confiabilidad Validez: que mida lo que dice medir Confiabilidad: es la consistencia de la medida. Qué tanto se puede confiar en la medida. Qué tanto refleja la presencia del atributo.

Compromisos: Definir qué se va a medir Variables que se van a medir En un mes el instrumento listo, aplicárselo a mínimo 30 personas y muestra heterogénea. 15 días después hacer los análisis en SPSS. Posteriormente, verificar si el instrumento quedó bien a partir del análisis de las tablas. Leer capítulos de validez y confiabilidad.