CALIDAD en los CUESTIONARIOS para INVESTIGACIONES por ENCUESTAS

Luis Angulo Cabanillas

CAELPERU

Repasar los fundamentos del cuestionario para encuesta Presentar los consejos y criterios prácticos para cuestionarios de calidad Aplicar de manera crítica los criterios prácticos a cuestionarios reales Conocer las posibilidades de las nuevas tecnologías en el ámbito del cuestionario

OBJETIVOS

1. FUNDAMENTOS del CUESTIONARIO de ENCUESTAS

1. Cuestionario e investigar mediante encuesta

2. Definición de cuestionario y otros conceptos

3. Tipos de cuestionario

4. Partes de un cuestionario

5. Tipos de preguntas o ítems

6. Partes de una pregunta o ítem

7. Crear un cuestionario

1.1. CUESTIONARIO y ENCUESTAS

Cuestionario es un instrumento al servicio de una investigación (objetivos) y de una técnica (encuesta).

Tipo de cuestionario en función de la investigación (descriptivos, explicativos…)

Tipo de cuestionario en función de la técnica cuantitativo (trabajo previo intenso)

Tipo de cuestionario en función de la encuesta (estructurado, estandarizado y cerrado; vía de administración).

1.2. DEFINICIÓN de CUESTIONARIO (I)

• Encuesta. Técnica de investigación cuantitativa • Entrevista. Nombra la interacción entre el encuestador y el encuestado. Test. Instrumento estandarizado de medición psicológica.

CUESTIONARIO TEST

Análisis Individual Conjunta

Las cuestiones Preguntas Ítems

Utiliza Sociólogo Psicólogo

Fiabilidad Pre-test y post-test Coeficiente alfa

Contenidos Conductas y opiniones Aptitudes y Act.

: VENTAJAS: DESVENTAJAS

1. Ahorra tiempo

2. Aporta información estandarizada

3. Facilita la confidencialidad

1. Responde a objetivos descriptivos

2. Impide profundizar en las respuestas, es superficial

3. Resulta difícil de realizar

DEFINICIÓN:

1.2. DEFINICIÓN de CUESTIONARIO (II)

1.3. TIPOS de CUESTIONARIO

Según cómo sea la recogida de datos Directa o auto-administrado Indirecta o administrado

Según cómo sean los enunciados Estructurado No estructurado

Según cómo sean las respuestas Pre-codificado o cerrado Post-codificado o abierto

1.4. PARTES del CUESTIONARIO

Título y encabezamiento Presentación

Presentación del encuestador y objetivo Qué trata, quién la realiza/financia, para qué. Por qué se le elige (azar y confidencialidad)

Bloque de preguntas Sencillas Difíciles Abiertas Socio-demográficas

Despedida y agradecimiento

1.5. TIPOS de PREGUNTAS (I)

• Según la naturaleza del contenido. • Hechos y comportamientos • Opinión y actitudes • Socio-demográficas o clasificatorias

• Según la respuesta que se admita • Abierta • Semiabierta • Cerrada

• Según su función en el cuestionario • Rompehielos y alivio • Esencial • Filtro • Control

1.5. TIPOS de PREGUNTAS (II)

SEGÚN RESPUESTA (CERRADAS): • Dicotómicas: Dos opciones de respuesta

• Categóricas: Más de dos opciones de respuesta

• Elección múltiple: Solo es posible elegir una opción y el orden de las respuestas no es relevante

• Respuesta múltiple: Es posible elegir más de una

opción y el orden de las respuestas no es relevante • Escala: Solo es posible elegir una opción, el orden de las

respuestas es relevante (ej.: Frecuencia, escala Likert…)

EJEMPLOS:

1.6. PARTES de una PREGUNTA

Ahora le vamos a realizar unas preguntas sobre su conocimiento de ONGs en España, en las que tendrá que optar por una de las alternativas de respuesta que le leeré a continuación. (Mostrar la tarjeta 7)

P7. ¿Ha visto usted anteriormente el logotipo de las siguientes Organizaciones no Gubernamentales?

Sí No Médicos sin fronteras……1 2 (55) Cáritas Española ……1 2

(56) Manos Unidas ……1 2

(57)

MEDÍCOS SIN FRONTERAS

CÁRITAS ESPAÑOLA

MANOS UNIDAS

TARJETA 7

1. Indicaciones para encuestado

2. Indicaciones para encuestador

3. Numeración

4. Enunciado

5. Opciones de respuesta

6. Código

7. Recursos complementarios

2. CONSEJOS PRÁCTICOS PARA CUESTIONARIOS DE CALIDAD

1. Validez y fiabilidad del cuestionario

2. Consejos para presentar cuestionario

3. Consejos para crear cuestionario

4. Consejos para redactar preguntas

5. Consejos para redactar enunciados

6. Consejos para redactar respuestas

2.1. VALIDEZ Y FIABILIDAD DE UN CUESTIONARIO

FIABILIDAD: La fiabilidad de un instrumento se examina si éste , en igualdad de condiciones proporciona iguales resultados (precisión): Test-Retest (pruebas repetidas) Coeficiente Alfa de Conbrach (correlación entre elementos) Dos mitades (correlación entre dos mitades de una muestra)

VALIDEZ: La validez de un instrumento consiste en que mida lo que tiene que medir (autenticidad) Know groups (preguntar a grupos conocidos) Predictive validity (comprobar comportamiento) Cross-check-questions (contrastar datos previos)

2.2. CONSEJOS PARA LA PRESENTACIÓN

Formato: Papel, impresión y tipo de letra que facilite la lectura

Limpieza: Preguntas bien delimitadas y separadas entre sí.

Indicaciones: Instrucciones explícitas como, por ejemplo, las preguntas filtro

Nomenclatura: Especificada y uniforme.

Completo: Todas las partes

2.3. CONSEJOS PARA CREAR UN CUESTIONARIO

Orden: Introducción, de fáciles a difíciles, las socio-demográficas al final, etc.

Extensión: No más de ¾ hora en su administración

Estructura: Si el cuestionario es largo emplear títulos, entradillas…

Diseño: Si es un buen instrumento para su objetivo (ni sobra ni falta)

2.4. CONSEJOS PARA REDACTAR PREGUNTAS

Ser claro y breve: 1.- Usted ya sabe que el tiempo pasa y apenas nos damos cuenta, por eso muchas veces es triste recordar como Zeus dicta su ritmo

sobre nuestras vidas, depositando el pálido amarillo sobre nuestras fotografías. ¿Dígame en que etapa cronológica se situaría? a) En las edades pueriles que abarcan de los quince a los treinta años aproximadamente. b) En los años de vigor maduro que podríamos limitar entre los treinta y uno y los sesenta. c) O cuando la vida se revuelve en sus recuerdos y nos ataca la nostálgica senectud a partir de los sesenta y uno.

Evitar siglas y negaciones: 2.- ¿Cree Usted que las ONGDs no ayudan nada a ningún de los países que no pertenece a los países desarrollados?

a) Siempre b) A veces. c) Nunca.

Completo: Todas las partes Evitar temas indiscretos (ética) 3.- ¿Qué edad tenía usted en su primera relación íntima?

_________________

VER CÓDIGOS ESOMAR: URL: http://www.esomar.nl/codes_and_guidelines.html

2.5. CONSEJOS para REDACTAR ENUNCIADOS

Formular entre interrogaciones 1. Años

_______________

Ambigüedad: 2.- ¿Qué edad tiene usted durante este año?

_________________

Evitar sesgos: buscar respuestas favorables, preguntas-acertijo, preguntas-rol...

3.- Ciertamente ¿Usted tiene menos de treinta años?

4.- ¿Qué edad tenía usted en el años en el que el PSOE obtuvo su primera mayoría absoluta?

5.- ¿Cuántos años diría que tiene usted si yo fuera usted?

2.6. CONSEJOS para REDACTAR RESPUESTAS

Exhaustivas y excluyentes 1.- ¿Cuántos años tiene usted?

a) Menos de 30 b) Entre 31 y 60 c) Entre 60 y 90

Evitar reiteraciones y precodificaciones 2.- ¿Cuántos años tiene usted?

a) Menos de 31 años b) Entre 31 y 60 años c) Entre 61 y 75 años d) Más de 75 años

Evitar Ns/nc. 3.- ¿Cuántos años tiene usted? __________

Ns/nc

Ordenar las alternativas de respuesta 4.- ¿Cuántos años tiene usted?

a) Entre 31 y 60 años b) Menos de 31 años c) Más de 75 años d) Entre 61 y 75 años

3. APLICAR LOS CONSEJOS A EJEMPLOS DE CUESTIONARIOS (I)

APRENDER DE LOS ACIERTOS Y LOS ERRORES DE OTROS CUESTIONARIOS

BARÓMETRO DEL CIS (MAYO 2001) formato pdf

ENCUESTA DEL CIRES (MARZO 1995) formato rft

ENCUESTA MUNDIAL DE VALORES (1996) formato pdf

3. APLICAR LOS CONSEJOS A EJEMPLOS DE CUESTIONARIOS (2)

Validez y fiabilidad del cuestionario

– Existe información sobre la validez o fiabilidad

Consejos para presentar cuestionario

– Completo – Formato – Limpieza – Indicaciones – Nomenclatura

Consejos para crear cuestionario

– Orden – Extensión – Estructura – Diseño

Consejos para redactar preguntas

– Completo – Ser claro y breve – Evitar siglas y

negaciones – Evitar temas indiscretos

Consejos para redactar enunciados

– Formular entre interrogaciones

– Ambigüedad – Evitar sesgos

Consejos para redactar respuestas

– Exhaustivas y excluyentes

– Evitar reiteraciones y precodificaciones

– Evitar Ns/nc. – Ordenar

INDICADORES PARA EVALUAR LA CALIDAD DEL CUESTIONARIO

3. APLICAR LOS CONSEJOS A EJEMPLOS DE CUESTIONARIOS (3)

Descargar plantilla (plantilla.doc) Escoger un cuestionario Evaluarlo individualmente y luego en grupo

PLANTILLA Y PRÁCTICA PARA EVALUAR

RELLENAR PLANTILLA:

3. APLICAR LOS CONSEJOS A EJEMPLOS DE CUESTIONARIOS (3)

Descargar plantilla (plantilla.doc) Escoger un cuestionario Evaluarlo individualmente y luego en grupo

PLANTILLA Y PRÁCTICA PARA EVALUAR

RELLENAR PLANTILLA:

4. CONOCER NUEVAS TECNOLOGÍAS APLICADAS AL CUESTIONARIO (2)

ESTUDIOS CUANTITATIVOS*

  2000 1999 Evol %

TOTAL (N) 8.808 8.427 4,5

PERSONALES (%) 38,3 55,7 -22

TELÉFONICAS (%) 41,2 30,3 42

POSTALES (%) 6,3 4,6 51

FALSA COMPRA (%) 1,1 1,7 -35

ELECTRÓNICOS (%) 4 1 300

OTROS (%) 12,6 6,7 88

Fuente: Investigación de Mercado y Opinión. Marzo 2002 * No coinciden los porcentajes

NUEVAS TECNOLOGÍAS

ENCUESTAS RENOVADAS

• Aumento de las encuestas telefónicas y electrónicas

• Software para asistencia a encuestas (CAI)

• CAPI (Personales)

• CATI (Telefónicas)

• CASI (Auto-administradas):

• Encuestas e-mail

• Encuestas on-line

4. CONOCER NUEVAS TECNOLOGÍAS APLICADAS AL CUESTIONARIO (4)

Visita alguna de las empresas que elaboran software para encuestas en la red

Descarga las demos o conoce las pruebas que ofrecen

Comenta las ventajas y desventajas de los cuestionarios en la red

PRACTICA CON LAS DEMOS DEL SOFTWARE PARA ENCUESTAS EN LA RED

COMENTARIOS: