Cuestionarios De Contexto

Lucia Monroy CazorlaDirectora general Adjunta Técnica y de Investigación

Los cuestionarios de contexto: una herramienta medular para investigación

Septiembre, 2008

1. Las pruebas de logro educativo

• Pruebas que se aplican en México

• Usos

2. Los cuestionarios de contexto

• ¿Qué son?

• ¿Para que sirven?

• ¿Cómo se diseñan?

3. Estructura de los cuestionarios de contexto del Ceneval

4. Líneas de investigación

Contenido

9

1.- Las pruebas a gran escala

Las pruebas se distinguen porque están diseñadas para dar cumplimiento a diferentes

propósitos

PISA

EXANI

EGEL

ENLACE

EXCALE

1.- Las pruebas a gran escala

Pruebas de selección

Pruebas diagnósticas

Pruebas de certificación

10

Algunas pruebas aplicadas en México Prueba Dirigido a Uso Población Alineación

curricularResultado Individual

Impacto

PISA Evaluar al sistema

educativo al término de la

educación obligatoria

Impactar política

educativa

Estudiantes de 15 años

No No Bajo

Excale Evaluar al sistema

educativo

Impactar política

educativa

Estudiantes de educación

básica

Si No Bajo

Enlace Evaluar el logro académico de los estudiantes

Informar sobre el

desempeño

Estudiantes de educación

básica y media superior

Básica: SíEMS: No

Si Bajo

EXANI Evaluar el logro académico de los estudiantes

Ayudar en las

decisiones de admisión

Candidatos a ingresar a educación

media-superior, superior y posgrado

No Si Alto

2.- Usos de las pruebas de logro

Todas las pruebas de logro académico a gran escala

están orientadas a evaluar los conocimientos y/o

habilidades que han adquirido los sustentantes a

través de procesos formales o informales de

aprendizaje

Normativas• Porcentaje de respuestas correctas• Escalas institucionales (Índice Ceneval)• Escalas de habilidad con modelos IRT

Criteriales• Proporción de estudiantes en cada segmento

Ejemplo:

• Prueba = Resultados del EXANI-I

• Entidad = Zx

• Propósito = Seleccionar a los estudiantes que

ingresarán a las escuelas públicas de educación media

superior

2.- Usos de las pruebas de logro

Media de la entidad = 1009

Resultados del EXANI-I. Media nacional, regional y estatal.

Media de la entidad = 1009

Media nacional = 997

Media de la región 1 = 1037

800 11001000 1150900

ÍNDICE CENEVAL

En

tid

ad Z

x

Ent

idad

1

Ent

idad

3

Ent

idad

2

Ent

idad

4

Resultados del EXANI-I. Medias de los estados de la región 1

Modalidad BModalidad A

-2 10 2-1

Gradiente Socioeconómico

1000

1150

1300

850

700

ÍND

ICE

CE

NE

VA

L

Promedio de la entidad ZX

Modalidad A

Promedio nacional ponderado

Resultados del EXANI-I.Puntaje obtenido x Gradiente socioeconómico

Modalidad B

• Son instrumentos de medición que se aplican para obtener información y hacer inferencias cuantitativas acerca de la población.

• A diferencia de los exámenes en un cuestionario de contexto no existen respuestas correctas e incorrectas.

11

2.- Los cuestionarios de contexto

¿Qué son?

• Describir las características de los sustentantes evaluados,

identificando el contexto familiar y económico en el que se

desenvuelven.

• Conocer las características de los docentes, de los directores de las

escuelas, así como las características de los salones de clase y de

las escuelas.

• Comparar resultados del logro en las variables de contraste de

interés; siempre y cuando los datos con los que se dispone permitan

hacer las comparaciones deseadas.


¿Para que sirven?

• Identificar los factores que afectan el aprendizaje, detectando

su aportación en los niveles estructurales del sistema educativo.

• Detectar las prácticas de los alumnos, de la familia, de los

docentes y del director que generan mejores resultados

académicos.

• Proponer modelos de explicación sobre el rendimiento escolar.

• Comparar los hallazgos nacionales con la información

internacional.


¿Para que sirven?

Describir: ¿Cuántos sustentantes son mujeres u hombres? ¿De qué condición socioeconómica provienen? ¿Cuál es su escuela de procedencia?

Contextualizar: ¿En matemáticas obtienen un mayor puntaje las mujeres o los hombres? ¿Existen diferencias en los puntajes obtenidos por los estudiantes que estudiaron la secundaria en una telescundaria o en una secundaría técnica?

Explicar: ¿Cómo impactan el nivel socioeconómico y el capital cultural de la familia en los resultados que obtienen los estudiantes en la prueba de logro?


¿Para que sirven?

− Participación en comportamientos de riesgo

− Amigos anti-sociales

− Baja socialización en la escuela

− Niveles bajos de capital social familiar

− Bajo nivel socioeconómico

− Género masculino

Battin-Pearson, S., Newcomb, M. D., Abbott, R. T., Hill, F. G., Catalano, R. F., & Hawkins, J. D. (2000). Predictors of Early High School Dropout: A Test of Five Theories. Journal of Educational Psychology, 92(3), 568-582.

El bajo rendimiento escolar es una variable mediadora del efecto que ejercen las siguientes variables sobre la deserción escolar:

Un cuestionario bien diseñado debe generar información:

• Válida. Las variables que se incorporan responden a definiciones claras de lo que se pretende medir.

• Confiable. Las mediciones deben ser consistentes, por lo que cambios en las puntuaciones deben reflejar cambios en la situación de los respondientes. Los resultados de los cuestionarios deben ser reproducibles en poblaciones similares.

• No sesgada. Las mediciones deben presentarse a los respondientes de forma tal que no favorezcan a grupos de la población.

16


¿Qué características deben tener?

• Responder a los propósitos de la medición.

• Cada una de las preguntas debe ser útil y pertinente para lograr el objeto de medición.

• Los constructos explorados deben incorporar variables manifiestas acordes a la definición conceptual.

• La escala de medición de las variables debe corresponder de manera natural a la pregunta.

• Los modelos estadísticos que se utilicen para el análisis de los datos deben contemplar la métrica de las variables manifiestas y de los constructos definidos.

17


¿Qué características deben tener?


Modelo conceptual

• Modelos multifactoriales que proponen interacciones complejas

de las variables.

• Premisa medular asume que los individuos son agentes

dinámicos que transforman y son transformados por una amplia

gama de variables personales, sociales, escolares y económicas.

• Exploran aspectos históricos de los individuos, así como aspectos

puntuales de su contexto actual.

1. Definir el propósito de la evaluación.

2. Revisar el estado actual del conocimiento.

3. Determinar el perfil de los investigadores que

conformarán el Consejo Técnico del Cuestionario.

4. Determinar el diseño del estudio y los requerimientos para

la aplicación.

19


¿Cómo se diseñan?

5. Seleccionar las variables que se incorporarán en los

instrumentos de medición.

6. Construir el instrumento.

7. Analizar el instrumento con grupos focales.

8. Realizar un piloteo del instrumento en poblaciones similares.

9. Analizar los resultados del piloteo y conformar las versiones definitivas.

20



10. Aplicar el instrumento.

11. Lectura y elaboración de bases de datos.

12. Analizar el comportamiento de las preguntas.

13. Elaborar los indicadores de los constructos medidos.

14. Elaborar los perfiles descriptivos de la población.

15. Generar modelos explicativos del aprendizaje (mediano plazo).

16. Difundir los resultados.

21




¿Quiénes los diseñan?

• Grupo básico.- Da lineamientos y acuerda asuntos administrativos

Usuario y Ceneval.

• Consejo Técnico.- Define las variables que se explorara el

cuestionario de alumnos, maestros y directores (Investigadores).

• Comités de apoyo.- Proporciona información sobre la planta

docente y las características de los planteles (Docentes y

autoridades educativas de diferentes subsistemas de EMS)

Consejo Técnico

23

24


¿Cuál es su estructura?

Módulo básico(permanente)

Módulo de Investigación(temporalidad

limitada)Módulo propuesto

por usuarios(cambios anuales)

Área Dominio VariableEscala/

PreguntaNum.

Preguntas

Nombre P 1Número de hermanos P 1

Lugar entre los hermanos P 1Número de hermanos de la madre P 1Lugar de nacimiento P 1Sexo P 1Edad P 1Lengua materna P 3

Motivación P 3Auto-control E 4Manejo de tiempo E 10Compromiso académico E 6Inglés E 44Cómputo E 24Antecedentes laborales P 2Trabajo actual P 1Rendimiento académico en la secundaria E 5Beca en la secundaria P 1

Características de la escuela de procedencia

Características de la secundariaP 4

Exigencia de la escuela P 2Calidad de los maestros E 3Familiaridad opción múltiple P 1EXANI I P 5Estructura familiar P 7Capital cultural E 10Capital económico E 21

Involucramiento de los padres P 2165

Área Dominio VariableConsumo de sustancias adictivas legalesConsumo de sustancias adictivas ilegales

Movibles: Inamovibles Temporales

Personal Conductas de riesgo

Recursos no cognitivos

Recursos cognitivos (módulo extra)

Trayectoria académica

TOTAL

Social Familiar

Identificador

Situación laboral

Escolar

Exámenes presentados

Calidad de la escuela

Personal

Datos generales

Estructura del cuestionario de Contexto EXANI-I

Estructura del cuestionario de Contexto EGEL


PreguntaPreguntas

Nombre P 1Lugar de nacimiento P 1Número de hermanos P 1Lugar entre los hermanos P 1Hermanos de la madre P 1Nombre del examen P 1Clasificación P 1Edad P 1Sexo P 1Estado civil P 1Lengua materna P/E 3Rendimiento académico bachillerato

P 1

Duración de licenciatura P 1Rendimiento académico licenciatura

P/E 3

Año ingreso licenciatura P 1Créditos cubiertos P/E 1Beca licenciatura P/E 1Antecedentes laborales P 2Trabajo actual P 6Motivación E 3Autocontrol E 4Manejo de tiempo E 10Compromiso académico E 6Uso de la computadora P/E 24Dominio del inglés P/E 45Nombre y clave P 1Tipo de institución P 1Modalidad P 1Exigencia de la escuela P/E 2Calidad de los maestros P/E 3Familiaridad opción múltiple P 1EXANI I P 1EXANI II P 1EGEL P/E 7Estructura familiar P/E 8Capital económico E 21Capital cultural E 10

178

Movibles: Inamovibles Temporales

TOTAL

Identificador

Identificación del examen

Datos del examen

Personal

Datos personales


Situación laboral


Recursos cognitivos

Social

Escuela

Características de la escuela de procedenciaCalidad de la

escuela

Exámenes presentados

Familia

Cuestionario de Contexto para alumnos ENLACE


PreguntaPreguntas

Sexo P 1Edad P 1Estado civil P 1Discapacidades P 6Motivación E 3Manejo de tiempo E 7Compromiso académico E 9

Situación laboral Trabajo actual P 5Consumo de sustancias adictivas E 5Consumo de sustancias ilegales E 5Comportamiento antisocial E 5Inglés E 6Cómputo E 4Primaria P/E 5Secundaria P/E 7Nivel Medio Superior P/E 19Primaria P 1Secundaria P 2Nivel Medio Superior P 4Exigencia de la escuela E 2Calidad de los maestros E 10Clima escolar E 13Capital cultural E 10Capital económico E 17

148TOTAL

Escolar

Características de las escuelas de procedencia


Social Familiar

Personal

Datos generales

Comportamientos de riesgo


Recursos cognitivos


Estructura y Número de preguntas

del CC-

Docentes Enlace

Bachillerato

Área Dominio VariablesEscala /

PreguntaPreguntas

Clave de identificación Clave del centro de trabajo P 1

Ubicación del centro de trabajo Estado donde se encuentra el centro de trabajo P 1

Sexo P 1Edad P 1Preparación profesional y actualización P 22Empleo adicional P 1Experiencia docente P 3Función docente P 10Contratación P 2Tiempo dedicado a la función académica P 1Requisitos de ingreso para docentes P 4Prestaciones P 10Evaluación docente P 12Estímulos P 5Libertad de cátedra E 7Trabajo colegiado P 8Evaluación de la función directiva P 9Estado general de la infrestructura E 7Computadoras P 3Biblioteca P 5Espacios para actividades extra-clase P 3Programa de estudios P 9Cobertura curricular P 2Sistema de tutorías P 1Tiempo de clase P 11Autoevaluación de la función docente E 4Planeación didáctica P 4Evaluación diagnóstica P 4Técnicas enseñanza-aprendizaje P 7Recursos didácticos P 7Actividades extra-clase P 6Tareas P/E 5Evaluación de los alumnos P 14Mecanismos apoyo P 2Medidas disciplinarias P 1Asistencia P 1Reprobación P 2Retardos y ausentismo P 2Problemas para aprender P 5Exigencia académica P 3Clima escolar P 33

239

Ide

ntifi

caci

ón

Prácticas pedagógicas

Organización escolar

Infraestructura, equipo y materiales

Aca

dé

mic

a

Eficiencia escolar

En

torn

o

esc

ola

r

TOTAL

Pe

rso

nal


Oportunidades de aprendizaje

Datos generales

Perfil profesionalA

dm

inis

tra

tiva

Estructura y Número de preguntas

del CC-

Directores Enlace

Bachillerato

Área Dominio VariableEscala /

preguntaPreguntas

Clave Clave del centro de trabajo P 1

Ubicación Estado donde está ubicado el centro de trabajo P 1

Sexo P 1Edad P 1Preparación profesional y actualización P 4Examen de oposición P 1Experiencia con la computadora e internet E 9Habilidad en inglés E 3Experiencia como director P 2Horas frente a grupo P 2Contratación P 1Régimen de la escuela P 1Modalidad de enseñanza P 6Tamaño de escuela P 1Fuentes de financiamiento P 1Tamaño de la localidad P 1Modalidad de bachillerato P 1Reconocimiento de estudios P 5Áreas o carreras P 2Servicios P 10Instalaciones para alumnos P/E 21Instalaciones para docentes P 3Mantenimiento de la planta física E 6Equipo P 6Computadoras P 7Página de Internet P 1Biblioteca P/E 5Tiempo de los docentes dedicado a la escuela P 4Características personales de los docentes P 2Características educativas y actualización de los docentes P 5Requisitos de selección de la planta docente P 7Afiliación sindical P 1Participación (libertad de cátedra) E 7Evaluación docente P/E 12Estímulos y prestaciones P 16Problemática y sanciones P 26Ciclos y turnos escolares P 5Tiempos reglamentarios para conlcuir el NMS P 2Reglamento: normas y sanciones P 11Espacios para quejas o denuncias P 1Asociaciones P 2Relación con padres de familia P 12Becas P 6Función directiva E 21Criterios de asignación de grupos a los docentes P 5Criterios de admisión de estudiantes P 4Criterios de asignación de turno a los estudiantes P 1Diagnóstico de los estudiantes de nuevo ingreso P 4Sistema de evaluación del logro P 5Entrega de calificaciones P 1Criterios de acreditación de asignaturas P 2Reprobación P 6Apoyo académico a estudiantes de bajo rendimiento P 2Reuniones de consejos académicos P 1Actividades extracurriculares E 6Acciones preventivas P 3Servicios especializados P 4Oportunidades de aprendizaje (tiempo clases) P 2Contenidos curriculares (programa de estudios) P 29Prácticas profesionales exigidas dentro del programa P 3Sistema de tutorías P 3Incentivos para estudiantes de buen desempeño P 4Actividades de apoyo y fomento a la investigación P 6Oportunidades laborales P 9Intercambio académico P 3Retardos y Ausentismo P 2Tasa de reprobación Español y Matemáticas P 2Eficiencia terminal P 1Deserción P 2Seguimiento a egresados P 1Exigencia de la escuela P 1Clima escolar P/E 30

385TOTAL

En

torn

o e

scola

r

Gestión escolar

Planta docente

Eficiencia escolar


Organización escolar

Acad

ém

ica

Programa Académico

Iden

tifica

ció

n

Perfil profesional

Datos de la escuela

Pe

rson

al

Ad

min

istr

ativa

Datos generales

Infraestructura, equipo y

materiales

[email protected]

[email protected]

Evaluar... Una buena medida para Evaluar... Una buena medida para educar mejoreducar mejor

Muchas gracias

Cuestionarios De Contexto

Documents

Transcript of Cuestionarios De Contexto