U n i d a d d e P r o c e s o s d eE v a l u a c i ó n y S e g u i m i e n t o
M I N I S T E R I O D E E D U C A C I O NG o b i e r n o d e E l S a l v a d o r
DISEÑO DE INSTRUMENT
OS4
Oscar Romero Vides
Marzo de 2004.
OBJETIVO
Reconocer pautas metodológicas aplicadas a la recolección de información y a la formulación de instrumentos .
________________________________________Autoevaluación Institucional
REQUISITOS DE CALIDAD DE LA INFORMACIÓN
Ø La información deberá ser fiable, es decir si realizara otro estudio del mismo fenómeno bajo condiciones similares, se obtendrían resultados similares.
Ø Además los datos han de tener validez, deben ser relevantes para precisar el problema en estudio.
________________________________________Autoevaluación Institucional
Normas importantes para mejorar la calidad de la evaluación
Concéntrese en situaciones, componentes o áreas problemáticas, dirigirse al objetivo de la evaluación.
Ponga a prueba las técnicas a aplicar para la recolección de datos.
No plantee preguntas que induzcan respuestas predeterminadas a menos que exista un propósito específico: crear contraste, obtener opinión.
________________________________________Autoevaluación Institucional
Normas importantes para mejorar la calidad de la evaluación
Sea flexible en la selección de procedimientos y utilice una combinación de métodos y técnicas .
Compruebe si sus datos son fiables. Cuando más sensacionales sean los hallazgos más cuidadoso debe ser .
________________________________________Autoevaluación Institucional
Criterios básicos de aplicabilidad
de la información
ESENCIAL . DISPONIBLE NO COSTOSA OPORTUNA
________________________________________Autoevaluación Institucional
MÉTODOS FORMALES
ENCUESTA FORMAL:Incluye el uso de entrevistas y cuestionarios escritos y orales
OBSERVACION PARTICIPANTE:Observación en profundidad de uno o unos pocos casos seleccionados
MEDICION DIRECTA: Registros de datos cuantificables o clasificables por medio de instrumentos analíticos
________________________________________Autoevaluación Institucional
ENCUESTAS FORMALES
ES EL METODO MÁS ADECUADO: Cuando se necesita una información
precisa generalizable y cuantitativa. Cuando no es posible o apropiado incluir a
la población total. Cuando la finalidad es conocer el grado de
variación o desviación en una población. Cuando existe la necesidad de verificar
hipótesis u opiniones estereotipadas de forma cualitativa.
________________________________________Autoevaluación Institucional
ENCUESTA FORMAL TENGA EN CUENTA La capacitación meticulosa de los
entrevistadores en el registro e interpretación Los cuestionarios han de ser previamente
probados. En el muestreo se debe tener cuidado para
asegurar que se ha incluido a todos los grupos relevantes.
En el informe deben explicarse los criterios y métodos de muestreo, así como cualquier limitación estadística en relación a la muestra
________________________________________Autoevaluación Institucional
OBSERVACIÓN ES EL METODO MÁS ADECUADO:
Para obtener una visión mas profunda de las condiciones socioculturales, los procesos y los patrones de conducta.
Cuando existe la necesidad de un conocimiento de base que permita la interpretación de los datos existentes recogidos por otros métodos.
Para estudiar efectos y procesos imprevistos que no se tuvieron en cuenta en la formulación de planes o programas
Para evitar que la recogida de datos influya sobre la calidad de los mismos.
________________________________________Autoevaluación Institucional
OBSERVACIÓN TENGA EN CUENTA Debe considerarse si la presencia del
observador representa una fuente importante de error.
La utilización de varios informantes y observadores independientes puede ayudar a corregir la posible información errónea.
Debe reservarse un tiempo suficiente para discutir e interpretar los resultados.
La corrección posterior de errores puede lograrse discutiendo los resultados con aquellos que han sido estudiados
________________________________________Autoevaluación Institucional
MEDICION DIRECTA
ES EL METODO MÁS ADECUADO: Para la obtención de datos cuantitativos
sobre fenómenos o procesos físicos. Para controlar indicadores directos o
indirectos que son medibles. En casos en los que resultados pueden ser
ordenados o clasificados sistemáticamente.. En conexión con varios tipos de pruebas.
________________________________________Autoevaluación Institucional
MEDICION DIRECTA
TENGA EN CUENTA Antes de comenzar la medición debe
sopesarse el coste y complejidad de la misma en relación a los resultados probables
Se debería explicar a los afectados el propósito con el que se lleva a cabo la medición y la utilización del instrumento .
Se deben especificar en el informe los métodos utilizados, así como los márgenes probables de error.
________________________________________Autoevaluación Institucional
PARA REFLEXIONAR: En la Escuela 10 ¿Qué clase de información se
registra? ¿…quién la registra? ¿… con qué propósito?
¿… cuáles debieran ser las características de calidad de la información colectada?
________________________________________Autoevaluación Institucional
MÉTODOS SIMPLIFICADOS
ENTREVISTAS CON INFORMANTES CLAVES:Proporciona información general descriptiva, útil para la verificación y generación de ideas
ENTREVISTAS DE GRUPO:Genera información a nivel local relativa a medidas que afectan a muchas personas.
ENTREVISTA AL GRUPO FOCAL: Para el análisis de problemas complejos; para identificar actitudes y prioridades en grupos más pequeños.
________________________________________Autoevaluación Institucional
MÉTODOS SIMPLIFICADOS
OBSERVACION DIRECTA:Implica inspección, observación para comprender procesos, infraestructura servicios y su utilización.
ENCUESTA INFORMAL:Implica encuestas cuantitativas de pequeñas muestras; procedimientos de muestreo no aleatorio
________________________________________Autoevaluación Institucional
ENTREVISTAS CON INFORMANTES CLAVE ES EL METODO MÁS ADECUADO: Para producir información general,
descriptiva. Para comprender mejor los motivos y las
actitudes de las diferentes partes. Para interpretar datos cuantitativos
disponibles. Para desarrollar preguntas, hipótesis y
propuestas para su posterior comprobación y elaboración.
________________________________________Autoevaluación Institucional
ENTREVISTAS CON INFORMANTES CLAVE
TENGA EN CUENTA Los informantes deberán ser seleccionados
sobre la base de su papel, función o su especial perspicacia
Los principales grupos de interés deberán estar representados.
Las entrevistas deben prepararse de manera que los informantes se confronten con el conocimiento sustantivo y la experiencia practica reales.
________________________________________Autoevaluación Institucional
ENTREVISTAS CON INFORMANTES CLAVE
TENGA EN CUENTA Las entrevistas deberán desarrollarse en una
atmósfera abierta informal A medida que se obtiene nueva información
puede resultar útil contactar con el mismo informante varias veces en el transcurso de la evaluación.
El entrevistador deberá tomar notas detalladas de las entrevistas.
Los criterios utilizados en la selección de los informantes deben especificarse en el informe
________________________________________Autoevaluación Institucional
“Cuestionario sobre gestión del centro”
1. Dirección
2. Organización del centro
3. Proyecto educativo
4. Proyecto curricular
5. Reglamento de régimen interior
6. Asociación de padres
7. Sistema de evaluación de alumnos
8. Sistema de evaluación de la institución
9. Recursos humanos
10. Presupuesto
________________________________________Autoevaluación Institucional
Para poner en práctica Tomando como base el documento de Estándares
e Indicadores de la Escuela 10; y los análisis de indicadores hechos en el desarrollo temático anterior:
à Defina cuáles indicadores se estarían evaluando por medio de un cuestionario como el presentado como modelo.
à Redefina las áreas de análisis presentadas en el modelo, si fuera necesario.
à Establezca las preguntas guías de evaluación en cada una de las áreas
à Realice una prueba de aplicación del instrumento aquí construido, en su Centro Escolar.
________________________________________Autoevaluación Institucional
ENTREVISTAS DE GRUPO ES EL METODO MÁS ADECUADO:
Para recoger datos a nivel de sectores dentro de la comunidad educativa.
Para determinar el grado de apoyo popular o la totalidad de la comunidad con que cuneta una iniciativa especifica.
En la evaluación de iniciativas de desarrollo que afectan a un gran número de personas.
________________________________________Autoevaluación Institucional
ENTREVISTAS DE GRUPO TENGA EN CUENTA Los participantes deben constituir una muestra
representativa en términos de genero, status, distribución de papeles, etc..
El entrevistador debe tener un conocimiento del tema y de la comunidad local, así como experiencia en la conducción de entrevistas comunitarias.
Debe prepararse con antelación un plan de entrevista.
Las preguntas deben formularse de manera precisa e individualizada
________________________________________Autoevaluación Institucional
ENTREVISTAS DE GRUPO TENGA EN CUENTA
El entrevistador debe provocar una participación amplia (evitar tendencias de algunas personas a predominar).
Todo el que quiera expresar una opinión debe tener la oportunidad de hacerlo antes de que se plantee la pregunta siguiente.
Utilice preguntas del tipo si o no o de categorías definidas proporcionará una cierta posibilidad de obtener algunos datos cuantitativos.
La información obtenida durante las entrevistas comunitarias debe registrarse meticulosamente.
________________________________________Autoevaluación Institucional
Cuestionario sobre las experiencias de aprendizaje
1. Cita tres momentos que recuerdes que influyeron más en tu aprendizaje
2. ¿Existe algo en común en ellos? 3. Nombra tres momentos que no hayan influido en tu
aprendizaje 4. ¿Por qué crees que no influyeron? 5. ¿Qué te impide aprender en la escuela? 6. ¿Qué condiciones crees que debe poseer tu escuela
para que aprendas mejor? ¿Estas a gusto en el Centro? ¿por qué?
________________________________________Autoevaluación Institucional
ENTREVISTAS A UN GRUPO FOCAL ES EL METODO MÁS ADECUADO: Para generar ideas e hipótesis. Para provocar reacciones a distintas
sugerencias y recomendaciones. Para conseguir explicaciones acerca de las
elecciones y prioridades del grupo. Para el análisis de áreas de problemas
complejas. Para alcanzar un acuerdo en torno a las
conclusiones y recomendaciones
________________________________________Autoevaluación Institucional
ENTREVISTAS A UN GRUPO FOCAL
TENGA EN CUENTA El grupo debería ser homogéneo en términos
de intereses y limitado de ocho a doce participantes
Las discusiones de grupo deben ser conducidas por un moderador con experiencia que es responsable de mantener una discusión centrada.
Puede utilizarse con provecho técnicas de visualización.
________________________________________Autoevaluación Institucional
ENTREVISTAS A UN GRUPO FOCAL
TENGA EN CUENTA
El moderador debe permanecer neutral, pero debería conocer profundamente el tema de discusión
Debe enfocarse solo un tema en cada momento. Es deseable alcanzar consenso antes de pasar al tema siguiente.
Deben tomarse notas detalladas.
________________________________________Autoevaluación Institucional
“Historias de aprendizaje”
Un instrumento útil para ser aplicado a un grupo de alumnos (informantes claves de la conducta del profesor), propone revisar las historias sobre el aprendizaje formando grupos de tres o cuatro alumnos. Cada grupo deberá contar una historia sobre aprendizaje, basado en algo que realmente haya sucedido, en clase o fuera de ella. Posteriormente, deberán descubrir las semejanzas en las historias y debatir las posibles conclusiones.
________________________________________Autoevaluación Institucional
OBSERVACION DIRECTA ES EL METODO MÁS ADECUADO: Para proporcionar información de fenómenos
físicos. Para recoger información sobre la adecuación
y utilización de servicios públicos y privadas, infraestructura, etc.
Para obtener información preliminar, descriptiva.
Para comprender fenómenos, procesos y como las cosas se organizan y se llevan a cabo.
________________________________________Autoevaluación Institucional
OBSERVACION DIRECTA
TENGA EN CUENTA Cualquiera que sea el objeto de la
observación una muestra o un proceso debe ser representativa de la población total o el asunto en cuestión.
La observación debe ser sistemática, con listas de comprobación, registros de las observaciones, etc.
________________________________________Autoevaluación Institucional
OBSERVACION DIRECTA TENGA EN CUENTA Los errores sistemáticos pueden evitarse
utilizando varios observadores independientes.
Los observadores deben contar con una formación minuciosa del tema en estudio.
Deben tenerse en cuenta los posibles sesgos en la observación, por ejemplo, que la observación puedas en si misma influir sobre lo que esta siendo observado
________________________________________Autoevaluación Institucional
Evaluación Fotográfica Metodología ü Formar equipos de cinco o seis ü En primer lugar, cada equipo discute los lugares del centro donde
se siente bien y otros discuten donde no se sienten bien, y acuerdan fotografiar tres o cuatro lugares de cada categoría.
ü Los equipos deciden que detalles quieren fotografiar y toman las fotos.
ü Una vez reveladas las fotografías, cada equipo prepara un cartel con sus fotos de las dos categorías, redacta comentarios, explicando su elección
ü Se promueve la presentación plenaria ü Posible paso siguiente: los equipos se organizan con objeto de
cambiar aquellos que en su opinión es necesario cambiar y aquello que es posible cambiar.
________________________________________Autoevaluación Institucional
Para poner en práctica
Tomando como base el documento de Estándares e Indicadores de la Escuela 10; y los análisis de indicadores hechos en el desarrollo temático anterior:
à Defina cuál(es) indicador(es) se estarían evaluando por medio de este instrumento.
Realice una prueba de aplicación del instrumento en su Centro Escolar.
________________________________________Autoevaluación Institucional
ENCUESTA INFORMALES ES EL METODO MÁS ADECUADO: Para generar información cuantitativa acerca
de un grupo relativamente homogéneo; por ejemplo, sobre actitudes, opiniones y reacciones.
En los casos en que consumiría mucho tiempo y resultaría demasiado caro utilizar una muestra aleatoria representativa.
Para complementar la información cuantitativa existente.
________________________________________Autoevaluación Institucional
ENCUESTA INFORMALES
TENGA EN CUENTA La encuesta deberá elaborarse basándose
en estudios previos y en el conocimiento existente del tema en cuestión.
El numero de preguntas debería limitarse de diez a veinte.
El numero de encuestados deberá también limitarse entre treinta y cincuenta.
________________________________________Autoevaluación Institucional
ENCUESTA INFORMALES TENGA EN CUENTA Antes de llevar a cabo la encuesta el
cuestionario debe ser puesto a prueba con muestreo inferior.
Los entrevistadores deberán conocer bien el tema que se pretende estudiar, así como tener experiencia en la utilización de este método.
Los criterios de muestreo y cualesquiera limitaciones que resulten de la selección han de especificarse en el informe
________________________________________Autoevaluación Institucional
Escala de Percepción del centro como lugar social
Una forma de obtener información útil de la percepción que los alumno poseen sobre le centro como lugar social. se propone una escala de diez preguntas de valoración.
________________________________________Autoevaluación Institucional
Para poner en práctica
Tomando como base el documento de Estándares e Indicadores de la Escuela 10; y los análisis de indicadores hechos en el desarrollo temático anterior:
à Defina cuáles indicadores se estarían evaluando por medio de un cuestionario como el presentado como modelo.
.
________________________________________Autoevaluación Institucional
Para poner en práctica
à Redefina las áreas de análisis presentadas en el modelo, si fuera necesario.
à Establezca las preguntas guías de evaluación en cada una de las áreas
à Realice una prueba de aplicación del instrumento aquí construido, en su Centro Escolar.
________________________________________Autoevaluación Institucional
Top Related