Interactive training materials

of 53 /53
Programa Graduado Sistemas de Instrucción y Tecnología Educativa Evaluación Formativa de Materiales Interactivos de Adiestramiento Carlos Muñiz / Elvin O. Candelaria / Santia E. Velázquez Vera Dra. Rosa Ojeda - EDU 618

Embed Size (px)

description

Presentación basada en el capítulo 7 del libro Formative Evaluation for Educational Technologies de Barbara N. Flagg. Se utiliza el caso de SANDY Corporation quienes, desde 1984,se dedican al adiestramiento profesional y desarrollaron un sistema de evaluación de 13 fases.

Transcript of Interactive training materials

  • 1.
    • Programa Graduado Sistemas de Instruccin y Tecnologa Educativa
  • Evaluacin Formativa de
  • Materiales Interactivos de Adiestramiento
  • Carlos Muiz / Elvin O. Candelaria / Santia E. Velzquez Vera
  • Dra. Rosa Ojeda - EDU 618

2. Introduccin

  • Presentacin basada en el captulo 7 del libroFormative Evaluation for Educational Technologiesde Barbara N. Flagg.
  • Caso: Interactive Training Materials

3. 4. 5. Por qu SANDY Corporation?

  • Compaa dedicada al adiestramiento de personal y a las comunicaciones desde 1984.
  • Sus equipos han encontrado mtodos de evaluacin efectivos para llevarse a cabo durante el proceso de desarrollo.
  • Ha desarrollado programas interactivos para las 100 compaas de mayor prestigio segn la revista FORTUNE.

6. Para hacer el escogido de estas compaas, la revista FORTUNE se une a Great place to work Institute quienes llevan a cabo la encuesta empresarial ms grande e importante. Esta encuesta refleja la voz de los empleados mediante 57 preguntas.Por ejemplo, el ao pasado se contactaron 1,500 empresas y slo 407 respondieron.De stas, GOOGLE obtuvo el primer lugar. 7. Videodisco interactivo Proceso de desarrollo 8. Proceso de desarrollo

  • Estudiar el proceso antes de discutir las tcnicas de evaluacin.
  • Recuerdar que el videodisco es la integracin del uso de la computadora, audio y video.
  • Este proceso requiere planificacin, anlisis, creatividad y ejecucin del diseo.
  • Para que sea efectivo, el tiempo debe ser apropiado.
  • Tener muy claro el proceso de las 13 fases.

9. Lo que explicel cliente Lo que se entendi Cmo el experto lo dise Lo que hizo el programador Lo que describi el consultor Cmo se document Lo que se cre Lo que pag el cliente Lo que entendi la audiencia Lo que se necesitaba en realidad 10. Qu se espera? 11. Definir las metas, contexto y especificaciones tcnicas Disear lo que se pide Nuevo contenido y necesidades revisadas Diseo e implementacin Diseo revisado Producto efectivo y fcil de usar Conceptos y visualizacin Prototipo Evaluacin 12. Conozca las necesidades Storyboard o prototipo Pruebas guiadas Lista de cotejo oflujograma Presentacin del producto final Uso efectivo Resumen 1 2 3 4 5 13. Las 13 fases delproceso de desarrollo 14. Llevar a cabo el lanzamiento del proyecto Llevar a cabo el anlisis Establezaca los criterios de evaluacin Prepare el plan de implementacin Disee la aplicacin Enlace los elementos computadorizados Produzca el video Mezcle y realice pruebas Valide el programa y haga revisiones finales Manufactura y copias Implementacin y presentacin Evale Mantenimiento 15.

  • Todos los participantes del proyecto participan en reunin para la aprobacin final de la oferta.
  • En sta, se inician las metas del programas a ejecutar, discusin del proceso de desarrollo, asignacin y clarificacin de roles y responsabilidades, as como, el horario programado.
  • Exige trabajo colaborativo.

16.

  • Se establecen los requisitos del programa.
  • Se definen y organizan las metas, estrategias, y contenido del programa.
  • Se conducen las entrevistas e investigaciones a determinar: -Necesidades de la audiencia - Perfiles de la audiencia - Tareas y secuencia de tarea - Investigaciones de artculos,yotras asuntos de ambientes deaprendizaje .

17.

  • Se identifican las metas en su totalidad.
  • Los patrones de pruebas se establecen para medir la efectividad del proyecto.
  • Se estudia el costo por hora, eficacia y la aceptacin del estudiante.

18.

  • Documentacin de la audiencia, las estrategias, y las herramientas a entregar.
  • Se dirige hacia la preparacin del inicio del proyecto.

19.

  • Se definen los objetivos medibles y el contenido en cada segmento.
  • Se establece un plan de prueba del programa.
  • Se utilizan elementos discretos de los medios, incluyendo el guin, video y audio, actividades computarizadas, y la estructura del programa.
  • Finalmente, se inicia la integracin de los componentes en un storyboard o narrativo, lo que dar pie a la toma de decisiones.

20. Fase de Produccin

  • Luego del proceso tanto
  • evaluativo como narrativo,
  • los componentes de los
  • medios computarizados se
  • mezclan para crear las
  • primeras imgenes. Estas
  • primeras producciones se
  • integran para seguir
  • cualquier dato de la
  • informacin requerida.

21. Produccin de Video

  • Aqu se aplica todo el anlisis y desarrollo del dise0
  • Incluye todas las fases de produccin.
  • Planificacin de la geografa del video (minimiza tiempo de bsqueda)
  • Computadora/Video/Audio

22. Unin yPrueba

  • Los componentes de la
    • computadora y del videodisco son mezclados, verificando la secuencia y ramificacin.
    • El texto se conduce segn el plan de prueba desarrollado durante la fase de diseo y tambin incluye corregir las imgenes. Se verifica la logstica del programa.

23. Validacin y Revisin Final Analista Usuarios Representantes Revisionesen Resultados + - + 24. Manufactura y Copias

  • Videodiscos
  • Disco de programacin
  • Materiales del usuario quese pondrn en prctica.
  • Preparar las guas de la documentacin del programa.

25. Implementacin y Entrega

  • Se le presenta el programa a los usuarios de la audiencia.
  • Lo ponen en prctica, segn desarrollado en la fase 4.

26. Lleve a cabo la evaluacin

  • Se mide el logro de las metas totales del proyecto, usando los patrones de pruebas fijadas en la evaluacin de la fase 3.
  • Anlisis de los informes generados por los componentes del mantenimiento de registros del programa.
  • La coleccin de datos de las tcnicas, tales como;
  • Exmenes
  • Entrevistas
  • Sesiones del grupo

27. Mantenimiento del Programa

  • Depuracin, revisin.
  • Actualizaciones apropiadas para el lanzamiento del programa a los usuarios finales.

28. Evaluacin formativa dentro del proceso de desarrollo 29. Fases Avalo de necesidades Evaluacin formativa de la preproduccin Evaluacinformativa de la produccin 30. Avalo de necesidades Aqu el programa toma forma de acuerdo al bosquejo.Se organiza por temas y subtemas.

  • Comprensin:
  • Qu informacin es extraa?
  • Qu falta?
  • Tiene secuencia?
  • Hay opciones para el usuario?
  • Interactividad:
  • El usuario se siente cmodo?
  • El programa ejerce control?
  • El usuario puede aumentar el nivel de dificultad?

31. Grupo Focal 32. Funciones del grupo

  • Reflejar sus paricularidades acerca del producto.
  • Organizar los tpicos en orden de importancia.
  • Aadir tpicos si era necesario.

Resultado: Sugirieron que el material presentado se colocara completo para que la parte de adiestramento en mercadeo incorporara todos los tpicos as como casos hipotticos; y que una demostracin se colocara separada como apoyo. 33. Funciones del grupo

  • Interactividad: (sugerencias)
  • No solamente flexible, sino activo.
  • El mismo material para adiestramiento, demostraciones y audiencia general.
  • Debe incluir diversos audios dirigidos a cada audiencia.
  • El usuario debe tener la opcin de encender y apagar el audio.

34. Evaluacin formativa de la preproduccin 35. Primer prototipo

  • Durante la fase de diseo se hace un examen detallado del contenido y visuales a travs de un storyboard o narrativo.
  • Este narrativo debe presentar lo que el aprendiz experimentar de manera secuencial.
  • Puede incluir:

Texto Grficas Audio 36. Qu se evala?

  • Comprensin:
  • El mtodo de presentacin se entiende y es consistente?
  • El usuario es capaz de seguir la secuencia de un segmento al otro?
  • Interactividad:
  • Pueden entender cmo moverse hacia dnde desean?
  • El nivel de control y movimiento, es poco o demasiado?
  • Apariencia:
  • Es atractivo a la audiencia?
  • Logra comprometerse la audiencia?
  • La mezcla de elementos tecnolgicos,es variada?

37. Metodologa:Atencin individual One-on-One walk-through Evaluador Evaluador Evaluador Evaluador 38. Tono de voz

  • Tiene que ser evaluado.
  • Puede afectar la comprensin y la apariencia.

39. Narrativo Final 40. Ejemplos Pueden variar de acuerdo al proyecto, sistema de autor, lenguaje o programa. 41. Debe incluir...

  • Texto
  • Visuales
  • Descripcin del movimiento
  • Interactividad
  • Enlaces

42. Qu se evala?

  • Comprensin:
  • La informacin y el contenido estn claros y fcil de recordar?
  • Se cumplen los objetivos?
  • Las instrucciones y los ejercicios estn claros?
  • Interactividad:
  • Los participantes son capaces de moverse a travs del programa?
  • Cmo responden al nivel de interactividad?
  • Apariencia:
  • Los usuarios disfrutan del programa?
  • Se quedan interesados?
  • Encuentran retos?

43. Qu hacer?

  • Utilizar nuevamente la metodologa 1-1.
  • Actividades computadorizadas ms completas.
  • El evaluador provee los enlaces no includos.
  • Los participantes deben hacer selecciones y tomar decisiones en cada ramificacin.
  • El evaluador describe con ms detalles el lugar o ambiente y los personajes.
  • El usuario trabaja por una hora y pasa dos con el evaluador.

44. Interactividad VS Aunque no hubo una interactividad real a travs de las opciones de las ramificaciones en el narrativo, pudieron presentar insumos para el diseo final. 45. Quejas frecuentes

  • Instrucciones no precisas .
  • Fraseo o lxico equivocado.
  • Personajes o casos no reales.
  • Idioma o sincrona de voz.
  • Secuencia
  • Interactividad por ser en papel.
  • No permite regresar a temas previos.
  • Falta deorejitaso hints.

46. Lo que gust

  • Estructura
  • Segmento de preguntas
  • Retroalimentacin inmediata.
  • Valoracin, sentirse parte del proceso.

47. 48. Verificacin del disco

  • Esta versin debe ser en un disco barato.
  • Debe pasar por dos evaluaciones formativas:
    • En el lugar de desarrollo
    • En el lugar del cliente.

49. Qu se evala?

  • Comprensin:
  • El programa es claro, definido as como sus ejercicios, estructura y sus niveles?
  • Les interesa salir a probar las nuevas tcnicas?
  • Interactividad:
  • Los participantes son capaces de interactuar a travs del programa?
  • Cumple con las necesidades?
  • Aprende el usuario?
  • Apariencia:
  • Los usuarios disfrutan del programa?
  • Mantienen el inters?
  • El tono de voz es adecuado?

50. Mtodos de evaluacin

  • Recoleccin de datos
  • Observacin
    • Si se estancan
    • Si omiten partes o ejercicios.
  • Cuestionarios
  • Mapa de progreso
  • Anotaciones
  • Otros

51. Resultados segn categoras 8 personas / 1h30 min con el programa / 30 mins con evaluador 52. Categoras

  • Tiempo y Dinero
    • Instrucciones ms detalladas
    • Diferentes formatos
    • referentes a las preguntas
  • Interactividad de videos
  • Toque de pantalla

53. Conclusin

  • Asuntos de comprensin, instrucciones o apariencia pueden ser evaluados en papel; pero la evaluacin a la parte interactiva, cuesta.
  • Es importante recopilar informacin durante el desarrollo. Sin embargo, la retroalimentacin y patrones encontrados tienen igual relevancia.
  • La evaluacin formativa en una herramienta importantsima para obtener el potencial deseado. No obstante, las dificultades son primordiales para esa perfeccin.