Lisbeth Castillo González · ISO 9126 Standard, ISO 14598 Standard modelo educativo de evaluación...

35

Modelo educativo de evaluación multifactorial fundamentado en normas iso 9126 e iso 14598de materiales educativos basados en web

ARJÉ Revista de Postgrado FACE-UC. Vol. 7 Nº 12. Enero-Julio 2013 / 35-47

MODELO EDUCATIVO DE EVALUACIÓN MULTIFACTORIAL FUNDAMENTADO

EN NORMAS ISO 9126 E ISO 14598 DE MATERIALES EDUCATIVOS BASADOS EN WEB

Recibido: 25/03/2013 Aceptado: 29/04/2013

Lisbeth Castillo González

RESUMEN

El presente estudio enmarcado dentro de la modalidad de proyecto factible, tiene como fi n proponer un modelo de evaluación de materiales educativos bajo ambiente WEB basado en las normas de calidad ISO 9126 e ISO 14598. Para ello se hizo una revisión bibliográfi ca exhaustiva de los modelos ya existentes a manera de hacer el diagnostico de la necesidad de una propuesta con estas características que además incluyera el manejo del objeto de aprendizaje con una manipulación directa a través del uso de la realidad virtual. El modelo propuesto y validado a través de un instrumento, primero por expertos en la materia y luego aplicado a estudiantes cursantes de la asignatura Anatomía adscrita al pensum de estudios de la Facultad de Ciencias de la Salud de la Universidad de Carabobo a un material educativo web cuyo contenido está relacionado con dicha asignatura, está centrado tanto en el constructivismo como en la teoría educativa denominada Escritotecnopedagogia. La propuesta está estructurada en las siguientes fases: detección de necesidades, estudio de factibilidad, elaboración de la propuesta y validación. Por último, tomando en cuenta estos resultados se realizaron las conclusiones y recomendaciones pertinentes.

palabras clave: modelo de evaluación de materiales educativos basados en Web, Normas ISO 9126 e ISO 14598

36


ARJÉ Revista de Postgrado FACE-UC. Vol. 7 Nº 12. Junio-Diciembre 2009 20035-47

EDUCATIONAL EVALUATION MODEL FOUNDED IN ISO 9126 AND ISO 14598 STANDARDS OF THE EDUCATIONAL

MATERIALS BASED ON WEB

ABSTRACT

The following study is located through a feasible project and is aimed to propose an educational material evaluation model under a web environment based on ISO 9126 and ISO 14598 quality norms. With this in mind, an exhaustive bibliographical research has been made of already existing models in order to make the right diagnosis of the need of a proposal with those characteristics that otherwise included the management of the learning target with a direct manipulation of the use of virtual reality. The proposed model, validated accord the normative of an instrumental resource, first time by the qualified specialists otherwise academic staff from the Faculty of Anatomy, assume as a part of the Pensum of the School of Health Sciences from the University of Carabobo, whith the use of and Web Educational Material which is related directly whit the course, between the theory of the Constructivism and the Escritotecnopedagogia. The proposal is selfconstructed in phases: diagnostic, Feasibility Study, Proposes and Validation. Finally, bearing in mind results, the consideration of recommendations and conclusion were just pertinent.

Key words: project feasibility educational material evaluation web, ISO 9126 Standard, ISO 14598 Standard

modelo educativo de evaluación multifactorial fundamentado en normas ISo 9126 e ISo 14598 de materiales educativos basados en web

La problemática de la evaluación del software educativo, sin lugar a dudas, ha sido una de las más abordadas y sobre la que se puede encontrar diversas guías y escalas evaluativas, ya que va a depender de la concepción didáctica que sobre el medio se tenga.

En esta perspectiva, para llegar al uso del software educativo, antes debieron ocurrir los procesos de diseño, desarrollo y selección

37



del material; pero no se puede llegar a usar sin antes someterlo a un proceso de validación, cuando es un producto en desarrollo, o de evaluación si lo que se persigue es seleccionar materiales ya elaborados.

Dentro de este marco, el uso de las TIC en la educación debe partir de un incremento de las ventajas que ofrece el medio y una disminución de los riesgos. En primera instancia, incluir en la propia definición de objetivos y contenidos vinculados con las habilidades necesarias para el dominio de las TIC, permitir elegir diferentes alternativas y tiempos flexibles que permitan individualizar el aprendizaje, contrastar ideas, opiniones y colaboración entre estudiantes y profesores; debe garantizar el rol protagónico de los estudiantes y el docente asumir un papel de facilitador. La evaluación, por su parte, acentuaría su carácter regulador y autorregulador del aprendizaje sobre el uso social de acreditar, clasificar y predecir éxitos involucrados en los implícitos parámetros de la calidad.

Por tanto, los riesgos que se corren con el uso de las TIC, pueden incrementarse ante problemas en el diseño y funcionamiento de los materiales educativos, cuando no son los más apropiados para el contexto donde serán utilizados, o no se corresponden con las características de los estudiantes, como su conocimiento previo o motivación. Al respecto, Cabero y Duarte (1999) afirman que:

una evaluación lineal y exclusivamente centrada en aspectos técnicos o puramente estéticos, es baldía para la selección de materiales a aplicar en contextos educativos, siendo en consecuencia, más partidarios de una perspectiva de evaluación colaborativa entre las diferentes personas que intervienen en el proceso de diseño, producción y utilización del mismo…, en función de una concepción didáctica integradora. (p. 68)

Asimismo, algunos factores que se pueden extraer de la presente investigación sobre estos materiales y que pueden guiar su evaluación están dirigidos a tres aspectos fundamentales: problemática de la navegación e inconsistencia en el programa, principios para el diseño técnico-estético de los programas, y principios para su diseño didáctico. Dos de los problemas con

38



los que suele encontrarse el usuario que interacciona con estos medios son: desorientación y el desbordamiento cognitivo, como consecuencia directa de la diversidad de información a la que se ve algunas veces sometido el sujeto y del nivel de concentración que le exige para recuperar formación y recordar el lugar en el cual ésta se encontraba.

Ahora bien, las deficiencias que se han encontrado en el software educativo responden a diferentes niveles, que pueden estar relacionados con las potencialidades y características tecnológicas de los medios, o tal vez la relación con los conocimientos y habilidades de los usuarios, desde una perspectiva didáctica y metodológica, referidos a los contextos organizativos y formativos donde serán introducidos. Asimismo, los factores que inciden en el éxito de un producto no solo dependen del mismo, también dependerán del proceso de enseñanza-aprendizaje y de la interacción que se establezca con el contexto físico, tecnológico, psicológico, didáctico, organizativo y humano, es decir multifactorial.

Partiendo de la premisa que el objetivo de los materiales multimedia aplicados al terreno educativo no es deslumbrar, asombrar o divertir, sino enseñar e instruir, indican que se deben de respetar los siguientes principios básicos: simplicidad, coherencia, claridad y consideraciones estéticas como son el equilibrio, la armonía y la unidad, la utilización del espacio en blanco y el tiempo.

Es importante destacar la importancia de identificar el software por la forma como presenta los contenidos y las actividades, además por el modelo de aprendizaje que subyacen en el mismo, para que la evaluación se ajuste al tipo de software evaluado. La elección de un software dependerá de los objetivos, que orientó su diseño, el contenido, del contexto de los aprendices y de la metodología que se intenta utilizar. En este orden de ideas, existen dos tipos de evaluación: una que se realiza durante el proceso de diseño y desarrollo, con el fin de corregir y perfeccionar el programa; y la que se lleva a cabo durante la utilización real que los usuarios hacen del programa, para juzgar su eficiencia y los resultados que con él se obtienen.

Al respecto, Guerra (2003) plantea que a medida que el desarrollo de software ha ido evolucionando, también lo han hecho los

39



procesos evaluativos que lo acompañan. En sus inicios, cuando la preponderancia de los procesos de cálculo eran los que privaban, la evaluación se centraba en los aspectos de tipo tecnológico principalmente; luego al ir avanzando las potencialidades y ser el software, utilizado en entornos educativos, surge la necesidad de establecer un nuevo parámetro de evaluación acorde con el uso que se le estaba dando.

En síntesis la evaluación de software educativo, debe ser multidimensional y realizada de forma interna y externa para un análisis completo; lo que se propone a través de esta investigación es la consideración de las dimensiones pedagógicas, tecnológicas, semiótica-estética, teniendo como eje que permea estas dimensiones a la calidad del producto, ajustándose este último aspecto según las normas ya establecidas internacionalmente dentro del ámbito de la calidad como lo son las normas y estándares ISO en especial la ISO 9126 y la ISO 14598 relacionadas con uso y evaluación del producto, interfaz e interacción, procesos de interacción, proceso de desarrollo, principios ergonómicos y de accesibilidad. Estas dimensiones serán concretadas a través de indicadores que permitan medir efectivamente tales categorías primero de manera individual, luego de manera relacional y finalmente de manera holística-sistémica.

De igual manera, en el caso específico de esta investigación, el modelo evaluativo diseñado está dirigido a software educativos para usuarios del nivel educativo universitario considerando los aspectos anteriormente descritos, para ser validado por estudiantes de ese mismo nivel; escogiéndose para tal fin el software multimedia denominado “Laboratorio Virtual de Neuroanatomía” diseñado por la ingeniera Laybet Colmenares que sirve de apoyo a las clases presenciales de la asignatura Neuroanatomía, asignatura adscrita al pensum de estudio de la carrera de Medicina en la Facultad de Ciencias de la Salud de la Universidad de Carabobo.

objetivos de la investigación:

objetivo general:

Desarrollar un modelo educativo de evaluación multifactorial basado en las normas ISO 9126 e ISO 14598 de materiales

40



educativos basados en Web dirigido a usuarios de Educación Universitaria.

objetivos específicos:

1. Diagnosticar la necesidad de la construcción de un modelo multifactorial fundamentado en las normas ISO 9126 e ISO 14598 de evaluación de materiales educativos basados en Web que sea validado por usuarios de Educación Universitaria.

2. Determinar la factibilidad de diseñar un modelo educativo de evaluación multifactorial fundamentado en las normas ISO9126 e ISO 14598 de materiales educativos Web que sea validado por usuarios de Educación Universitaria.

3. Diseñar un modelo educativo de evaluación multifactorial basado en las normas ISO9126 e ISO 14598de materiales educativos Web que sea validado por usuarios de Educación Universitaria.

4. Validar el modelo educativo de evaluación multifactorial fundamentado en las normas ISO9126 e ISO 14598 por medio de la evaluación de usuarios de Educación Superior del material educativo basado en Web denominado “Laboratorio Virtual de Neuroanatomía”.

metodología

La investigación se ubica como de tipo proyectiva dentro de la modalidad de proyecto factible, cumpliéndose para ello la fase diagnostica, fase de estudio de factibilidad, fase de elaboración de la propuesta y la fase de validación. En cuanto a la población, está conformada por todos los estudiantes del primer año de la carrera de Medicina de la Facultad de Ciencias de la Salud de la Universidad de Carabobo quienes cursan la asignatura de Anatomía Humana durante el año escolar 2009, la cual está conformada por 345 estudiantes femeninas y 150 masculinos; según datos suministrados por el encargado del Departamento de Planificación y Estadística Central, economista Nicolás Matson.

41



Por su parte, Rodríguez y Pineda (2003) afirma que en estudios de tipo social, resulta representativo escoger como muestra un 30% de la población, criterio que fue considerado en la presente investigación; quedando la muestra de la siguiente manera: 104 estudiantes femeninas y 45 masculinos.

Se aplicó la técnica del análisis de contenido y una revisión a profundidad de los instrumentos propuesto y aplicados por expertos en el área para de esta manera cumplir con la fase diagnostica y concluir que existe la necesidad de proponer uno que este centrado en normativas de calidad ISO y que considere en la evaluación de todo el proceso de diseño y puesta en ejecución al usuario final, es decir al participante que hará uso de este tipo de materiales bien sea como apoyo o incluso como único recurso para nutrir sus conocimientos.

Asimismo, se demostró los beneficios de la propuesta y su factibilidad desde el punto de vista didáctico ya que el alumnado se convierte en evaluador de los materiales educativos WEB que le servirán de apoyo a su propio aprendizaje; desde el punto de vista psicológico apoyado por lo expresado en la escritotecnopedagogia y el constructivismo y desde el punto de vista tecnológico ya que brinda mayor participación al involucrar tecnología genera nuevas expectativas de aprendizaje, estimulando la motivación a evaluar dichos materiales desde la perspectiva de la calidad que exhibe en función del usuario; además desde el punto de vista económico no se genera mayores costos por lo que las investigadoras corren con los gastos.

Es importante destacar que, la generación de estas tres dimensiones expresadas en el modelo generó indicadores especificados también en el modelo y que en especial el correspondiente a la evaluación de materiales educativos se realizó considerando el contenido, diseño, funcionalidad, fiabilidad, aspectos técnicos, portabilidad, mantenibilidad y usabilidad haciendo referencia a las normas ISO en estudio. Para la fase de validación del modelo, se diseñó un cuestionario que consto de 41 preguntas de respuestas cerradas con opciones dicotómicas; siendo validado desde el punto de vista del contenido y según el juicio de expertos tanto en el área tecnológica, educativa como de investigación. En cuanto a la fase de diseño, se presenta a continuación el modelo propuesto:

42



Figura No. 1. Modelo educativo de evaluación multifactorial fundamentado en normas ISO 9126 e ISO 14598 de materiales educativos basados en Web

Para asegurar el cálculo de la confiabilidad del modelo propuesto y dada la naturaleza de las opciones de respuestas del mismo (dicotómicas) el estadístico más apropiado es de Kuder-Richardson cuya fórmula es la siguiente:

r= ( (n/n-1) (Vt - ∑ pq) / Vt )

Se procedió a la aplicación del instrumento a la prueba piloto constituida por 10 estudiantes aleatorios cursantes de la asignatura Anatomía, y que no pertenecieron a la muestra de estudio; arrojando un coeficiente de confiabilidad de 0,88 considerada por Palella y Martins (2003) como una confiabilidad muy alta.

43



Resultados

Tabla No. 1 Materiales educativos web

Dimensión: Objeto de Aprendizaje

Indicadores: Pertinente, Coherente, Relevante

Valoración Item1 Item2 Ítem 3 Total %Si 18 13 12 43 62,32%

No 5 10 11 26 37,68%Total 23 23 23 69 100

Fuente: Autora, 2013

Gráfico No. 1. Objeto de Aprendizaje


En lo que respecta a la dimensión objeto de aprendizaje del material educativo web evaluado, se puede afirmar que existe pertinencia, coherencia y relevancia del contenido presentado con relación al objetivo planificado por el docente de la asignatura; ya que el 62 por ciento de los evaluadores del mismo así lo certifican.

44



Tabla No. 2 Usuario de Educación Superior

Dimensión: Evaluación de materiales educativos web, tomando en cuenta las Normas ISO 9126 y la ISO 14598

Indicadores: contenido, diseño, funcionalidad, fiabilidad, aspectos técnicos, portabilidad, mantenibilidad, usabilidad.

Valo

raci

ón

Item

Cont

enid

o

Item

Cont

enid

o

Item

Dis

eño

Item

Dis

eño

Item

Func

iona

lidad

Item

Fiab

ilida

d

Item

Técn

ico

Item

Port

abili

dad

Item

Man

teni

bilid

ad

Item

Usa

bilid

ad

Tota

l

%

Si 14 19 18 20 18 20 18 4 10 19 160 69,56

No 9 4 5 3 5 3 5 19 13 4 70 30,44

Total 23 23 23 23 23 23 23 23 23 23 230 100


Figura No. 2. Evaluación de Materiales Educativos WEB


De acuerdo a los evaluadores del material educativo relacionado con la asignatura, existen fortalezas destacadas en lo relacionado con la usabilidad del material, amigabilidad que le ofrece al usuario, apoyo confiable en el momento de enriquecer su estructura cognitiva en ese andamiaje de saberes como lo diría Gross (2000), sin embargo

45



cabe la duda si este material funcionaria en optimas condiciones en otra plataforma distinta a la sugerida por el ámbito educativo, ya que o bien los evaluadores no lo han usado en otro ambiente o lo han usado o no ha sido satisfactorio su desempeño.

Conclusiones y recomendaciones

Una vez diseñada y validada la propuesta a través de la aplicación del modelo por parte de usuarios de educación superior se puede concluir que:

La incorporación de las Tecnologías de la Información y la Comunicación (TIC) a educación ofrece distintas dimensiones al proceso instruccional. En particular, el uso del software educativo en el proceso de enseñanza-aprendizaje permite mejorar en el estudiante las destrezas cognitivas. Este tipo de software fomenta el análisis de problemas, facilita el trabajo en grupo, provee soporte en actividades docentes; en el sentido más amplio, mejora las habilidades del pensamiento y la resolución de problemas. Ahora bien, para lograr todo esto, el software debe ser de calidad. Cuando se hace referencia a calidad de software educativo, se requiere un producto que satisfaga tanto las expectativas de los docentes como de los alumnos, a un menor costo, libre de errores y cumpliendo con ciertas especificaciones instruccionales y tecnológicas. Esta necesidad conlleva a generar un modelo para medir la calidad del software como producto incluyendo a objetos de aprendizaje con manipulación directa haciendo uso de la realidad virtual.

En atención a lo anterior, se desglosaran las conclusiones, considerado lo logrado en cada una de los objetivos específicos que se plantearon en esta investigación:

1) En cuanto al diagnóstico referido a la necesidad de de la construcción de un modelo multifactorial sistémico fundamentado en las normas ISO 9126 e ISO 14598 de evaluación de materiales educativos basados en Web que sea validado por usuarios de Educación Superior; éste se sustento en una revisión bibliográfica y posterior análisis de la misma. Uno de los que pretende ser el mayor aporte de este trabajo, es la organización de los niveles de complejidad con los que se enfrentan los evaluadores de software educativos multimedia, gracias a la combinación de elementos.

46



Sin embargo, hay un actor clave que no se puede dejar de lado y que junto al docente son el centro del proceso de aprendizaje: el alumno-participante. Por tanto el tambien debe formar parte de ese proceso de evaluacion de los materiales que va utilzar bien sea desde la virtualidad o como apoyo o estrategia presencial sobre todo tomando en cuenta que el material en etudio presenta la particularidad de tener la ventaja de la manipulacion directa del objeto de aprendizaje usando realidad virtual, que paradojicamente simula excelentemente la realidad de un estudio anatomico cerebral. Es precisamente esta particularidad, junto con los parametros normados por la ISO lo que arroja la necesidad de un modelo de evaluacion como el propuesto; ya que no existe uno ya diseñado que cumpla con ambas caracteristicas.

2) Con relacion al objetivo referente al estudio de factibilidad, se puede afirmar que es totalmente viable desde el punto de vista didactico, tecnologico y sobretodo de disposicion de la parte humana que se siente reconocido para formar parte de este proceso de evaluacion: los alumnos participantes.

3) En cuanto al diseño del modelo propuesto, éste cubrió con las expectativas planeadas, considerando las dimensiones e indicadores correspondientes a las variables en estudio, siendo validado tanto por expertos como su aplicación real por parte de los estudiantes del 1 año de Medicina de la asignatura Anatomía; con lo que quedo alcanzado el objetivo correspondiente a la validación.

Referencias

Cabero, J., y Duarte, A., (1999).Evaluación de medios y materiales en soporte multimedia. Revista de Medios y Educación Píxel-Bit, 13. [En línea]. Disponible: http://tecnologiaedu.us.es/revistaslibros/31.html. (Consulta 2013, marzo 01).

Gros, B. (2000). Del software educativo a educar con software. Quaderns Digital. Disponible: http://www.quadernsdigitals.net/articuloquaderns.asp?IdArticle=3743 (Consulta: 2013, febrero 18).

47



Guerra, V. (2003). Modelo de evaluación de software educativo de 4 dimensiones. Ponencia presentada en EDUTEC 2003. Caracas. Venezuela

Palella, S y Martins H. (2003). Metodología de la investigación cuantitativa. Caracas, Venezuela: Once.

Rodríguez A.y Pineda J. (2001). La Experiencia de investigar: Recomendaciones precisas para realizar una investigación y no morir en el intento. Venezuela: Predios.

LISbEth CAStILLo GoNzáLEz: Licenciada en Educación mención Educación Comercial (U.C).

Especialista en Tecnología de la Computación en Educación (U.C). Magíster en Investigación Educativa

(U.C). Profesora Agregada de Pre y Postgrado en la Facultad de Ciencias de la Educación (U.C). Participante

del programa Doctoral en Educación de la Universidad de Carabobo. [email protected]

Lisbeth Castillo González · ISO 9126 Standard, ISO 14598 Standard modelo educativo de evaluación...

Documents

Transcript of Lisbeth Castillo González · ISO 9126 Standard, ISO 14598 Standard modelo educativo de evaluación...