EVALUACIN DEL ALUMNO MEDIANTE NUEVAS TCNICAS EN PRUEBAS OBJETIVAS (TIPO TEST)

Ramn Rubio Garca, Ramn Gallego Santos, Javier Surez Quirs, Jose Eugenio Cueto Gonzlez

Escuela Universitaria de Ingenieros Tcnicos Industriales de Gijn rrubio@correo.uniovi.es

1 RESUMEN La evaluacin de los alumnos es el tema que ms preocupa a los alumnos a lo largo de sus estudios universitarios: cmo se realiza, si se hace con justicia, si hay que memorizar, si hay que razonar...en resumen, cmo quiere el profesor que se le demuestre que el alumno ha aprendido. Esta preocupacin nos lleva a investigar nuevos mtodos de evaluacin que alcancen cotas ms altas en los aspectos antes mencionados y creemos que este foro es el ms indicado para fomentar esa investigacin. El paradigma de la evaluacin es la evaluacin contnua instantnea, es decir, que en cada momento sepamos qu es lo que sabe un alumno. Este objetivo inabordable se puede acercar a la realidad mediante evaluacin-portfolio, una recopilacin de todo el trabajo que realiza el alumno y sus evaluaciones en distintas pruebas (entre ellas la evaluacin objetiva o test). En esta ponencia presentamos las nuevas tcnicas que se pueden utilizar en las pruebas objetivas:

Tcnicas multimedia: Utilizacin de tests animados desarrollados con Macromedia Flash.

Web: Herramienta para profesores con el fin de crear webs dinmicas que permitan crear y corregir tests.

Evaluacin contnua: Metodologa de evaluacin diaria en el aula mediante tests de comprensin.

2 INTRODUCCIN A LA SITUACIN ACTUAL DE LA EVALUACIN Est claro que algo est pasando en los ltimos aos en la educacin: los profesores se desesperan con la llegada de alumnos que tienen una base de conocimientos deficiente para cursar las asignaturas, los alumnos apenas tienen tiempo para estudiar debido a las distribuciones horarias originadas por los nuevos planes de estudios y la consecuencia es terrible: absentismo en los examenes, miedo al fracaso, pasotismo, exagerada prolongacin de los estudios... Ni alumnos ni profesores son los causantes de esta situacin; pero s est es sus manos intentar solucionarlo. Los alumnos, aceptando los cambios que se han producido en la Universidad e involucrndose en la formacin acadmica que estn recibiendo y por otro lado los profesores deben comprender al alumnado y poner medios que facilite el aprendizaje directo del alumno. En los ltimos aos se habla de la revolucin de la calidad de la enseanza y se

nos llena la boca de nuevos proyectos y reestructuraciones, de nuevas titulaciones y enseanzas virtuales....y tememos que se est olvidando al alumno en todo este proceso. Una de las posibles soluciones por cuenta de los profesores es la cambiar la estructura de la evaluacin. Hoy da hablar de evaluacin no es sinnimo de examen. Son muchos los docentes que se revelan ante el hecho de que evaluacin signifique examen final y buscan nuevas formas de revisar los conocimientos de sus alumnos. Sabemos que un elemento clave en el diseo de la evaluacin es la seleccin y elaboracin de los procedimientos e instrumentos de recogida de la informacin que permitan porteriormente, tomar las mejores decisiones sobre el plan curricular, la interaccin didctica y los propios alumnos. Las diferentes evaluaciones se pueden catalogar en dos clasificaciones:

Clasificacin Temporal: En funcin del momento en que se toma. Clasificacin Metodolgica: En funcin del mtodo empleado.

Escudero (2001) describe los procedimientos de evaluacin ms habituales segn la clasificacin metodolgica:

La observacin directa del profesor es un procedimiento fundamental para la evaluacin en todos los dominios educativos. Es probablemente el elemento de modulacin ms importante a la hora de valorar la informacin recogida por otros procedimientos. La observacin es til, sobre todo, para la evaluacin tipo criterio, calificaciones, etc. No tiene aplicabilidad para sondeos iniciales rpidos. Respecto a la medida, tiene problemas de fiabilidad, aunque sta pierde relevancia si se utiliza desde un punto de vista general. Si se administra bien, su eficacia es muy alta.

Los procedimientos orales, exmenes, entrevistas, interrogatorios, defensa, presentacin de temas son en conjunto muy poderosos para valorar todo tipo de destrezas. Ahora bien, su utilidad real queda disminuida porque su nivel de eficiencia potencial no es alto y aunque nos valgan para ciertas situaciones, generalizar este tipo de evaluacin puede ser problemtico.

Los ejercicios escritos tipo tema tienen una potencialidad evaluadora muy escasa, puesto que son costosos de aplicacin, de escasa validez de contenido, de fiabilidad no muy alta y adems se pueden acabar convirtiendo en un simple ejercicio de memoria.

Los trabajos escritos pueden considerarse una variedad de los anteriores. Procedimiento muy interesante, aunque costoso, lo que le da carcter de complementario. En muchos casos se adapta mejor a la realizacin en grupo que a la individual.

Las preguntas cortas, miniensayos, problemas tericos son de gran utilidad en algunas disciplinas y su uso es bastante habitual. Sus caractersticas mtricas, en el caso de estar bien diseadas, son relativamente buenas porque pueden mejorar bastante la validez del contenido y la fiabilidad de los ensayos largos. Son muy tiles para validar la comprensin y la aplicacin, aunque lo son en menor medida para

evaluar operaciones superiores tipo anlisis o sntesis. Su nivel terico de eficiencia es bastante alto.

Los problemas y ejercicios de aplicacin son un elemento fundamental en cualquier proceso de evaluacin en muchas disciplinas , sobre todo en la evaluacin de criterio. Su fiabilidad terica es alta y su validez de contenido puede ser relativamente alta.

Pruebas y cuestionarios de tipo cerrado son otros elementos fundamentales para la evaluacin, aunque hay que diferenciar entre los distintos tipos existentes, puesto que aunque la validez de contenido es tericamente muy alta no ocurre lo mismo con la fiabilidad. Existe el peligro de quedarse en aspectos puramente memorsticos; sin embargo su mayor potencial se centra en la evaluacin de la comprension de trminos, conceptos y principios. Mientras las cuestiones de doble alternativa tienen problemas de fiabilidad, las cuestiones de eleccin mltiple son de gran utilidad para todo tipo de evaluacin si se centran en el nivel de comprensin.

La evaluacin portfolio es la recogida de muestras de trabajo de los estudiantes como reprenstacin de su rendimiento sobre un eterminado objetivo educacional.

Tabla 1 El MEC (2003) informa a los alumnos de los distintos tipos de evaluacin: ventajas, inconvenientes y requisitos.

Ventajas Inconvenientes Requisitos

Oral

Permiten al examinador aclarar, repetir, ayudar

Sirven de incentivo al examinado por sentirse observado con atencin.

Son poco frecuentes.

Poco tiempo para pensar la respuesta. Mayor grado de ansiedad.

Buena fluidez verbal.

Buena capacidad de reaccin.

Capacidad de organizacin rpida.

Dominio seguro de la materia de examen.

Desarrollo

Tcnica familiar.

Sensacin de tranquilidad y seguridad

Confundir el enfoque del tema.

Distribucin del tiempo.

Redaccin.

Buena distribucin del tiempo.

Capacidad para relacionar distintos contenidos.

Buena redaccin.

Aprendizaje general de la materia.

Preguntas Cortas

Tcnica familiar.

Sensacin de tranquilidad y seguridad. Cuestiones similares a actividades de clase.

Confundir el enfoque de las preguntas.

Sintetizar bien en el espacio disponible.

Redaccin.

Capacidad de sntesis y de relacionar conceptos.

Memoria

Buena redaccin .

Dominio de la materia.

Pruebas Objetivas

Correccin objetiva.

Facilitan el recuerdo.

Trabajar deprisa.

Penalizan los errores.

Capacidad para trabajar rpidamente.

Leer y comprender toda la materia.

Fig. 1 Ejemplo de utilizacin de pruebas objetivas en aplicaciones multimedia. El programa es GIcad y la aplicacin de la que forma parte AIMEC-DT

En cuanto a la clasificacin temporal, bsicamente existen dos tipos de evaluacin: contnua o puntual. Continua: El paradigma de este tipo de evaluacin sera la evaluacin

instantnea de los conocimientos de los alumnos. La evaluacin portfolio es el ejemplo ms significativo de este tipo; pues rene el trabajo realizado pro el alumno durante el periodo lectivo de la asignatura.

Puntual: Sigue siendo el proceso ms utilizado en la enseanza y consiste en la exposicin de conocimientos por parte de lso alumnos normalmente mediante un examen escrito en el que se pueden reunir pruebas objetivas, cuestiones de desarrollo y problemas.

3 LAS PRUEBAS OBJETIVAS EN LA EVALUACIN Se ha comprobado que la utilizacin de pruebas objetivas para la evaluacin, sobre todo en el caso de grandes grupos, es muy adecuada y aunque una buena preparacin de estas es muy compleja, permiten una "fcil" correccin siendo sta una ventaja entre otras como pueden ser la posibilidad de evaluar sistemticamente niveles superiores de actividad mental o la objetividad de la correccin. La introduccin del ordenador ha dotado de un instrumento rpido y preciso con un amplio campo de posibilidades a las pruebas objetivas que se materializan en numerosos proyectos de creacin de aplicaciones para PC y para web que permiten la creacin de tests y su correccin.

4 LAS PRUEBAS OBJETIVAS Y LAS NUEVAS TECNOLOGAS A continuacin presentamos dos ejemplos desarrollados en la Escuela Universitaria de Ingenieros Tcnicos Industriales de Gijn que pretenden facilitar el uso de las pruebas objetivas a travs de Internet. El primer ejemplo utiliza tecnologas PHP de programacin que nos permiten mantener una gestin de asignaturas, temas e incluso de manejo de pruebas. El segundo ejemplo es una aplicacin prctica de las tecnologas FLASH para la web. Veremos un estilo de test nada convencional que ha tenido una enorme aceptacin entre los alumnos. 4.1 La tecnologa PHP PHP es un lenguaje de programacin el cual se ejecuta en los servidores web y que te permite crear contenido dinmico en tus pginas HTML.

Dispone de mltiples herramientas que te permiten acceder a bases de datos de forma sencilla, por lo que es ideal para crear tus aplicaciones para Internet. Es multiplataforma, funciona tanto para Unix (con Apache) como para Windows (con Microsoft Internet Information Server) de forma que el cdigo que se haya creado para una de ellas no tiene porqu modificarse al pasar a la otra.

Fig. 2 Pgina web de acceso a phpTest alojada en un servidor propio Linux. El

acceso distingue profesores de alumnos. La sintaxis que utiliza, la toma de otros lenguajes muy extendidos como C y Perl, por lo que si ests familiarizado con estos, con PHP te encontrars como en casa.

Fig. 3 Pgina web de phpTest. Resolucin de un test del tema de Tornillos de

la asignatura Dibujo Industrial.

4.2 La tecnologa FLASH Flash es una tecnologa desarrollada por Macromedia que permite crear y reproducir contenido web basado en vectores. Gracias a esta caracterstica, el texto puede utilizar cualquier tipo de fuente y determinadas animaciones se reproducen en menos tiempo del habitual. Para reproducir estas ventajas necesita el reproductor Macromedia Flash Player. Si no est instalado en su sistema puede descargarlo desde el sitio de Macromedia [http://www.macromedia.com]. El reproductor es gratuito y le permite reproducir miles de pginas que ya utilizan esta tecnologa. El 90% de los usuarios tienen alguna versin de Flash instalada. Se ha utilizado esta tecnologa para crear una conjunto de tres test acerca de temas relacionados con la Expresin Grfica: Sistema Didrico, Geometra y CAD.

Fig. 4 Pantalla inicial del Gran Test de Expresin Grfica

Flash nos permite dar al test una apariencia ms atractiva para los alumnos y sobre todo, aprovechando el servicio ofrecido por la web diseada para albergar toda la informacin docente del rea en la EUITIG [http://aegi.euitig.uniovi.es], los alumnos pueden realizar el test tantas veces como deseen a travs de Internet. Una vez terminado el test, el programa le muestra al alumno el nmero de errores y aciertos durante la prueba. No le muestra en cul se ha equivocado porque pensamos que as puede repetir el test con el fin de que sea l mismo quien descubra los errores.

Fig. 5 Interfaz de una pregunta del Gran Test de Expresin Grfica

Gracias a su sencilla programacin, es posible aadir nuevas preguntas de test de un modo sencillo y rpido lo que facilita la expansin y diversidad de las preguntas.

5 LAS PRUEBAS OBJETIVAS EN CLASES MAGISTRALES Uno de los mayores problemas a los que nos enfrentamos los profesores ao a ao es la pasividad (incluso ausencia) de un tanto por ciento muy elevado de nuestros alumnos durante las clases tericas. Es importante enfrentarse a este problema e intentar proponer nuevas soluciones, aunque stas resten tiempo de docencia. Citando a J.M. lvarez (2001): El camino de la innovacin y de la renovacin que lleve a otras formas de evaluacin consiste en convertir la clase, el tiempo, en tiempo y lugar de aprendizaje. Restar tiempo de clase, distrae la atencin que merece la pena: aprender, descubrir, contrastar, reflexionar, recrear, dialogar, disfrutar, comprender, enriquecerse con los bienes culturales. El tiempo de clase convertido en tiempo de aprendizaje facilitado, ayudado, orientado por la enseanza debe convertirse en una oportunidad simultnea de evaluacin. Solo por esta va podremos hacer del proceso enseanza y de aprendizaje un nico proceso interactivo y solidario de colaboracin. La propuesta que aqu exponemos es la utilizacin de ejercicios tipo test durante las lecciones tericas de las asignaturas del siguiente modo: Antes de comenzar la explicacin, se entrega a los alumnos un breve cuestionario que recoja en preguntas concisas y directas lo ms importante que se vaya a explicar durante la clase. Despus de leerse las cuestiones, los alumnos podrn ir respondindolas segn el discurrir de la clase terica. Finalmente, el profesor recoger y analizar estas pruebas. Qu se pretende con estas pruebas de evaluacin? 1. Mantener la atencin de los alumnos durante una clase magistral.

2. Obtener una primera evaluacin de la atencin prestada. Indudablemente un alumno ante esta tctica educativa, cambia su rol de alumno pasivo por uno ms activo y atento buscando la respuesta a las preguntas planteadas. Este test de conocimientos debe ser evaluativo con el fin de motivar an ms al alumno y para dar al docente una idea de atencin durante sus clases. No se puede generalizar este mtodo a todas las clases magistrales; pues muchas de ellas requieren de toma de apuntes o resolucin de ejercicios, pero s se pueden acoplar, durante el curso acadmico, determinadas sesiones donde prime la atencin sobre los apuntes.

Fig. 6 Ejemplo de test presencial durante la clase de teora. Preguntas

correspondientes a un tema de ROSCAS de la asignatura de Dibujo Industrial.

6 CONCLUSIONES Las pruebas objetivas son una de las metodologas de evaluacin de alumnos ms dinmicas; pues son fcilmente adaptables por parte del profesor a los conceptos impartidos y tienen una validez bastante aceptable de los conocimientos de los alumnos. En la actualidad, la mayora de este tipo de evaluaciones viene ligada a una prueba final una vez impartida la materia. Por el contrario, presentamos una metodologa que pretende incluir a las pruebas objetivas en la evaluacin continua y diaria de un alumno y que a su vez le sirva como un apoyo didctico diario. Las Nuevas Tecnologas nos permiten la creacin y resolucin de tests a travs de Internet (PHP) y de crear tests atractivos gracias a la tecnologa FLASH. Estas herramientas se han comenzado a utilizar durante el curso 2002-

03 en asignaturas de Expresin Grfica de la Escuela Universitaria de Ingenieros Tcnicos Industriales de Gijn. Otra de las propuestas planteadas es la utilizacin de tests en las clases magistrales presenciales que comenzar a utilizarse en la asignatura de Dibujo Industrial de segundo curso en la misma Escuela de Gijn.

7 REFERENCIAS Alvarez, J.M. (2001). Evaluar para Conocer, Examinar para Excluir. Ediciones Morata. Ariza, A. (2003). Evaluacin y medicin: comparacin de cuatro maneras de medicin asistidas por ordenador. Revista de Medios y Educacin, Nmero 16. [http://www.sav.us.es/pixelbit/articulos/n16/n16art/art1610.htm] De la Cruz, M.A. (2001). Cmo mejorar nuestras clases: el aprendizaje activo y cooperativo en grupos grandes. Universidad de Oviedo. De Praetere, T. (2003). Open Source e-Learning Platform. [http://www.claroline.net/] Escudero, T. (2001). La evaluacin del rendimiento de los estudiantes como actividad docente. Programa de formacin para la docencia universitaria. Universidad de Oviedo. Garca, A. (2002). Elaboracin de pruebas objetivas. Ventajas e inconvenientes de su utilizacin. IV Semana de Investigacin. Facultad de Psicologa. [http://www.uned.es/psicologia/IVSemana/mesa.htm#Elaboracin] Lambertini, R. (2003). Pruebas objetivas. Sntesis de 20 productos del Currculo Paralelo. [http://www.nalejandria.com/akademeia/rbarale/pruebasobjetivas.htm] Matute, M. (1989). Prcticas de Dibujo Tcnico. Test de Normalizacin. MEC, (2003). Cmo se hacen los diversos tipos de exmenes. La web del estudiante. Ministerio de Educacin y Cultura. [http://www.cnice.mecd.es/recursos2/estudiantes/aprender/op_03.htm]. Trigos, E. (2002). PHP 4. Ed. Anaya Multimedia. 288 pp. ISBN: 84-415-1079-2.