Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia...

22
II Simposio CEA Lorena Kikut Julio 2018 Influencia de algunas variables sobre los resultados de la evaluación del desempeño docente

Transcript of Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia...

Page 1: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

II Simposio CEA

Lorena Kikut

Julio 2018

Influencia de algunas variables sobre los resultadosde la evaluación del desempeño docente

Page 2: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Primeros años de la evaluación docente en la UCR

2

Antes de 1970

Evaluación realizada por escuelas y facultades

Inicios de los 70s

III Congreso Universitario

• Creación de la Vicerrectoríade Docencia

• Entre la funciones de laVicerrectoría: “evaluarperiódicamente la labordocente de los profesores …”

1975

• Se crea la Oficina deEvaluación de la Vicerrectoríade Docencia que luego setransforma en el Centro deEvaluación Académica (CEA).

• Primeros cuestionarios deevaluación docente

Page 3: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

La evaluación docente en la UCR: Marco en el que se desarrolla

Escasa normativa de proceso y resultados

Participación voluntaria para

unidades y estudiantes

El CEA ofrece apoyo, pero cuenta con poco personal

Evaluación del desempeño docente

en el aula

Uso de cuestionarios

basados en perfil docente

Se basa en percepciones de

estudiantes

Aplicación de cuestionarios de

manera impresa o digital

Más de 3000 docentes evaluados

cada ciclo lectivo

Evaluación en más de 5000 grupos por

semestre

Solamente en 5 de cada 100 grupos, docente obtiene nota menor de 7

Uso formativo y pocas veces

sumativo

3

Page 4: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

La evaluación docente en la UCR: Cuestionario actual

Aspectos reglamnetarios de

responsabilidad

Temática desarrollda por docente y cómo ésta está ligada a la

realidad nacional y a la profesión

Asectos didácticos de la práctica

docente

Trato de docente hacia estudiantado

Aspectos relacionados con evaluación de los

aprendizajes

Desempeño

Docente

29 enunciados a valorar en escala de 0 a 10 que se

agrupan en 5 factores

4

Otras preguntas de características

estudiantiles, pregunta resumen y comentarios

Page 5: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

La evaluación docente en la UCR: Diagnóstico 2017

Desarrollo de un nuevo sistema de evaluación del desempeño docente que posea:

• Solidez técnica y metodológica

• Claridad conceptual institucional acerca de modelo educativo, para qué se realiza, cuál es el ámbito político en el que se desenvuelve, cuáles son sus consecuencias, qué mecanismos de divulgación se tienen y qué acciones se le pueden ofrecer al personal académico para lograr su mejora constante, entre otros

• Participación activa y consenso de diversos actores institucionales

• Diferenciar por áreas de conocimiento, pero mantener tramo común

• Complementar con otras metodologías y otros objetos de evaluación

• Implementar programa de profesionalización docente

• Dar divulgación a los resultados Prejuicios5

Page 6: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Ob

jeti

vos Comparar características de estudiantes

que responden y no responden el cuestionario de evaluación del desempeño

docente

Analizar características de profesorado y estudiantes según nota de desempeño

docente

6

Page 7: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Tomar en cuenta…

• Exploratorio, no se ha realizado antes en la UCR

• Limitación en cuanto a variables consideradas aunque resultados de fenómeno evaluativo es multicausal

• Cuestionarios digitales respondidos asincrónicamente (son la mayoría)

• Dificultad de unión de bases de datos7

Page 8: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Respuesta a cuestionarios

Más de 77 mil cuestionarios digitales enviados

9

Page 9: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Respuesta por área o facultad

10

70,0

51,3

48,4

47,8

47,4

42,8

42,4

40,3

34,3

54,6

30,0

48,7

51,6

52,2

52,6

57,2

57,6

59,7

65,7

45,4

0 10 20 30 40 50 60 70 80 90 100

Sedes

Artes y Letras

Ingeniería

Ciencias Sociales

Economía

Ciencias Agroalimentarias

Educación

Ciencias Básicas

Salud

Total

Porcentaje

No

Page 10: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Respuesta por sexo del estudiante

51,6

57,3

48,4

42,7

0% 20% 40% 60% 80% 100%

Femenino

Masculino

No

11

Page 11: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Respuesta por nota final numérica del estudiante en el curso

57,4

0

10

20

30

40

50

60

70

00.0 00.5 01.0 01.5 02.0 02.5 03.0 03.5 04.0 04.5 05.0 05.5 06.0 06.5 07.0 07.5 08.0 08.5 09.0 09.5 10.0

Porc

enta

je

Nota del estudiante en el curso

12

Page 12: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Respuesta por año de ingreso del estudiantado

47,5

40,942,6 41,4

43,9 44,8 44,4 45,6 46,244,7

47,9

0

10

20

30

40

50

60

70

2005 yantes

2006 2007 2008 2009 2010 2011 2012 2013 2014 2015

Porc

enta

je

14

Page 13: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Nota de desempeño docente

Casi 39 mil cuestionarios digitales recibidos

15

Page 14: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Nota de desempeño docente por área del cursos y por sexo y categoría del docente

Cuartiles 1, 2 y 3

7,0 7,5 8,0 8,5 9,0 9,5 10,0

Catedrático(a)

Asociado(a)

Adjunto(a)

Instructor(a)

Interino(a)

Masculino

Femenino

Sedes

Salud

Ingeniería

Educación

Economía

Cs. Sociales

Cs. Básicas

Cs. Agroalimentarias

Artes y Letras

Total

Cat

ego

ría

Sexo

Áre

a o

Fac

ult

ad

Nota16

Q1= 8,48 Q2=9,5 Q3=9,96

Page 15: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Nota de desempeño docente por diferentes características estudiantiles (1 de 2)

Cuartiles 1, 2 y 3

4,0 4,5 5,0 5,5 6,0 6,5 7,0 7,5 8,0 8,5 9,0 9,5 10,0

No

Quinto

Cuarto

Tercero

Segundo

Primero

Trabaja más de 20 horas

Trabaja 20 horas o menos

No trabaja

32 y más

29 a menos de 32

26 a menos de 29

23 a menos de 26

21 a menos de 23

Menos de 20

Mujer

Hombre

Total

Llev

a cu

rso

po

r p

rim

era

vez

o c

arre

ra e

stu

dia

nte

Jorn

ada

lab

ora

lEd

adSe

xo.

Nota

17

Page 16: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Nota de desempeño docente por diferentes características estudiantiles(2 de 2)

Cuartiles 1, 2 y 3

4,0 4,5 5,0 5,5 6,0 6,5 7,0 7,5 8,0 8,5 9,0 9,5 10,0

Mujer evalúa a Mujer

Mujer evalúa a Hombre

Hombre evalúa a Mujer

Hombre evalúa a Hombre

Docente no ha influido

No tenía interés y aún no

No tenía interés y ahora sí

Tenía interés y lo perdió

Tenía interés y mantiene

Tenía interés y aumentó

No

No

Total

Rel

ació

n s

exo

est

ud

ian

te y

do

cen

teA

ctit

ud

hac

ia m

ater

iaA

pro

el c

urs

oTe

nía

inte

rés

alin

icia

r el

cu

rso

.

Nota18

Page 17: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Nota de desempeño docente nota final de estudiante en el curso

Cuartiles 1, 2 y 3

0

1000

2000

3000

4000

5000

6000

7000

8000

9000

10000

0,00

1,00

2,00

3,00

4,00

5,00

6,00

7,00

8,00

9,00

10,00

00

.0

00

.5

01

.0

01

.5

02

.0

02

.5

03

.0

03

.5

04

.0

04

.5

05

.0

05

.5

06

.0

06

.5

07

.0

07

.5

08

.0

08

.5

09

.0

09

.5

10

.0

Estud

iantes q

ue resp

on

den

No

ta a

do

cen

te

Nota en el curso del estudiante

Media nota docente Estudiantes19

Page 18: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Nota de desempeño docente nota final de estudiante en el curso

47

,4

44

,8

42

,3

43

,6

46

,0

43

,7

46

,8

42

,4 47

,5 54

,1

49

,2 53

,8

55

,9

58

,1

59

,8

61

,9

63

,7

66

,6

68

,0 71

,5

74

,4

20

,4

25

,4

20

,3

29

,9

25

,3

30

,5

26

,8

30

,6 25

,9

26

,6

33

,8 29

,1

25

,8

23

,2 26

,5 25

,9

25

,2 23

,5

22

,8 21

,6

18

,7

32

,2

29

,9

37

,4

26

,5

28

,7

25

,8

26

,3

27

,1

26

,7 19

,3

17

,0

17

,1

18

,3

18

,7 13

,7

12

,2

11

,1

9,9 9,1 6,9

6,9

0,0

10,0

20,0

30,0

40,0

50,0

60,0

70,0

80,0

90,0

100,0

0,0 0,5 1,0 1,5 2,0 2,5 3,0 3,5 4,0 4,5 5,0 5,5 6,0 6,5 7,0 7,5 8,0 8,5 9,0 9,5 10,0

Porc

enta

je

Nota final del estudiante en el curso

Menor de 7

7 a menos de 9

9 a 10

20

Page 19: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

E14 Se interesa porque tengan buena comprensión de la materia (r=0,180)

E9 Utiliza ejemplos relacionados con su futura profesión (r=0,179)

E5 Le ayuda a tomar conciencia de la realidad del país (r=0,179)

E15 Expone los contenidos con claridad (r=0,178)

E19 Estimula al estudiante o formar criterios propios (r=0,177)

Correlaciones más altas entre nota obtenida por el estudiantado en el curso y enunciados del cuestionario

r = 0,170 entre nota final de cada estudiante en el curso y la calificación que ese estudiante dio al profesor o profesora de ese curso

22

Page 20: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

E15 Expone los contenidos con claridad (r=0,847)

E14 Se interesa porque tengan buena comprensión de la materia (r=0,835)

E11 Utiliza la metodología apropiada para desarrollar las lecciones (r=0,831)

E10 Aclara satisfactoriamente las dudas que le plantean (r=0,816)

E19 Estimula al estudiante o formar criterios propios (r=0,814)

Correlaciones más altas entre nota resumen de docente en el cuestionario y enunciados

23

Aspectos a los que el estudiantado estaría dando mayor importancia al evaluar de manera general a su docente

Page 21: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Mujeres tienden a

responder más

Mujeres dan mejores notas a

docentes

Estudiantes de ingreso reciente

tienden a responder más

Estudiantes de primeros años de carrera asignan notas más altas

Estudiantes que aprueban tienden a responder más

Estudiantes que aprueban asignan

notas más altas

24

Algunos hallazgos:

Page 22: Influencia de algunas variables sobre los resultados de la ...simposio.cea.ucr.ac.cr/files/Ponencia II Simposio CEA Lorena Kikut.pdf · II Simposio CEA Lorena Kikut Julio 2018 Influencia

Influencia de algunas variables sobre los resultados de la evaluación del desempeño docente

25