Inauguración Año Académico 2015

¿De qué hablamos cuando hablamos de

Calidad en la Educación Superior?

Matko KoljaticProfesor Titular

Pontificia Universidad Católica de Chile

Mayo 14, 2015

2Matko Koljatic

El Adivino Jorge Luis Borges

“En Sumatra, alguien quiere doctorarse de

adivino.El brujo examinador le pregunta si será

reprobado o si pasará.El candidato responde que será reprobado…”

3Matko Koljatic

La Importancia de la Educación Superior

El sistema de educación superior es fundamental para el desarrollo del país, la igualdad de oportunidades y la calidad de la vida cívica.– Las instituciones de educación superior deben formar el

capital humano avanzado que es imprescindible para el crecimiento y la prosperidad de las sociedades;

– son un crisol que provee de oportunidades que permiten la movilidad social, expresar la diversidad que es propia de una sociedad plural y cultivar, en sus prácticas y sus rutinas, los valores y las virtudes que son imprescindibles para el diálogo democrático y la formación de una voluntad común

4Matko Koljatic

En pocas palabras, la educación superior está llamada a enriquecer las vidas individuales y a la vez a hacer más próspera la vida en sociedad.Cuando la educación superior está a la altura de esas expectativas, no sólo mejora el capital humano, la economía o el desarrollo material del país, también fortalece los niveles de inclusion social, favorece el diálogo y hace más vigorosa la esfera pública, aspectos que son consustanciales a la vida democrática.

La Importancia de la Educación Superior

5Matko Koljatic

Libertad Académica vs. Aseguramiento de la Calidad

Este conjunto de importantes funciones que la educación superior está llamada a cumplir, justifica con largueza que el Estado se haya preocupado de diseñar un marco regulatorio y de fomento que, sin inhibir la diversidad del sistema, estimule, de parte de todas sus instituciones, el logro de la calidad y el cultivo de las dimensiones públicas de la educación superior. Por lo tanto, hay una primera contraposición: entre la libertad academica y el aseguramiento de la calidad que hay que equilibrar

6Matko Koljatic

Autonomía Institucional vs.

Supervisión PúblicaEn el contexto del desarrollo histórico de las Instituciones de Educación Superior – del cual el CFT San Agustin es un referente – ese marco regulatorio y de fomento debe respetar la autonomía de las instituciones y al mismo tiempo establecer métodos de supervisión que, sin lesionar la pluralidad histórica del sistema, favorezcan que el trabajo de cada una de las instituciones que lo integran converja de manera suficiente con el bienestar social.

Por lo tanto, hay una segunda contraposición: entre la autonomía institucional y la supervisión pública que también hay que equilibrar

Autorregulación vs

Evaluación Externa

7Matko Koljatic

Hay una tercera contraposición entre el escrutinio de la calidad por evaluadores externos – lo que es una práctica habitual en los sistemas de aseguramiento de la calidad mas consolidados – y los procesos de autorregulación desarrollados internamente por las instituciones para lograr el mejoramiento continuo.

8Matko Koljatic

¿Cómo se resolvió todo esto?

Con la ley 20.129

LEY 20.129Establece un Sistema Nacional de Aseguramiento de

la Calidad

Artículo 6º.- Créase la Comisión Nacional de Acreditación, organismo autónomo cuya función será verificar y promover la calidad de las Universidades, Institutos Profesionales y Centros de Formación Técnica autónomos, y de las carreras y programas que ellos ofrecen.

9Matko Koljatic

10Matko Koljatic

Acreditaciones: un tema crucial por 3 razones

1. La obligación legal de la CNA de cuidar y fomentar la calidad del sistema de educación superior

2. La fe pública en el sistema de aseguramiento de la calidad de la educación superior se radica en la confianza que deposita la ciudadanía en que las acreditaciones son una señal de dicha calidad

3. El Estado ha decidido asociar el sistema estatal de becas y créditos para la educación superior a las acreditaciones

¿Que son las Acreditaciones? Las acreditaciones son la forma en que históricamente se ha evaluado la

calidad en las IES. Son procesos que incluyen una revisión externa de la capacidad de una IES de proveer programas educativos de calidad.Las acreditaciones en la educación superior no son un concepto nuevo. De hecho, en algunas partes del planeta, las acreditaciones han existido por mas de 100 años.Las revisiones de acreditación incluyen una auto evaluación, revisiones de pares, revisiones de cuerpos colegiados (comités o comisiones) y obligan al desarrollo de planes estratégicos, incluyendo revisiones de los propósitos institucionales, las calificaciones del cuerpo académico y de las estructuras curriculares. Las acreditaciones ayudan. Certifican el buen funcionamiento de la IES, aseguran lo que los alumnos aprenden, que sus estudios son relevantes y a veces se usan para dar a las IES acceso a financiamiento, etc.

11Matko Koljatic

12Matko Koljatic

Acreditación Institucional

Características:• Voluntariedad del proceso, pero asociado a recursos públicos.• Se orienta al fortalecimiento de la capacidad de autorregulación y mejoramiento continuo. • Se acreditan obligatoriamente: docencia de pregrado y gestión• institucional. Se acreditan electivamente: postgrado; investigación; vinculación con el

medio.• Es crucial la evaluación externa

Resultados de Procesos de Acreditación Institucional

Evolución Resultados de Acreditación IES2004-2014

Fuente: CNA, Acreditación Institucional, 31 diciembre 2014. Considera resultados finales de Acreditación

2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 20140

5

10

15

20

25

30

35

14

25

15 16

24

27

33

14

30

2325

6 7 6

1 1 23

5 5

ACREDITADA NO ACREDITADA

Resultados de Procesos de Acreditación Institucional

Resultados de Acreditación 2014 según tipo de IES

Fuente: CNA, Acreditación Institucional, 31 diciembre 2014. Considera resultados finales de Acreditación

FFAA CFT IP UNIV0123456789

10

35

89

3

11

ACREDITADA NO ACREDITADA

Resultados de Procesos de Acreditación Institucional

IES Autónomas por Estado de Acreditación 2014 (%)según tipo de IES

CFT IP UNIV0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

52.6% 57.6%75.4%

7.9%

18.2%

17.5%39.5%

24.2%

7.0%

Acreditada No acreditada Fuera sistema

Fuente: CNA, Acreditación Institucional, 24 marzo 2015. Comprende resultados finales de acreditación. SIES. No considera a las IES de las FFAA y de Orden. [1]

[1] La categoría no acreditada considera sólo decisiones de no acreditación. Por su parte, las IES fuera de sistema refieren a aquellas que nunca han obtenido decisión de acreditación, o bien, a aquellas cuya acreditación ha expirado.

Se ha excluido del total, a las IES que se encuentran en proceso de cierre.

Resultados de Procesos de Acreditación Institucional

Cobertura Acreditación - Matrícula en IES Autónomas

Fuente: CNA, Acreditación Institucional, 24 marzo 2015. Comprende resultados finales de acreditación. SIES, matrícula 2014. No considera a las IES de las FFAA y de Orden. [1]

CFT IP Univ0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

92.4% 88.7% 87.6%

1.9% 5.9% 10.0%

5.7% 5.4% 2.4%

Acreditada No acreditada Fuera de Sistema

Resultados de Procesos de Acreditación de Pregrado

Cobertura de programas de Pregrado de IES autónomaspor estado de acreditación 2014 (%)

CARRERAS PROFESIONALES CARRERAS TÉCNICAS0

200400600800

100012001400160018002000

1029

18043 3

1946

1229

ACREDITADA NO ACREDITADA FUERA DE SISTEMA

*Sólo comprende programas reportados en base matrícula 2014 SIES.Fuente: CNA, Acreditación Pregrado, 19 marzo 2015. Considera resultados finales de acreditación. SIES, matrícula 2014.

No comprende a las IES de las FFAA y de Orden.[1]

Resultados de Procesos de Acreditación de Pregrado

Cobertura de matrículas de programas de pregrado acreditados en IES autónomas por tipo de institución

CFT IP UES0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

47.855.8 53.5

52.2 43.3 46.1

0.0 0.9 0.4

ACREDITADA FUERA DE SISTEMA NO ACREDITADA

*Sólo comprende programas reportados en base matrícula 2014 SIES.Fuente: CNA, Acreditación Pregrado, 19 marzo 2015. Considera resultados finales de acreditación. SIES, matrícula 2014.

No comprende a las IES de las FFAA y de Orden.[1]

[1] La categoría no acreditada considera decisiones de no acreditación. Por su parte, los programas fuera de sistema refieren a aquellos que nunca han obtenido decisión de acreditación,

o bien, a aquellos cuya acreditación ha expirado. Se ha excluido del total, a las IES que se encuentran en proceso de cierre.

Resultados de Procesos de Acreditación de Pregrado

Cobertura de matrículas de programas de pregrado acreditados en IES autónomas por nivel

CARRERAS PROFESIONALES CARRERAS TÉCNICAS0.0%

20.0%

40.0%

60.0%

80.0%

100.0%

120.0%

56.2%47.4%

43.2%52.5%

ACREDITADA NO ACREDITADA FUERA DE SISTEMA

*Sólo comprende programas reportados en base matrícula 2014 SIES.Fuente: CNA, Acreditación Pregrado, 19 marzo 2015. Considera resultados finales de acreditación. SIES, matrícula 2014.

No comprende a las IES de las FFAA y de Orden.[1]

[1] La categoría no acreditada considera decisiones de no acreditación. Por su parte, los programas fuera de sistema refieren a aquellos que nunca han obtenido decisión de acreditación,

o bien, a aquellos cuya acreditación ha expirado. Se ha excluido del total, a las IES que se encuentran en proceso de cierre.

Dos Desafíos Fundamentales

• La necesidad de crear una cultura para el aprendizaje de los estudiantes y de la organización – el cambio desde los procesos a los resultados.

• La responsabilidad de las IES por la inclusión

20UDLA 9-14

El Desafío del Aprendizaje

Primera Premisa: los Stakeholders

“Dueños”

Alumnos

Sociedad

Institución de

EducaciónSuperior

Valores Valores

Trabajadores

22Matko Koljatic

Segunda Premisa:

¿Qué le importa a los Stakeholders?PROCESOS

PROCESOS

PROCESOSPROCESOS

RESULTADOS

RESULTADOSRESULTADOS

RESULTADOS

23Matko Koljatic

¿Que es Educación? “se entenderá por educación el proceso de aprendizaje permanente que abarca las distintas etapas de la vida de las personas y que tiene como finalidad alcanzar su desarrollo espiritual, ético, moral, afectivo, intelectual, artístico y físico, mediante la transmisión y el cultivo de valores, conocimientos y destrezas”. (Ley 20.529 )

Dos Preguntas

¿Que es una Educación de Calidad?Se desprende de lo anterior que para que haya una “educación de calidad ” tiene que haber aprendizaje, algo que pareciera evidente, pero que no se corresponde con el paradigma pedagógico dominante por el cual quien educa debe transmitir conocimientos (enseñar) y es responsabilidad de quien estudia, procesar, clasificar, retener y aplicar dichos conocimientos (aprender).

European Standards and Guidelines

“Los programas de aseguramiento de la calidad tendrán que considerar: • El desarrollo y publicación explícita de los resultados de

aprendizaje esperados tanto en los estudiantes como en la institución;

• Consideración de las características y necesidades de los diferentes tipos de entrega (e.g full time, part-time, a distancia , e-learning) y tipos de ES (e.g académica, vocacional, profesional);

• Retroalimentación regular desde los empleadores, egresados y otras partes interesadas.”

•El paradigma dominante hasta ahora decía, en breve, que el trabajo del profesor es enseñar y el de los alumnos aprender. Este paradigma es el que esta siendo cambiado ya que es responsabilidad de los establecimientos educacionales que los alumnos aprendan y por ende, ese es el trabajo de los profesores.•Ahora bien, ¿qué implicancias tiene entender la educación como un “proceso de aprendizaje” y no como un “proceso de enseñanza aprendizaje”?

• En primer lugar, los docentes tienen que dejar de “pasar materia”, centrando la atención en el los resultados – el aprendizaje- y no en las actividades – la enseñanza.

• El nuevo paradigma hace de los profesores y alumnos aliados en el aprendizaje y considera a los estudiantes como partícipes fundamentales del proceso. Para ello, los alumnos se deben preparar estudiando la materia anticipadamente, guiados por el profesor, y en clases solo se discute dudas, se analiza evidencias, se investiga y experimenta.

• Por lo mismo, la docencia en aula pasa a ser menos discursiva y más dialogante.En mi experiencia, los alumnos aprecian enormemente cuando son sujetos activos y participan. Así es como crece la motivación de aprender, las clases son más entretenidas y los alumnos aprenden más. Por cierto, esto tiene costos ya que una clase así toma más tiempo de preparación para el docente, por lo que se requiere disminuir las horas de clases de los profesores y aumentar las horas dedicadas a la planificación.

Enseñanza vs Aprendizaje

El Aprendizaje en las IES requiere una decidida actuación de la Dirección para:

• Desarrollar sistemas de aseguramiento de la calidad (e.g: comités de evaluación, asignación de recursos y reconocimientos) que promuevan el mejoramiento continuo;

• Investigar que funciona bien y que no; y diseminar la información a los profesores;

• Tener procesos internos/externos de evaluación de los procesos;

• Desarrollar a los docentes para que aprendan a centrarse en el aprendizaje de los estudiantes.

27UDLA 9-14

El Foco debe estar en: • Identificar los resultados de aprendizaje

esperados y publicarlos• Mapear el aprendizaje en el curriculum• Crear métricas institucionales que midan los

aprendizajes• Capacitar a los docentes en las rúbricas,

actividades de vinculación con el medio y normas de cualificaciones externas, etc.

• Evaluar periódicamente

Mapeo Curricular

Curso 504 Curso 536 Curso 455 Curso 599

Aprendizaje 1 Inicial Intermedio

Aprendizaje 2 Inicial Intermedio Avanzado

Aprendizaje 3 Avanzado

Aprendizaje 4 Intermedio

Preguntas ¿Hay métricas de aprendizaje formales?

¿Son publicadas?

¿Fuera de las notas promedio, que otra evidencia se usa?

¿Quién analiza la evidencia?¿Como se procesa?

¿Como se usa la información?

¿Con que frecuencia se analiza?

A nivel institucio-nalPor area formativa

Por programa

En las Prácticas

Preguntense

Tipos de evidencia

Indirecta• Tendencias de graduación•Retención/graduación/tiempo de permanencia•Encuestas de egresados• EmpleosDirecta•Revisión del trabajo de los estudiantes – cursos finales, portafolios, rúbricas• Exámenes

El Desafío de la Inclusión

32Matko Koljatic

Ejemplo Propedéutico USACH:

• Vía alternativa de admisión• Orientada a alumnos de alto rendimiento

académico (ranking) y alta vulnerabilidad socio-educacional.

Fuente: M. Koljatic & M. Silva (2012): Opening a side-gate: engaging the excluded in Chilean higher education through test-blind admission, Studies in Higher Education, DOI:10.1080/03075079.2011.623299

33Matko Koljatic

Alumnos socialmente vulnerables...

34Matko Koljatic

Alumnos capaces, pero en desventaja:

35Matko Koljatic

El primer semestre:les fue peor

36Matko Koljatic

Calidad de vida universitaria:mas retraídos y menos participativos

37Matko Koljatic

Retención y graduación:¡Si, se puede!

Admisión Regular

Ret. 1er Año: 87%

2° Año: 78%

Grad. oportuna: 52%

Propedéutico

Ret. 1er Año: 78%*

2° Año: 61%

Grad. oportuna: 22%

* En 17 universidades deserta mas de un 25% de los alumnos de primer año.La Tercera , 22 de Octubre de 2012

38Matko Koljatic

Gestión del Cambio

¿Dónde estamos? Diagnóstico

¿Adónde queremos llegar?Misión –Visión – Valores ¿Cómo llegamos?

Políticas – Planes – ProcesosAdaptado de The Perils of Bad Strategy, R. Rumelt, McKinsey Quarterly, 2011

39Matko Koljatic

Recursos y

Capacida-des

de la IES

Inversión en

Nuevos RecursosInnovación

Misión¿Alumnos?

¿Aprendizajes?¿Medios?

Visión¿Objetivos?

Creación de ValorPara

Stakeholders

Aseguramiento de la calidad:• medición sistemática de resultados• comparación con estándares,• seguimiento de los procesos,

AcreditaciónAprendizaje Organizacional

Mejoramiento Continuo

El Circulo Virtuoso

40Matko Koljatic

MUCHAS GRACIAS

Anexos

CENTROS DE FORMACIÓN TÉCNICAPautas de Evaluación

Acreditación Institucional

Ejes en atención a la naturaleza de los CFT

• Aspectos diferenciadores respecto a las otras IES se centran en el área de la docencia de pregrado principalmente.

• Creación de pautas específicas para evaluar el área de vinculación con el medio en los centros de formación técnica.

• Consideración del mundo del trabajo o mercado laboral en los objetivos y propósitos, en la oferta de carreras y en los perfiles de egreso.

• Consideración de los requerimientos sociales y del entorno, en los objetivos y propósitos institucionales y en los planes de desarrollo.

• Formalización, sistematización y especialización de algunas prácticas institucionales.

• Incorporación de elementos relativos a la difusión y publicidad (nuevo criterio).

Ejes en atención a la naturaleza de los CFT

• Consideración de los niveles de inserción laboral obtenidos, así como de la retroalimentación de empleadores y titulados.

• En cuanto al procesos de enseñanza aprendizaje: articulación de la educación media con la técnica de nivel superior; homologación y convalidación de aprendizajes previos; contenidos prácticos que faciliten la inserción laboral; procesos de prácticas.

• Cambio del ámbito a evaluar de investigación, por la innovación de contenidos, referida a la actualización de los planes de estudio en función de los avances en los procesos productivos asociados a las carreras ofrecidas por el centro.

• En relación a los docentes, se destacan aspectos relativos a su dedicación y la dedicación de los jefes o coordinadores de carreras y aspectos relacionados a su calificación considerando sus trayectorias activas y pertinentes en el mundo del trabajo.

ÁREA GESTIÓN INSTITUCIONALDimensión I Planificación y desarrollo del proyecto institucionalCriterios

1.- Misión y propósitos. Carácter, valores y rol que desempeña la institución; evaluación y uso de resultados; consideración del mundo del trabajo, requerimientos sociales y rol que ejerce el centro.

2.- Estructura organizacional. Jerarquía y roles y funciones delimitadas; formalización; organización de la administración académica y económica (unidades especializadas y funcionales).

3.- Capacidad de autorregulación. Diagnóstico interno, externo y ajustes; prioridades y metas; indicadores cuantitativos y cualitativos; cambios significativos informados y cautelados mediante políticas y mecanismos de aseguramiento de la calidad.

4.- Gobierno institucional. Generación de autoridades y atribuciones; cumplimiento de las normativas; proceso de toma de decisiones definido y documentado; mecanismos de toma de decisiones, control de gestión y rendición de cuentas.

ÁREA GESTIÓN INSTITUCIONAL

Dimensión II Administración y recursosCriterios

5.- Gestión de personas. Selección, contratación, capacitación, evaluación y desvinculación del personal directivo, docente y administrativo.

6.- Información institucional. Sistemas de información para la toma de decisiones; información veraz, oportuna y completa; información entregada al Sistema Nacional de Aseguramiento de la Calidad.

7.- Recursos materiales. Infraestructura e instalaciones; evaluación y actualización de los recursos; planes de inversión; identificación y planificación de los recursos físicos; propiedad de las instalaciones o derechos sobre ellas aseguran el desarrollo.

8.- Sustentabilidad económico-financiera. Obtención, manejo y control de los recursos financieros; recursos financieros suficientes.

ÁREA GESTIÓN INSTITUCIONAL

Dimensión III Servicios orientados a los estudiantesCriterios

9.- Servicios de apoyo. Servicios a los estudiantes y evaluación de su funcionamiento; acceso a registros académicos; mecanismos de apoyo a estudiantes para obtener financiamiento.

10.- Difusión y publicidad. Difusión de la información veraz; prolijidad y precisión.

ÁREA DOCENCIA DE PREGRADO

Dimensión I CarrerasCriterios

1.- Diseño y provisión de carreras. Oferta de carreras; ajuste de la oferta de carreras (necesidades del mercado laboral, características de los estudiantes y resultados de empleabilidad); perfiles de egreso (requerimientos del mercado laboral, perfil de ingreso, retroalimentación de empleadores y titulados).

2.- Proceso de enseñanza aprendizaje. Perfil de ingreso; seguimiento de resultados de admisión; articulación de planes de estudio con educación impartida por establecimientos de educación media; homologación y convalidación de aprendizajes previos; contenido práctico (inserción laboral de sus titulados); procesos de práctica y convenios.

3.- Innovación de contenidos. Incorporación de adelantos de procesos productivos asociados a las carreras ofrecidas; incorporación avances para mejorar la calidad de la docencia que imparte.

ÁREA DOCENCIA DE PREGRADO

Dimensión II DocentesCriterios

4.- Dotación. Número y dedicación; estrategias de reclutamiento y renovación; estabilidad en la dotación docente o mecanismos para salvaguardar la calidad; dedicación de jefes o coordinadores de carreras.

5.- Calificación. Dotación calificada y con conocimientos actualizados (evidencia de trayectorias activas y pertinentes en el mundo del trabajo); programas de seguimiento y capacitación; evaluación de desempeño.

ÁREA DOCENCIA DE PREGRADO

Dimensión III Resultados Criterios

6.- Progresión. Progresión (tasas de retención, tiempos de permanencia, titulación y titulación oportuna); análisis de los factores críticos que inciden en los resultados del proceso formativo y mecanismos de apoyo.

7.- Inserción laboral. Nivel de inserción laboral; tiempo que demora su colocación; pertinencia del área a la cual se insertan; remuneración.

8.- Seguimiento de titulados. Sistema formal de seguimiento de titulados; conocimiento de la colocación laboral y uso de esta información; opinión de los titulados para la actualización de las carreras.

ÁREA ELECTIVAVINCULACIÓN CON EL MEDIO

Dimensión I Diseño y provisión de actividadesCriterios

1.- Coherencia. Captar requerimientos del medio y proyectar su acción en ámbitos relacionados a su misión; responsabilidad social; proyecto institucional define y prioriza actividades; bidireccionalidad.

2.- Condiciones de operación. Instancias y mecanismos para el diseño, aprobación y organización de las actividades; financiamiento estable; evaluación potencial impacto.

ÁREA ELECTIVAVINCULACIÓN CON EL MEDIO

Dimensión II Resultados e impactoCriterios

3.- Resultados. Alcance de las actividades; contribución de las actividades y monitoreo; evaluación de resultados de las actividades.

4.- Impacto. Monitoreo del impacto de las actividades; retroalimentación; evaluación del impacto.