Conferencia

“Condiciones para tener éxito en la gestión del pregrado y asegurar la calidad y acreditación de laspregrado y asegurar la calidad y acreditación de las

carreras”

Juan Music TI i Ci ilIngeniero Civil

Académico Departamento Ingeniería CivilFacultad de Ciencias de Ingeniería y Construcción

Universidad Católica del NorteUniversidad Católica del Norte

Mayo 2013E-Mail: jmusic@ucn.clj @

Temario

1) Algunas consideraciones sobre el Sistema de Educación Superior Chileno ysus implicancias en la formación de pregrado

2) Condiciones mínimas para tener éxito en la gestión del pregrado

3) Condiciones para el aseguramiento de la calidad en la docencia de pregrado eindicadores asociados

4) Evaluación de Carreras de Pregrado según la CNA

5) Organización del Informe de Autoevaluación de Carreras

Juan Music T 2

1) Algunas consideraciones sobre el Sistema de Educación Superior Chileno y sus implicancias en la formación de

pregradoi) Chile ha experimentado un aumento exponencial en el número de jóvenes que hoy

tienen la posibilidad de acceder a estudios superiorestienen la posibilidad de acceder a estudios superiores

- 249.482 matriculados en 1990, que correspondían al 14,16% de la poblaciónchilena de entre 18 y 24 años, se pasa a 1.068.263 en Marzo 2012, alcanzandoaproximadamente el 45% de esa cohorte Hoy supera el 50%aproximadamente el 45% de esa cohorte. Hoy supera el 50%.

- 7 de cada 10 estudiantes son primera generación en educación superior

- Más del 15% de los estudiantes del quintil I ya accede a la educación superiorCambio el tipo de estudiantes que accede

. Heterogeneidad de formación de los estudiantes al acceder aEducación Superior (ES)Educación Superior (ES)

. Diversidad en sus características socio- culturales

. Cambio en la composición etaria de ellos y momento en que accedena la ES (250 000 estudiantes vespertinos en ES)a la ES (250.000 estudiantes vespertinos en ES)

Implicancias . Diferentes inquietudes (nuevos tipos de carreras) y visiones de laeducación superior

. Importancias que los jóvenes dan al acto de graduarse, porquepo ta c as que os jó e es da a acto de g adua se, po quealgunos tienen más interés por entrar al mercado pronto

. etc Juan Music T 3

ii) Diversificación del tipo de instituciones de educación superior

El sistema de educación superior en Chile está compuesto por (SIES: Marzo- El sistema de educación superior en Chile está compuesto por (SIES: Marzo2012)

. Universidades (60)

. Institutos Profesionales (IP) (45)

. Centros de Formación Técnica (CFT)(69)

. Academias de las distintas ramas de las Fuerzas Armadas, la DirecciónGeneral de Aeronáutica Civil, Carabineros y la Policía de Investigaciones., y g

Implicancias:

Se diversifico la ofertas de programas de pregrado y sus modalidades de Se diversifico la ofertas de programas de pregrado y sus modalidades deimpartirlo

Aumento fuertemente la competencia entre instituciones para captart di t d testudiantes y docentes

Mayor preocupación de las instituciones por retener estudiantes (en especialen los 2 primeros años (CAE, FSCU)

Mayor información a disposición de las personas (MINEDUC, SIES, CNED,Ranking de universidades (Que Pasa, América Economía, Universia), Mediosde Comunicación Social, Redes Sociales , etc))

Juan Music T 4

iii) Implementación de Políticas Públicas en Educación Superior

- Creación del Sistema Nacional de Aseguramiento de calidad (Ley 20129)

Se implementa un sistema de acreditación de instituciones y programas de. Se implementa un sistema de acreditación de instituciones y programas dedoctorados (CNA) y carreras de pregrado y magister(agencias acreditadoras). Se establece un Sistema Nacional de Información de la Educación Superior.

- Políticas de financiamiento tanto a las instituciones como a los estudiantes

Modalidad de financiamiento a instituciones (incorporación creciente de indicadores. Modalidad de financiamiento a instituciones (incorporación creciente de indicadoresde desempeño. Universidades del CRUCH, MECESUP etc.

. Modalidad de financiamiento a los estudiantes de universidades acreditadas (CAE,( ,FSCU, Becas etc)

iv) Globalización e Internacionalización

- Acuerdos internacionales firmados por nuestro país (reconocimiento de títulos ygrados)

- Incremento en la implementación de un Sistema de Créditos AcadémicospTransferibles (SCT-Chile) en las Universidades

Juan Music T 5

2) Condiciones mínimas para tener éxito en la gestión del pregradopregrado

2.1 A nivel Institucional

i) Existencia de un Plan de Desarrollo Corporativo (o Plan Estratégico)- Misión y objetivos estratégicos deben explicitar lo que se espera del pregrado, conindicadores de desempeño precisos, con sus líneas base y su evolución esperadap p , y pen el tiempo

ii) Existencia de un Proyecto Educativo Institucional) yElementos mínimos que debe contener

- Debe explicitar los principios y fundamentos (pilares de él)- El sello que la institución quiere darle a sus egresados q q g- Modelo Curricular adoptado

- Modelo TradicionalModelo Tradicional- Con Enfoque por Competencia Basado en Competencia- Por Competencia

- Una metodología clara y precisa para su implementación (No siempre esta claro yUna metodología clara y precisa para su implementación (No siempre esta claro yexplicito en el PEI)

Juan Music T 6

iii) Existencia de Políticas y una definición clara de Roles del Nivel Central y las Unidades Académicas en la gestión del pregradog p g

- El sistema de gobierno universitario y su estructura orgánica debe explicitarclaramente las instancias relacionadas con los roles a nivel: Político, Estratégico,

Tá ti O i l l ió l dTáctico y Operacional en relación al pregrado

- Políticas explícitas relacionadas con la Docencia de PregradoRecursos Humanos, Recursos para el proceso de enseñanza – aprendizaje,Recursos Humanos, Recursos para el proceso de enseñanza aprendizaje,Admisión etc

i ) U i t d i t d lid d id d d áli i i ti ióiv) Un sistema de aseguramiento de calidad y capacidad de análisis e investigacióninstitucional Capacidad para evaluar la calidad, pertinencia, eficacia y eficiencia delpregrado

v) Existencia de un Sistema Integrado de Información para la gestión tanto académicacomo administrativa Definición clara de datos metas e indicadores asociados alcomo administrativa Definición clara de datos, metas e indicadores asociados alpregrado

Juan Music T 7

2.2) A nivel de Unidad Central responsable del Pregrado

i) Definición clara y precisa de los procesos principales relacionado con la docencia de pregrado, sus responsables y los indicadores asociados

Lo anterior implica:p. Definición de Procesos Principales Ejemplos de Procesos Principales:Planificación Curricular, Gestión del Cuerpo Académico, Admisión de Estudiantes,Planificación Curricular, Gestión del Cuerpo Académico, Admisión de Estudiantes,Gestión de Recursos para el Aprendizaje, Efectividad del Proceso Enseñanza –Aprendizaje, Apoyo Integral a los Estudiantes, Seguimiento de Egresados y relacióncon empleadores, internacionalización etc

. Elaboración de Matriz de Decisiones relacionada con el pregradoConsiste en establecer claramente para cada proceso principal (y subprocesos sii ) l l j l i l i d l id dexisten) el rol que juegan tanto los organismos colegiados como las autoridades

unipersonalesEsta matriz lleva en las filas, los organismos colegiados como las autoridadesunipersonales (Junta Directiva o Consejo Superior Rector Vicerrectores Decanosunipersonales (Junta Directiva o Consejo Superior, Rector, Vicerrectores, Decanos,Directores de Departamento, Jefes de Carreras, etc) y en las columnas los procesosprincipales (y sus subprocesos si existen) y en su interior se explicita el rol que lecorresponde a cada uno de ellos.

Juan Music T 8

Docencia de PregradoMatriz de Decisiones

Ejemplos de Procesos y/o Subprocesos

Organismos Colegiados y Autoridades 

Unipersonales Proyecto Educativo Creación de carreras Rediseño de Carreras Contratación Personal Académico

Jerarquización y Evaluación del 

Desempeño de los Académicos

Requisitos de  admisión y vacantes

Cumplimiento Perfil de Egreso

Junta Directiva o Consejo Superior

C j  A dé i  Consejo Académico Superior

Consejo de Facultad

Consejo de Escuela o Consejo de Carrera

Rector

Vicerrector Académico

Vicerrector de Administración y Finanzas

Vicerrector de Desarrollo Institucional

Vicerrector de Investigación y Desarrollo Tecnológico

Vicerrector de Vinculación   l M dicon el Medio

Secretario General

Fiscal

Contralor

Dirección de Aseguramiento de la gCalidad

Decanos

Secretario de Facultad

Director de Escuela o Departamento

Secretario de Estudios

Juan Music T 9

Secretario de Estudios

. Establecer los indicadores relevantes relacionados con cada proceso principal

En este punto se establece:

. Los indicadores relevantes asociados a cada proceso principal y su forma de medición .Importante: Diferenciar entre Indicador de desempeño e indicador de proceso

Ejemplo: Para el proceso principal :Efectividad del Proceso Enseñanza – AprendizajeUn Indicador de Proceso puede ser: Docentes capacitados en metodologías según PEIversus total docentesUn Indicador de Desempeño puede ser: Nivel (o %) de logro de competencias de los

estudiantes al termino de cada ciclo de formación definido .

Podría ser por ejemplo: el nivel de logro de competencias definidas por la carrera y elPEI, obtenidos por los alumnos al finalizar el ciclo inicial o básico (Bachillerato), el ciclopara obtener la Licenciatura y el ciclo Habilitación Profesional.

Forma de medir: Ejemplos: Instrumento elaborado con dicho fin y aplicados a losestudiantes al terminar cada ciclo o un curso integrador al termino de cada ciclo para sumediciónmedición

Juan Music T 10

ii) Elaboración de un Sistema Integrado de Información para la Gestión del Pregrado

. Este sistema debe ser capaz de general todos los indicadores relevantes establecidospara la docencia de pregrado en la institución y que realmente aporten a la toma dedecisiones para una buena gestión.decisiones para una buena gestión.

. Este sistema debería estar a disposición -en línea – para todas los responsables de lagestión del pregrado (según lo que se estableció en la Matriz de Decisiones), tanto ag p g ( g q ),nivel central como de unidades académicas. Se deberían establecer protocolos deacceso según políticas universitarias.

. El principal objetivo de este sistema es contar con indicadores que permitan medir lacalidad, pertinencia, eficacia y eficiencia de la docencia de pregrado en la universidad.

. Además este sistema es fundamental para el logro de una mejora continua en lainstitución y para apoyar los procesos tanto de acreditación institucional como de lascarreras de pregrado.

iii) Elaboración de toda la reglamentación asociada al pregrado y establecer las políticas yacciones institucionales para apoyar a los estudiantes y docentes en el logro de unadocencia de calidad.docencia de calidad.

Juan Music T 11

Implica contar con:Reglamentos:Reglamentos:- Reglamento de Pregrado- Reglamento de Titulación y de Prácticas

Plataforma de Gestión del Aprendizaje (de Apoyo al Proceso de Enseñanza –Aprendizajede los Estudiantes)

- Coursewares . Ejemplo: WEBCT, TOP CLASS, BACKBOARD, LEARNING SPACE,EDUCA @ v 2.0.

Centro (o Unidad) de capacitación y apoyo a los Docentes en metodologías de enseñanza –aprendizaje compatible con PEI

Centro (o Unidad) de Apoyo al Desempeño Académico y Formación Integral de losEstudiantes

iv) Establecer un Sistema Integral de Evaluación de la Docencia y de los Docentes

Juan Music T 12

3) Condiciones para el aseguramiento de la calidad en la docencia de pregrado e indicadores asociadosp g

Un organismo acreditador extranjero de instituciones expreso:

“Cuando las instituciones no logran buenos resultados en la investigación, es una lástima. Cuando no proporcionan una docencia de calidad es un escándalo”.

3.1) Aspectos a evaluar y metodología sugerida

Es fundamental asegurar la calidad del pregrado en sus diferentes etapas y aspectos:

Se expone a continuación los principales aspectos a evaluar en una carrera y unaSe expone a continuación los principales aspectos a evaluar en una carrera y unametodología para hacerlo (Triangulo Estratégico)

Juan Music T 13

Aspectos más relevantes a considerar al evaluar una carrera

Capacidad de Recursos Administración de la carrera

Resultados de la

AutorregulaciónHumanos disponibles

Carreraa Evaluar(Perfil de

Currículo(plan de estudio

y programas)

Formación(Calidad de los Egresados y

Titulados) Outcomes(Egreso)

Criterios de

Efectividad de la carrera:

y p g )

Criterios de Admisión y

Calidad de los Estudiantes

-Eficacia-Pertinencia-Integridad-Eficiencia

Infraestructura y Equipamiento

Recursos para aprendizaje y

--Sustentabilidadvinculaciones con el medio

Juan Music T 14

Triángulo EstratégicoTriángulo Estratégico

Có t i id d?¿Cómo construir apoyo?

VALOR¿Cómo construir capacidad?

El rol de liderazgo

La sociedad lo considera

El rol de convencimiento

La sociedad lo desea, hay id d

12

La sociedad lo considera adecuado , hay apoyo, pero no sabemos hacerlo

capacidad, pero no tenemos apoyo.

3APOYOCAPACIDAD

¿Cómo construir valor?

El rol Analítico

Hay capacidad para hacerlo, hay apoyo político e institucional , pero la sociedad no lo valora

Juan Music T 15

3.2) Características, Atributos y Criterios para definir Indicadores en el Pregrado

i) Aspectos Generales- Es frecuente escuchar a las autoridades universitarias decir que habiendo destinado

importantes recursos y esfuerzo al mejoramiento de la gestión del pregrado, losresultados logrados en cuanto a calidad no los satisfacen plenamente.

- Al mismo tiempo, manifiestan dificultades para medir satisfactoriamente ( tanto entiempo como con costos razonables), la calidad, pertinencia, eficacia y eficiencia del dif t d dlas diferentes carreras de pregrado

La pregunta a responder sería:Q é i di d i l i l t ió d i t d tió¿Qué indicadores son necesarios para la implementación de un sistema de gestión

integral del pregrado?

Existen diferentes criterios para categorizar indicadores relacionados con el pregrado- Existen diferentes criterios para categorizar indicadores relacionados con el pregrado- Los indicadores pueden estar referidos a: insumos, procesos y resultados.- Se señalan las características y atributos deseables de los indicadores

S f d i t i i di d it l- Se expone una forma de organizar o categorizar indicadores, que permita laimplementación de un modelo de gestión en el pregrado basado en ellos.

- Se explicita y ejemplifica los tipos de indicadores que podrían considerarse en lagestión del pregradogestión del pregrado

Juan Music T 16

ii) Características y Atributos deseables de los Indicadores

- Homogeneidad : La información obtenida a través del indicador debe ser comparablea través del tiempo y entre carreras

- Objetividad: La información no debe ser sometida a manipulación por quienes- Objetividad: La información no debe ser sometida a manipulación por quienesefectúan la medición

- Control: Los resultados obtenidos por la carrera dependen de su desempeño y node factores externos no controlados ni modificados arbitrariamente por ellap

- Oportunidad /Viabilidad: El indicador puede estar a disposición de la institución en unplazo razonable para la evaluación y la toma de decisiones

- Relevancia: El indicador debe ser pertinente en la perspectiva de la medición de lacalidad y eficiencia de la carrera

- Costo: La información contenida en el indicador puede ser obtenida a un costorazonable

- Confiabilidad: Los indicadores deben estar basados en datos consistentes- Auditabilidad: Los datos deben posibilitar un escrutinio riguroso- Claridad: Entrega información simple, con significado directo y explicito

Juan Music T 17

iii) Categorización de Indicadores para la Gestión del Pregrado

Existencia o Insumos(Input)

Relacionados con

Currículo (Curriculum)Académicos – Docentes (Faculty)Recursos para enseñanza –aprendizaje y apoyo integral de los

Indicadores de

Capacidad

s a :

( p ) aprendizaje y apoyo integral de los estudiantes (Facilities)Características de los Estudiantes (Students)

Capacidad

icad

ores

ocia

dos

a

Procesos Relacionados con

Procesos Principalesdefinidos para el

pregrado

Indicadores de

Procesos

Ind

aso

Resultados Relacionados

Resultados del Proceso Formativo

(Learning Outcomes)

Indicadores de Desempeño

(Outcomes)Relacionados

con(Learning Outcomes)Requerimientos del

medio externo (Stakeholders)Integridad y

relacionados con los siguientes

criterios de evaluación:

fIntegridad y Sustentabilidad de la

carrera

- Eficacia-Pertinencia-Integridad-Eficiencia

S bilid d-Sustentabilidad

Juan Music T 18

- Los diferentes indicadores responden a distintos propósitos, y a los intereses ynecesidades de información y de toma de decisión de distintos actores del pregrado

iv) Tipos de Indicadores

- La categorización de indicadores antes señalados se pueden construir en base a variables cualitativas o cuantitativa y pueden ser simple o compuestos

a) Ejemplificación de indicadores cuantitativos y simple para algunos actores

Docentes:Indicadores de Capacidad:% de docentes con formación de postgradoIndicadores de Proceso:% de docentes capacitados en metodología de enseñanza y evaluación coherente con lo considerado por la carrera y PEIIndicadores de Desempeño:p% de docentes que aplican las metodología definidos por la carrera y logran mejorar lastasas de aprobación de sus cursos

Juan Music T 19

Estudiantes:

Indicador de Capacidad:% de alumnos que ingresan a la carrera y cumplen el perfil de ingreso definido por ellaIndicador de Proceso:% de alumnos con brecha inicial en acciones remedialesIndicadores de Desempeño:% de aprobación de asignaturas de alumnos incorporados a acciones remediales

b) Ejemplificación de indicadores cualitativos simple y compuestos

Forma de expresar la consistenciaSi X e Y son dos elementos en una cadena lógica, su consistencia funcional se puede

expresar como C(X,Y)

donde 0 ≤ C(X,Y) ≤ 1

C= Consistencia ( se puede definir rúbricas para su evaluación)Si C(X,Y) = 1 , plena consistencia entre X e YSi C(X,Y) = 0 , no hay consistencia entre X e Y

Juan Music T 20

Ejemplo:Supongamos en una carrera determinada, las siguientes variables

V1 = Perfil de Egreso definido por la carrera V2 = Currículo asociado a V1

V3 = Perfil de Egreso Efectivo3 gV4 = Competencias requeridas por el campo laboral

Indicadores simples de consistencia asociados a capacidad, proceso y resultados: p p , p yC1= C(V1, V2) capacidad C2= C(V2, V3) procesoC3= C(V3, V4) resultadoC3 C(V3, V4) resultado

Indicador compuestos de Desempeño

Indicador de Eficacia I1 = C1 * C2

Indicador de Pertinencia I2 = C3

Indicador de Eficacia – Pertinencia I3 = C1 * C2 * C3Indicador de Eficacia Pertinencia I3 = C1 C2 C3

Juan Music T 21

3.3 Metodología para el Aseguramiento de la Calidad en el Pregrado e Indicadores asociadosasociados

Es fundamental asegurar la calidad del pregrado en todas sus etapas3 etapas fundamentales son:3 etapas fundamentales son:

Etapa 1: Al Crear y diseñar las Carreras de PregradoEtapa 2: Durante el Proceso FormativoEtapa 2: Durante el Proceso FormativoEtapa 3: Resultados del Proceso Formativo y Sustentabilidad

Etapa 1: Al Crear y Diseñar las Carreras de Pregrado- Etapa 1: Al Crear y Diseñar las Carreras de Pregrado

i) Proceso de Creación de una CarreraEl t idElementos a considerar :

Coherente con la misión institucional Responda a las necesidades de la sociedad (Ejemplo: estudio de mercado) E t bl l ió t l d t d Establecer relación entre el pregrado y postgrado Se tienen las capacidades tanto humanas como materiales y se cuente con apoyo

institucional y externo ( Convenios, acuerdos, etc)

Juan Music T 22

ii) Diseño Curricular de las Carreras

a) Conceptos Fundamentales

-Compromiso de la- Postulantes a la carrera

Perfil de Egreso ≠ Perfil Profesional

Perfil de Egreso

Compromiso de la Institución - Empleadores que contrate a sus

egresados

(Conjunto de Competencias que la carrera - Debe permitir la

-Sociedad

que la carrera se compromete a desarrollar en todos sus

pinserción laboral

-Documento Normativo egresados)

- Precisoy no meramente descriptivo

- Realista -Criterio de Pertinencia para asignar recursos

d tieducativosJuan Music T 23

Perfil ProfesionalPerfil Profesional

Conjunto de Competencias que nos hablan del desempeño óptimo de una persona que lleva un tiempo ejerciendo la profesiónpersona que lleva un tiempo ejerciendo la profesión

Relación entre ambos

Perfil de Egreso

Experiencia Profesional

Formación continua

Perfil Profesional

Juan Music T 24

Conceptos claves para un adecuado diseño de una carrera basado en competenciabasado en competencia

Dominio de Desempeño

-Campo o Área específica profesional que dominarán los titulados.

Dominio de Desempeño -Prácticas profesionales típicas que garantizaremos que será capaz de realizar el recién titulado

C t i

- Se mira el mundo externo para definirlos

Asociadas a cada dominio de desempeño Competencias Asociadas a cada dominio de desempeñoLo que es capaz de hacer una persona en términos observables y evaluables

(Competencia ≠ Capacidad)

Indicadores de logro Saberes Esenciales (saber, saber hacer y saber ser) asociadas a cada

(Competencia ≠ Capacidad)

A qué nivel se desarrollará cada competencia( , y )

competencia ¿Qué tiene que saber el titulado? ¿Qué tiene que saber hacer el titulado? ¿Cómo tiene que saber ser el titulado?¿Cómo tiene que saber ser el titulado?

Juan Music T 25

Conceptos, características y componentes de las competencias

Concepto de Competencia

i) Competenciai) CompetenciaConjunto de atributos que describe lo que es capaz de hacer una persona en términos observables y evaluables. Como tales, las competencias son construcciones complejas que involucran áreas, o bien conjunto integrado de habilidades, conocimientos y actitudes que, al ser movilizados, permiten un comportamiento destacado en un ámbito específico. Describen lo que es capaz de saber, saber hacer y saber ser en términos observables y evaluables.

P l t t ibl ñ lPor lo tanto, es posible señalar:

• Una competencia es un desempeño, no la capacidad para un desempeño futuro. Por lo tanto es observable a través del comportamientolo tanto es observable a través del comportamiento.

• La competencia posee un saber (conceptual), saber hacer (procedimental) y saber ser (actitudinal) Las personas movilizan los conocimientos y la manera como hacenser (actitudinal). Las personas movilizan los conocimientos y la manera como hacen las cosas.

• La competencia siempre se relaciona con una capacidad movilizada para responderLa competencia siempre se relaciona con una capacidad movilizada para responder a situaciones cambiantes.

Juan Music T 26

ii) Información, conocimiento, saber

Es pertinente distinguir el alcance de estos tres términos

Por Información se entiende un conjunto o “colección de datos” que es factible j qencontrar en diferentes fuentes y soportes: libros, periódicos, Internet. Constituiría “el aspecto factual, descriptivo, del conocimiento”.

El conocimiento, por su parte, involucra un nivel de organización y estructuración explícita de los datos a partir de reglas o leyes

“El saber es “el conocimiento encarnado, implícito, internalizado en los actores sociales y en sus prácticas y comportamientos”, es decir, constituye un conocimiento del que un sujeto se ha apropiado

La educación, mediante sus procesos básicos interrelacionados, el de enseñanza y el aprendizaje, tiene como misión transformar la información y el conocimiento en saber.

Dado que las competencias son entendidas desde la perspectiva del sujeto que la desarrolla (alumno, aprendiz), desde la perspectiva de la distinción realizada entre ( p ) p pconocimiento y saber, es pertinente hablar de “saberes” (saber, saber hacer, saber ser, etc.). Juan Music T 27

iii) Componentes “formales” en la redacción de la competencia

Las competencias se formulan mediante un enunciado que debe contemplar:

• El agente o sujeto de la acción o proceso (“el egresado” o “el…(denominación del tít l f i l i i b d t ) “ l l ”) E t t dtítulo profesional: ingeniero, abogado, etc.), “el alumno”). Este componente puede ser tácito (por cuanto se sobreentiende) o explícito.

Luego debe consignarse un verbo que señala la acción o proceso que constituye el• Luego debe consignarse un verbo, que señala la acción o proceso que constituye el procedimiento o destreza axial de la competencia en cuestión (ejemplos: analizar, identificar, comprender, reconocer). El verbo puede aparecer conjugado o en infinitivo.

• La acción o proceso designado por el verbo debe ir acompañada o “anclada” en relación con un objeto (tema o asunto) sobre el que se aplica esa acción o proceso.

La combinatoria entre el verbo y su objeto (tema o asunto) configura la conducta, comportamiento u operación mental sobre la que versa la competencia.

• Finalmente se consigna la condición o criterio de ejecución o realización de dicha conducta, comportamiento u operación mental.

Juan Music T 28

Ejemplos de competencias

- Analiza procesos económicos básicos en distintas situaciones del contexto socioeconómico.

Acción o proceso Tema o Asunto Condición o criterio de ejecución p j

Conducta

.

Realización de dicha conducta

- Reconoce y comprende los procesos económicos, sociales, políticos y culturales fundamentales de la modernidad

Conducta Realización de dicha conducta

Carrera de Ingeniería CivilDominio de Competencia: Concebir, Proyectar y Diseñar Obras Civiles Ejemplos de Competencias: - [el alumno] analiza diferentes tipos de estructuras sometidas a cargas estáticas y dinámicas

oAnalizar diferentes tipos de estructuras sometidas a cargas estáticas y dinámicas

- Diseñar estructuras de hormigón armado y acero según normativa vigente

Juan Music T 29

Competencias y procesos didácticos

Estas nuevas miradas que abre la noción de competencias permiten, desde una perspectiva curricular, reconceptualizar los procesos didácticos y señalar que las competencias definen:

• los criterios para la selección de contenidos: ¿qué y para qué enseñar?

la concepción de contenidos y la forma de organizarlos: ¿cómo enseñar?• la concepción de contenidos y la forma de organizarlos: ¿cómo enseñar?

• su distribución en el tiempo: ¿cuándo enseñar?

• su desarrollo en el espacio: ¿dónde enseñar?

l d lid d d di j ó d ?• las modalidades de aprendizaje: ¿cómo aprender?

• la evaluación: ¿cómo y en qué momento evaluar? (sistemas e instrumentos de l ió )evaluación)

Juan Music T 30

Competencias e indicadores de logro

Una formulación adecuada de competencias requiere su desagregado en los indicadores de logro correspondientes.

Los indicadores (o niveles) de logro señalan la actualización de una competencia, establecen sus alcances en forma secuenciada, permiten graduar su desarrollo y observar desempeños (por ello se los puede denominar también como “evidencias p (p pde desempeño”).

Además, desde el punto de vista didáctico, los indicadores de logro orientan:

• la selección de metodologías de enseñanza• la elaboración de guías de actividadesg• la constatación de aprendizajes• la propuesta de evaluación

Para la redacción de indicadores de logro se puede recurrir, por ejemplo a la Taxonomía de Bloom (Dominios Cognitivo, Afectivo y Psicomotor)

Juan Music T 31

Características de las competencias

Una primera consideración es distinguir los tipos de competencias.

De manera global se reconocen las competencias genéricas y las competenciasDe manera global, se reconocen las competencias genéricas y las competencias específicas.

Las competencias presuponen capacidades potencialesLas competencias presuponen capacidades potenciales.

Estas se manifiestan por medio de las acciones o tareas que realiza una persona en una situación determinada.situación determinada.

Las capacidades no son evaluables; en cambio las competencias sí son verificables y evaluables.

La relación que existe entre ambas se puede expresar como sigue: una persona sin capacidades no puede ser competente; pero se puede inferir la u a pe so a s capac dades o puede se co pete te; pe o se puede e a

presencia de capacidades en personas competentes. Además, el logro de competencias va desarrollando capacidades.

Juan Music T 32

Ejemplo: Ingeniero Civil Dominios de DesempeñoSe pueden distinguir 3 dominios : Estos seríanSe pueden distinguir 3 dominios : Estos serían

- Concebir, Proyectar y Diseñar Obras CivilesPl ifi Di i i l C t ió d Ob Ci il- Planificar y Dirigir la Construcción de Obras Civiles

- Coordinar y Administrar Proyectos

Ejemplo: Derecho Dominios de DesempeñoSe pueden distinguir 3 dominios : Estos serían

- La representación Judicial de intereses públicos y privados- La representación Judicial de intereses públicos y privados- La representación extrajudicial de intereses públicos y privados- La asesoría jurídica de los mismos intereses

b) Etapas en el diseño curricular de una carrera

Etapa I: Construcción y Validación del Perfil de Egreso

Et II C t ió d l C í lEtapa II: Construcción del CurrículoJuan Music T 33

Etapa I: Construcción y Validación del Perfil de Egreso

i) El t t id lt l t ió lid iói) Elementos y actores a considerar y consultar para la construcción y validación del Perfil de Egreso

Misión InstitucionalProyecto

Educativo Institucional

Profesionales con experiencia

Institucional

Egresados

Perfil de Egreso

Carreras a nivel nacional e

internacional

y Titulados

Académicos

Empleadores

Académicos

Perfil Profesional

Colegios Profesionales

Juan Music T 34

ii) Construcción de la Matriz de Análisis de Competencias

Para cada dominio de desempeño asociado al perfil de egreso de lacarrera, se deben definir las competencias a desarrollar en losestudiantes con sus correspondientes indicadores de logro y a partirp g y pde ello los saberes esenciales.

El resultado de lo anterior lo llamaremos Matriz de Análisis de CompetenciasEl resultado de lo anterior, lo llamaremos Matriz de Análisis de Competencias

Esta matriz se muestra en la próxima figura

Principio Fundamental a considerar en su elaboración :

Just in Time (Justo a Tiempo) y no Just in Case (Por si Acaso)

Juan Music T 35

Matriz de Análisis de Competencias Indicador de logro 1.1.1Indicador de logro 1.1.2Indicador de logro 1.1.m1

Competencia 1.1Establecer Saberes Esenciales (S bI di d d l 1 2 1

Dominio de Desempeño 1 Competencia 1.2

Competencia 1 n

(Saber, Saber hacer, Saber Ser) para cada competencia

Indicador de logro 1.2.1Indicador de logro 1.2.2Indicador de logro 1.2.m2

Indicador de logro 1.n1.1Indicador de logro 1 n 2Competencia 1.n1 competenciaIndicador de logro 1.n1.2Indicador de logro 1.n1.m3

Indicador de logro 2.1.1Indicador de logro 2.1.2Competencia 2.1

Establecer Saberes

Dominio de Desempeño 2Perfil

de

Indicador de logro 2.1.m4

Competencia 2.2

Saberes Esenciales (Saber, Saber hacer, Saber Ser)

Indicador de logro 2.2.1Indicador de logro 2.2.2Indicador de logro 2.2.m5pde

EgresoCompetencia 2.n2

Saber Ser) para cada competencia

Indicador de logro 2.n2.1Indicador de logro 2.n2.2Indicador de logro 2.n2.m6

Indicador de logro n 1 1 E t bl

Dominio de Desempeño n

Indicador de logro n.1.1Indicador de logro n.1.2Indicador de logro n.1.m7

Competencia n.1

Competencia n 2

Establecer Saberes Esenciales (Saber, S b h

Indicador de logro n.2.1Indicador de logro n 2 2Competencia n.2

Competencia n.n3

Saber hacer, Saber Ser) para cada competencia

Indicador de logro n.2.2Indicador de logro n.2.m8

Indicador de logro n.n3.1Indicador de logro n.n3.2Indicador de logro n.n3.m9

Orden de la Validación Orden del Análisis

Indicador de logro n.n3.m9

Juan Music T 36

Etapa II: Construcción del Currículo

- Consiste básicamente en la elaboración de una estrategia formativa quepermita alcanzar el Perfil de Egreso previamente establecido, en uncontexto restringido de tiempo y recursos.

Perfil de Ingreso de los Estudiantes

Elementos fundamentales a

Elaborar Matriz de Correspondencia o Matriz de Competencias y Actividades Curriculares

fundamentales a considerar al

elaborar y evaluar

Estructuración del Plan de Estudio- Establecer la Malla Curricular

fDiseñar las diferentes actividades curriculares(asignaturas, módulos e integradores consecuente conla Matriz de Correspondencia y asignar un sistema de

édit (Ej l SCT)créditos (Ejemplo SCT)- Elegir métodos de enseñanza – aprendizaje- Determinar Sistema de Evaluación

Juan Music T 37

Matriz de Correspondencia o Matriz de Tributación o Matriz de Competencias yActividades Curriculares

Relaciona las competencias con las actividades curriculares

Ejemplo de Matriz de Correspondencia

Objetivo: en 3 semestres se debe alcanzar nivel de logro 2 en las competencias 1,3,4 y 5, y nivel de logro 3 en la competencia 2

Matriz Incorrectamente formulada

Semestre 1 Semestre 2 Semestre 3

A1 A2 A3 A4 A5 A6 A7 A8 A9 A10 A11 A12

C1 N1 N1 N1 N1 N2 N2

C2 N1 N1 N2 N2 N3 N3

C3 N1 N1 N2

C4

C5 N1 N1 N2

Juan Music T 38

Semestre 1 Semestre 2 Semestre 3

Caso 2: Matriz Incorrectamente formulada

A1 A2 A3 A4 A5 A6 A7 A8 A9 A10 A11 A12C1 N1 N1 N1 N1 N1 N1C2 N1 N1 N2 N2 N3 N3C3 N1 N1 N2C4 N1 N1 N1C5 N1 N1 N2

En esta matriz las competencias 1 y 4 no son desarrolladas en el nivel de logro esperado

Caso 3: Matriz Incorrectamente formulada

Semestre 1 Semestre 2 Semestre 3

A1 A2 A3 A4 A5 A6 A7 A8 A9 A10 A11 A12

C1 N1 N1 N2

C2 N1 N1 N2 N2 N3 N3C2 N1 N1 N2 N2 N3 N3

C3 N1 N1 N2 N2

C4 N1 N1 N2

C5 N1 N1 N2

En esta matriz las actividades 3 y 7 no desarrollan ninguna de las competencias

Juan Music T 39

Semestre 1 Semestre 2 Semestre 3

Caso 4: Matriz Correctamente formulada

Semestre 1 Semestre 2 Semestre 3

A1 A2 A3 A4 A5 A6 A7 A8 A9 A10 A11 A12

C1 N1 N1 N1 N1 N2 N2

C2 N1 N1 N2 N2 N3 N3

C3 N1 N1 N2

C4 N1 N1 N2C4 N1 N1 N2

C5 N1 N1 N2

Matriz correcta: Todas las actividades contribuyen al desarrollo de las competencias en los niveles de logro acordados

Juan Music T 40

Ejemplo de Malla Tradicional

Juan Music T 41

Malla por Ciclos de Formación

Juan Music T 42

Malla por Competencias

Juan Music T 43

Se sugiere para la Etapa 1 definir claramente los indicadores asociados

Para ello considerar que:

Lo importante es tener un perfil de egreso coherente con el PEI, claro, preciso y validadoy que su correspondiente plan de estudio programas de actividades o asignaturasy que su correspondiente plan de estudio, programas de actividades o asignaturas,métodos de enseñanza – aprendizaje y sistema de evaluación respondan a él,permitiendo su logro por parte de los egresados durante su proceso formativo.Ejemplo de Indicadores

Indicador de Capacidad:

% de carreras rediseñada e implementadas- % de carreras rediseñada e implementadas-Grado de logro (consistencia) en el diseño de la carrera respecto a estándarestablecido institucionalmenteIndicadores de Proceso:

-% de carreras rediseñadas y alineadas con PEI

Indicadores de Desempeño:Indicadores de Desempeño:

-Tasa de aprobación de asignaturas entre los que cursaron de currículo rediseñado ycurrículo anterior- Tasa de deserción de los alumnos entre los de currículo rediseñado y currículo anterior

Juan Music T 44

Etapa 2: Durante el Proceso Formativo

Este proceso se inicia con la admisión de los estudiante y finaliza cuando estos se han titulados

Proceso Formativo

Admisión Titulados

P i S d TEvaluación de las características de

los estudiantes

Seguimientode los

Titulados

PrimerCiclo

SegundoCiclo

TercerCiclo

EvaluaciónCompetencias

EvaluaciónCompetencias

EvaluaciónCompetencias

-El foco para su análisis son los estudiantes-Su objetivo fundamental es evaluar el aprendizaje de los estudiantes

Juan Music T 45

Aspectos fundamentales a evaluar:- Perfil de Ingreso de los estudiantesPerfil de Ingreso de los estudiantes

Instrumento ad-hoc para medir las competencias iniciales de los estudiantes y de estaforma determinar la brecha con respecto a las consideradas en el diseño de cadacarrera . En función de ella se determinan las acciones remediales a llevar a cabo.

- Medición de logros de competencias al termino de cada ciclo formativoSu objetivo es ir monitoreando el nivel de logro de competencias y poder tomardecisiones.

Algunos indicadores de desempeño relevantes serían:Eficacia:- Nivel de logro de competencias al termino de cada ciclo (se pueden dividir entre

competencias genéricas y competencias especificas)- Mejoramiento de rendimiento por acciones remedialesEficiencia:- Tasa de deserción por cohorte al termino de cada ciclo- Tasa de retención por cohorte al termino de cada ciclo- Tiempo real para aprobar cada ciclo por cohorte con respecto a tiempo según plan de

estudio- Tasa de retención por cohorte a nivel de 1 y 2 año- Tasa de aprobación de primer año

Juan Music T 46

Etapa 3: Resultados del Proceso Formativo y Sustentabilidad

En esta etapa es fundamental las opiniones del mundo externo- Consultar a: empleadores, colegios profesionales, profesionales del área, ex alumnos

etcetcAlgunos indicadores de desempeño relevantes serían:

Eficacia:Eficacia:- Nivel (o %) de logros de competencias con respecto a las explicitadas en el perfil de

egreso de la carrera (se puede dividir en competencias genéricas y especificas)- Tasa de satisfacción de egresados con respecto a lo prometido- Tasa de satisfacción de egresados con respecto a lo prometido

PertinenciaPorcentaje de carreras acreditadas- Porcentaje de carreras acreditadas

- Años promedios de acreditación de las carreras- Calidad de los alumnos que ingresan a la carrera

Tasa de Empleabilidad de los Titulados a 6 meses- Tasa de Empleabilidad de los Titulados a 6 meses - Tasa de satisfacción de empleadores- Tiempo promedio de lograr los titulados el primer trabajo

Ni l ti d l tit l d t l di d l i t- Nivel remunerativo de los titulados con respecto al promedio del sistema

Juan Music T 47

Integridad:

- Nivel de cumplimiento con los compromisos explícitos contraídos con los estudiantes al ingresar a ella

- Nivel de cumplimiento con los compromisos explícitos con profesores y funcionariosp p p p y

Eficiencia:

- Tasa de titulación de estudiantes matriculados por cohorte- Tiempo real de titulación por cohorte con respecto a tiempo considerado en plan de

estudio- Tasa de deserción de estudiantes matriculados por cohorte- Tasa de retención de estudiantes matriculados por cohorte

Sustentabilidad:

- Tasa de ocupación de vacantes de primer añoTasa de ocupación de vacantes de primer año - Ingresos de la carrera versus costos de ella - Índice de rotación de los docentes- Costo de la carrera para el titulado versus ingresos al primer añoCosto de la carrera para el titulado versus ingresos al primer año

Juan Music T 48

Conclusión:

- El objetivo de generar indicadores relevantes, en forma económica, en que se integren diversos criterios de evaluación, es una tarea fundamental para una buena gestión del pregradogestión del pregrado

E f d t l t l f tili i ió- Es fundamental centrar los esfuerzos en utilizar una visión sistémica cohesionada con una lógica muy estricta de consistencia entre lo que se pretende lo que se hace loconsistencia entre lo que se pretende, lo que se hace, lo que se emplea y lo que se obtiene

- La calidad de las Instituciones de Educación Superior depende fundamentalmente de las propias Institucionesp p p

Juan Music T 49

4) Acreditación de Carreras de Pregrado según la CNA4 1 ¿Qué permite el Proceso de Acreditación?

Ni l 3 d lid d

Verificación Externa 2

4.1 ¿Qué permite el Proceso de Acreditación?

Nivel 2 de calidad

Nivel 3 de calidad

del

ejor

a Autoevaluación de la carrera

Verificación Externa 1 e de ca dad

del

ejor

aNivel 1 de calidad

Autoevaluación de la carrera

ecuc

ión

dan

de

Me de la carrera

Plan de Mejora

Autoevaluación de la carrera ec

ució

n d

an d

e M

eNivel 1 de calidad

Plan de Mejora Eje

Pla

Plan de Mejora

Eje

Pla

Juan Music T 50

4 2 Dimensiones y Criterios4.2 Dimensiones y Criterios

Se establece 3 Dimensiones con sus respectivos criterios para laevaluación con fines de acreditación para Carreras y Programas deevaluación con fines de acreditación para Carreras y Programas dePregrado. Estas son:

Dimensión 1: Perfil de Egreso y Resultados

Criterios:

– Perfil de EgresoEstructura Curricular– Estructura Curricular

– Efectividad del Proceso Enseñanza Aprendizaje– Resultados del Proceso de Formación– Vinculación con el Medio

Juan Music T 51

Dimensión 2: Condiciones de Operación

Criterios:

– Estructura Organizacional, Administrativa y Financiera– Recursos Humanos

Infraestructura Apoyo Técnico y Recursos para la Enseñanza– Infraestructura, Apoyo Técnico y Recursos para la Enseñanza

Dimensión 3: Capacidad de Autorregulación

Criterios:

– Propósitos– Integridad

P d A t l ió– Proceso de Autoevaluación

Juan Music T 52

Dimensión CriteriosCantidad de Aspectos a

EvaluarEvaluarPerfil de Egreso 6

Estructura Curricular 4Perfil de Egreso y

Resultados(20 Aspectos)

Efectividad del Proceso Enseñanza Aprendizaje

4

R lt d d l P 2(20 Aspectos) Resultados del Proceso Formativo

2

Vinculación con el Medio 4

Condiciones de Operación

Estructura Organizacional, Administrativa y Financiera

6

Recursos Humanos 4Operación(14 Aspectos)

Recursos Humanos 4Infraestructura, Apoyo Técnico y

Recursos para la Enseñanza4

Capacidad de Autoevaluación(16 Aspectos)

Propósitos 3Integridad 3

Proceso de A to E al ación 10(16 Aspectos) Proceso de Auto Evaluación 10Total 50Juan Music T 53

4.3 Aspectos a evaluar en cada Criterio

Dimensión: Perfil de Egreso y Resultados (20)

I) Perfil de EgresoI) Perfil de Egreso Aspectos que se evalúan según CNA (6):

F l ió lí it I l l t id h bilid d tit d- Formulación explícita: Incluye los contenidos, habilidades y actitudes que se esperadesarrollen los estudiantes al momento de su titulación y otros resultados deaprendizaje que sean relevantes

- Claridad y concreción de la formulación, y su capacidad para orientar la definición delplan de estudios

- Actualización, en función de los requerimientos disciplinarios y profesionales

- Consideración de la misión institucionalConsideración de la misión institucional

- Difusión interna y externa

- Revisión Periódica Juan Music T 54

Se utilizan escala de calificación con 3 niveles en la evaluación:

a) Cumple (CT), Cumple Parcialmente (CP)y No Cumple (NC)

b) o bien Cumple (CT) Cumple Parcialmente nivel 3 Cumple Parcialmente Nivel 2b) o bien Cumple (CT), Cumple Parcialmente nivel 3, Cumple Parcialmente Nivel 2,Cumple Parcialmente Nivel 1 y No Cumple (NC)

El concepto implícito es la existencia de Rúbrica por criterio y aspecto.

Las Agencias, han creado o están creando estas rúbricas para orientar el trabajo delos pares evaluadores, sus respectivos Consejos de Acreditación y a las propiascarreras en su proceso de autoevaluación.

Se muestra, a modo de ejemplo, la creación de una Rúbrica para evaluar el Perfil dej p pEgreso, considerando los aspectos definidos por la CNA.

Juan Music T 55

Aspecto a evaluar CT CP NC

Formulación Explicita del Perfil i) Se llevaron a cabo las dos etapasfundamentales: Construcción yfundamentales: Construcción y Validación del perfil.Evaluar Evidencias Concretas

ii) Se explicitan:-Dominios de Competencias-Dominios de Competencias-Competencias con sus niveles de logro y sus saberes esenciales en cada dominio Matriz de Análisis de CompetenciasMatriz de Análisis de Competencias

iii) Claridad en su formulación

Claridad, Concreción y orientación Formulación de:para definir plan de estudio - Matriz de Correspondencia

Actualización - Existe y se aplica metodología y procedimiento claro para su actualización, con consulta al medio externocon consulta al medio externo

Misión Institucional - Incorpora sello institucional y es consistente con proyecto Educativo InstitucionalInstitucional

Difusión interna y externa - Conocido por estudiantes, docentes, empleadores, postulantes etc.

Revisión Periódica - Establecida y se aplica periodicidad yRevisión Periódica Establecida y se aplica periodicidad y metodología para su actualización

Juan Music T 56

II) Estructura Curricular

Aspectos que se evalúan según CNA (4):- La Organización Curricular

L C t id d l Pl d E t di- Los Contenidos del Plan de Estudios- Los métodos pedagógicos- Consistencia entre el perfil de egreso, el plan de estudios y las estrategias

pedagógicas

III Efectividad del Proceso Enseñanza AprendizajeIII Efectividad del Proceso Enseñanza AprendizajeAspectos que se evalúan según CNA (4):

C it i d Ad i ió M i d d i ió i d l- Criterios de Admisión. Mecanismos de admisión apropiados a las exigencias del plan de estudio

- Plan de estudio y métodos pedagógicos apropiados a las características de l l d itidlos alumnos admitidos

- Conocimiento acerca de la progresión de los alumnos y acciones en consecuencia

- Mecanismos de apoyoJuan Music T 57

IV Resultados del Proceso Formativo

Aspectos que se evalúan según CNA (2):

- Progresión de los estudiantes Resultados observados y su evolución en el- Progresión de los estudiantes. Resultados observados y su evolución en el tiempo (tasas de titulación, tiempo de egreso y titulación)

C li i t d l P fil d S i i t d l f ti- Cumplimiento del Perfil de egreso: Seguimiento de los procesos formativos a través de opiniones de egresados, vínculos con empleadores

V Vinculación con el Medio

Aspectos que se evalúan según CNA (4):Aspectos que se evalúan según CNA (4):

- Los contactos con el medio externo. Conocimiento del medio disciplinario y profesionalprofesional

- Impacto del medio en la definición y revisión del perfil de egreso- La investigación- La Extensión y Prestación de Servicios

Juan Music T 58

Dimensión: Condiciones de Operación (14)I) Estructura Organizacional Administrativa y FinancieraI) Estructura Organizacional, Administrativa y Financiera

Aspectos que se evalúan según CNA (6):

- La adecuación de la estructura organizacional. Organización interna quefacilita o al menos permite el desarrollo eficiente de la carrera

- Las calificaciones y efectividad del cuerpo directivo

Claridad y delimitación de las funciones del cuerpo directivo- Claridad y delimitación de las funciones del cuerpo directivo

- Los mecanismos de participación y comunicación en la comunidaddé i d tacadémica o docente

- Los mecanismos para garantizar la disponibilidad de recursos y sup g p yasignación

- Sustentabilidad financieraSustentabilidad financiera

Juan Music T 59

II Recursos HumanosAspectos que se evalúan según CNA (4):

- Tamaño y composición del cuerpo docente. Dotación docente suficiente encuanto a número, calificaciones y dedicacióncuanto a número, calificaciones y dedicación

- Políticas de gestión de los recursos humanos: promoción y renovación- Personal administrativo y de apoyo suficiente

F ió d ll d l h i li d- Formación y desarrollo de los recursos humanos: acciones realizadas paraasegurar el desarrollo académico y la actualización del cuerpo docente

III Infraestructura, Apoyo Técnico y Recursos para la EnseñanzaAspectos que se evalúan según CNA (4):- Disponibilidad de infraestructura básica: recintos e instalaciones, espacioDisponibilidad de infraestructura básica: recintos e instalaciones, espacio

para biblioteca, laboratorios, etc.- Disponibilidad de recursos esenciales para la docencia: dotación y uso de

recursos en biblioteca laboratorios computadores y equiposrecursos en biblioteca, laboratorios, computadores y equipos- Mecanismos para reposición y actualización de los recursos- Evidencia de uso de los recursos concordante con los requerimientos del

plan de estudiosplan de estudiosJuan Music T 60

Dimensión: Capacidad de Autorregulación (16)

I) PropósitosAspectos que se evalúan según CNA (3):

- La especificidad de la carrera. Metas y objetivos. Perfil de egreso - El contexto disciplinario, profesional u ocupacional- La evaluación del logro de los propósitos declarados

II) IntegridadII) Integridad Aspectos que se evalúan según CNA (3):

- La consistencia interna- La información y su difusión- Los reglamentos y normativas internasg y

Juan Music T 61

III Proceso de Auto EvaluaciónAspectos que se evalúan según CNA (10):a) Proceso Autoevaluación- Nivel de participación interna - Nivel de participación externa (empleadores egresados informantes- Nivel de participación externa (empleadores, egresados, informantes

claves) - Socialización y consenso de las conclusiones

C id d d áli i íti- Capacidad de análisis crítico

b) Informe de Autoevaluación

- Recoge principales conclusiones del proceso de auto evaluación- Identifica claramente fortalezas y debilidades- Identifica claramente fortalezas y debilidades- Fortalezas y debilidades se sustentan en evidencias- Informe es conocido y respaldado por la comunidad académica- Plan de mejoramiento se hace cargo de principales problemas identificados

en la auto evaluación- Plan de mejoramiento es realista y verificable

Juan Music T 62

4.4 Puntos críticos detectado como Par Evaluador de Carreras de Pregrado y Miembro de Consejo de Acreditación

Se exponen los aspectos más críticos que, a mi juicio, se concluyen de laexperiencia vivida en acreditación de carreras

Dimensión 1: Perfil de Egreso y ResultadosDimensión 1: Perfil de Egreso y Resultados

A mi juicio, en esta dimensión se detectan las mayores debilidades en las carreras.

i) Perfil de Egreso

- Muchas veces no existe en la institución un Proyecto Educativo explícito que definaclaramente el SELLO que la institución quiere darle a todos sus egresados y que seclaramente el SELLO que la institución quiere darle a todos sus egresados y que serefleje en el perfil de egreso de sus carreras.

Conclusión: Insuficiente relación entre Perfil de Egreso, Misión y Proyecto EducativoInstitucional. Falta de elementos propios del sello institucional.

- En general no existe en las carreras (y a veces en la institución) un procedimientoclaramente establecido para llegar a definir el perfil de egreso.No se distinguen dos fases que son fundamentales: La fase de Construcción delPerfil de Egreso y la fase de su ValidaciónPerfil de Egreso y la fase de su Validación.Conclusión:. Falta mayor precisión de cómo se llegó a formular o definir el perfil de egreso. Baja participación del mundo externo en el perfil de egreso de la carrera( d l d t )(egresados, empleadores, etc)

Juan Music T 63

- Es muy general la descripción de las competencias que se espera logrenlos egresados de la carrera Definición de competencia relacionadas con ellos egresados de la carrera. Definición de competencia relacionadas con elproceso educativo y no con el desempeño profesional.

- No se definen niveles de logros de cada competencia y sistema deg p yevaluación

- En general, no hay una explicitación de los Dominios de Desempeño queconforman la carrera las competencias asociadas a dichos dominiosconforman la carrera, las competencias asociadas a dichos dominioscon sus respectivas evidencias y estándares de calidad y los saberesesenciales (saber, saber hacer, saber ser) que soportan o sustentan aestas competencias y que se espera logren los estudiantes en su procesoformativoformativo.

Muchas veces no es fácil ver la correlación entre Perfil de Egreso Matriz- Muchas veces, no es fácil ver la correlación entre Perfil de Egreso, Matrizde Correspondencia y Plan de Estudios (en general los informes deautoevaluación no lo explicitan).

- Falta de una correlación clara y explícita entre Perfil de Egreso, Plan deEstudios, las diferentes asignaturas y actividades de la carrera (mallacurricular) y los programas de estudios (estos en general no explicitan lascompetencias a lograr y la forma de evaluarlas, sino se centran en loscompetencias a lograr y la forma de evaluarlas, sino se centran en loscontenidos). Esta es una importante debilidad detectada.

Juan Music T 64

ii) Estructura Curricular

- Si bien en la mayoría de las carreras se establecen ciclos de formación( ejemplo: eningeniería civil los ciclos: Ciencias básicas, Ciencias de la Ingeniería y Formacióng , g yProfesional, además de la formación transversal), no están definidas lascompetencias que se espera logren los estudiantes en cada uno de ellos y la formade evaluarlas.

- Las carreras que entregan un grado de licenciado, en general, no tienen definido elperfil a dicho nivel con sus competencias y requisitos explícitos para otorgarlo.

- Escasa consistencia entre el perfil de egreso el plan de estudio y las estrategiasEscasa consistencia entre el perfil de egreso, el plan de estudio y las estrategiaspedagógicas. Ejemplo: Se declara formación por competencia y sólo se usanmétodos tradicionales de enseñanza y evaluación basada en conocimientos.

iii) Efectividad del proceso enseñanza aprendizajeiii) Efectividad del proceso enseñanza aprendizaje

Escasos mecanismos sistemáticos para:

E li it l fil d i d l t di t l ió id- Explicitar el perfil de ingreso de los estudiantes y su evaluación y consideraracciones en función del tipo de estudiantes que ingresan a la carrera.Ejemplo: programas remediales o de apoyo a los estudiantes deficitariosacadémicamente.M di l fi i i fi i d l d ñ di j- Medir la eficiencia y eficacia del proceso de enseñanza – aprendizaje.

- Establecer índices de alerta de rendimiento de los estudiantes.- Falta de iniciativas de innovación pedagógica (uso de TIC, nuevos métodos deevaluación, diversificación en las estrategias de enseñanza, etc)evaluación, diversificación en las estrategias de enseñanza, etc)

Juan Music T 65

- Ausencia de instancias formales en la carrera o no aplicación sistemática deellas para medir los logros de los est diantes d rante s proceso de formaciónellas para medir los logros de los estudiantes durante su proceso de formaciónen relación a las competencias definidas en el perfil de egreso (sólo la evaluaciónque hacen los profesores en cada asignatura mediante las notas de aprobación delos cursos))

- No se han creado instrumentos específicos para ir midiendo la progresión de losestudiantes frente a su proceso formativo.

Admisión Titulados

Proceso Formativo

Evaluación de las características de

los estudiantes

Seguimientode los

Titulados

PrimerCiclo

SegundoCiclo

TercerCiclo

EvaluaciónC t i

EvaluaciónC t i

EvaluaciónC t iCompetencias Competencias Competencias

Juan Music T 66

iv) Resultados del Proceso de Formación

Aquí se detectan importantes debilidades

- Falta en la Institución y en la carrera un Sistema explicito de Aseguramiento de Calidad

- Escasos mecanismos para evaluar las competencias realmente logradas por losestudiantes en su proceso formativo

Se evalúan fundamentalmente conocimientos. Se evalúan fundamentalmente conocimientos. No se explicitan rúbricas para evaluar competencias. No hay una metodología explicita para medir el % de logro de las competencias

declaradas en el perfil de egreso Determinación de Brecha

- Sistemas de información para la gestión no alineados con indicadores para medir resultados delproceso de formación.

Dificultad para conocer en tiempo real:. Tasas de titulación por cohorte. Tasas de retención por cohorte. Tiempo de titulación en la carrera. Tasas de aprobación de las diferentes actividades de la carrera

- Escasas mediciones para conocer, por una parte, la opinión de los egresados de la carrera conrespecto a nivel de satisfacción de la formación recibida y, por otra, indicadores de inserciónlaboral y empleabilidadlaboral y empleabilidad.

Juan Music T 67

v) Vinculación con el Medio

-Débil relación con los empleadores para retroalimentar el perfil de egresoDébil relación con los empleadores para retroalimentar el perfil de egreso.

-En general, no hay una política definida en la carrera que permita medir larelación entre investigación y docencia.

-No hay una política clara en la unidad respecto a extensión y prestación deservicios. Se deja a la iniciativa de cada académico.

-En instituciones que explicitan en su misión la investigación, los académicosque sustentan la carrera muestran bajo nivel de productividadque sustentan la carrera, muestran bajo nivel de productividad.

Juan Music T 68

Dimensión 2: Condiciones de Operación

i) Estructura Organizacional, Administrativa y Financiera

- Salvo casos muy puntuales, la unidad de la cual depende la carrera cumple los aspectos a evaluaraspectos a evaluar.

- Los casos que no cumple se refiere fundamentalmente a problemas de estructura organizacional o de recursos financieros para su sustentabilidad.

ii) R Hii) Recursos Humanos

- Los principales puntos críticos son:. Tamaño no adecuado del cuerpo docentea a o o adecuado de cue po doce te. No hay evaluación real del quehacer de los académicos (evaluación académica). No hay una política de renovación del cuerpo de académico

iii) Infraestructura, Apoyo Técnico y Recursos para la enseñanza

- En este aspecto las carreras han ido mejorando sustancialmente- Se puede afirmar que el aspecto que aún está en etapa de fortalecimiento, es

contar con un Courseware, que apoye el proceso de enseñanza – aprendizaje de los estudiantes.

Juan Music T 69

Dimensión 3: Capacidad de Autorregulación

A mi juicio, el aspecto a comentar tiene que ver con la disposición de la carrera de asumir la acreditación como un proceso de mejora continua y no como un fin en si mismo.en si mismo.

i) Propósitos

- El aspecto que está bastante ausente, es explicitar un Plan de Desarrollo de la Carrera, que no es lo mismo que un Plan de Desarrollo de la Unidad de la cual depende. Las carreras en general no presenta dicho plan.

ii) Integridad

- Salvo casos especiales, este criterio en general se cumple. Cuando se detectan problemas, tienen que ver con reglamentación no actualizada o faltante e información y/o material de difusión de la carrera incoherente.

Juan Music T 70

iii) Proceso de Autoevaluación

A mi juicio, este es un aspecto muy importante de verificar por los Pares Externos.Aquí hay dos aspectos claves que el Comité DEBE evaluar y emitir unaAquí hay dos aspectos claves que el Comité DEBE evaluar y emitir una opinión precisa:

¿Se realizó efectivamente una autoevaluación con todas las ¿características que ella debe tener?

Algunas características claves:- Proceso de autoevaluación bien organizado- Proceso participativo, incorporando a todos los actores internos y externos a la

institución- Análisis crítico y evaluación con indicadores de los principales procesosAnálisis crítico y evaluación con indicadores de los principales procesos- Sociabilizado y consensuadas las conclusiones- Plan de mejoramiento coherente con cada debilidad encontrada

¿Qué opinan de la calidad del Informe de Autoevaluación?

Juan Music T 71

Aspectos críticos detectados son:

En relación al proceso de autoevaluación:

- En un caso extremo (aunque hay casos reales) la carrera realmente NO realizó un- En un caso extremo (aunque hay casos reales) la carrera realmente NO realizó un proceso de autoevaluación, sino mas bien, encargó a un equipo que escribiera un “informe de autoevaluación”. Esto es fácil de detectar durante la visita de pares.

- Sólo participaron en el proceso de autoevaluación los actores internos.- Las conclusiones del proceso No fueron sociabilizadas y/o consensuadas.- La autoevaluación se centró en describir y analizar procesos pero no en evaluarlos

con instrumentos e indicadores adecuados.

En relación al Informe de Autoevaluación:

- El informe no recoge las principales conclusiones del proceso de autoevaluaciónEl informe no recoge las principales conclusiones del proceso de autoevaluación- No identifica claramente las fortalezas y debilidades de la carrera o bien éstas no se

sustentan en evidencias.- El informe no es conocido por todos los actores relevantes.- No se plantea un adecuado plan de mejoramiento, explicitando las acciones,

responsables, metas e indicadores para superar cada una de las debilidadesdetectadas en el proceso de autoevaluación.

Juan Music T 72

Requisitos AdicionalesCarreras que se presentan a una nueva acreditaciónq p

Cuando una carrera se presenta a una nueva acreditación, existe:- Un dictamen de la CNA o Agencia Acreditadora, que señala g

claramente las debilidades que debe superar la carrera, antes de presentarse al nuevo proceso de acreditación.

- Existe un Plan de Mejoramiento comprometido en el anterior proceso de acreditaciónproceso de acreditación

Por lo tanto, la carrera debe demostrar que ha avanzado en superar las debilidades señaladas en el dictamen y que, además, se implementó el plan de mejoramiento comprometidoimplementó el plan de mejoramiento comprometido.

Conclusión:En general, las carreras No explicitan y NO demuestran con evidencias convincentes en el informe de autoevaluación que se haevidencias convincentes en el informe de autoevaluación, que se ha avanzado en superar las principales debilidades del proceso anterior y se implemento el plan de mejoramiento comprometido.

Juan Music T 73

5) Organización del Informe de Autoevaluación de Carreras

Sugerencia de Índice del Informe de Autoevaluación de CarreraSugerencia de Índice del Informe de Autoevaluación de CarreraI IntroducciónII Marco de Referencia

2.1Marco InstitucionalDebe contener como mínimo:Debe contener como mínimo:

- Descripción general de la Universidad- Misión, Visión y Valores- Plan Estratégico Corporativo

Proyecto Educativo Institucional- Proyecto Educativo Institucional- Organigrama de la Universidad (destacar con color los cargos que tienen que ver con las carreras de pregrado)

2.2 Facultad XXXXX (si corresponde)Debe contener como mínimo

Descripción de la Fac ltad- Descripción de la Facultad- Plan Estratégico de la Facultad- Formación de Pregrado en la Facultad- Estructura organizacional de la Facultad

C l t t á i d l F lt d.Colocar estructura orgánica de la Facultad. Explicar claramente cómo se administra la Facultad, haciendo un cuadro que explicite el rol que le corresponde

a las autoridades unipersonales y colegiadas.2.3 Escuela o Departamento YYYYY (según corresponda)

D b t í iDebe contener como mínimo- Descripción de la Escuela- Plan Estratégico de la Escuela- Estructura organizacional de la Escuela

Juan Music T 74

2.4 Carrera ZZZZZDebe contener como mínimo- Descripción de la Carrera (Explicitando Sedes y modalidades en que se dicta)- Descripción de la Carrera (Explicitando Sedes y modalidades en que se dicta)- Plan Estratégico de Carrera- Administración de la Carrera

. Explicar claramente cómo se administra la Carrera, haciendo un organigrama ad-hoc de ella(compatible conlo descrito en los puntos anteriores) y un cuadro que explicite el rol que le corresponde a las autoridadeslo descrito en los puntos anteriores) y un cuadro que explicite el rol que le corresponde a las autoridadesunipersonales y colegiadas (Ejemplo: Quién es responsable del cumplimiento del Perfil de Egreso,Seguimiento de egresados, progresión de los estudiantes, contacto con empleadores, prácticasprofesionales, actividad de titulación, atención de estudiantes (del punto de vista académico ysocioeconómico) etc.

2.5 Avances con respecto al anterior proceso de acreditación (si corresponde)Debe contener como mínimo- Explicación de acciones realizadas para mejorar las debilidades encontradas en anterior proceso de acreditación y

l lt d bt idlos resultados obtenidosIII Evaluación de la calidad de la formación ofrecida3.1 Dimensión I: Perfil de Egreso y Resultados3.1.1Criterio: Perfil de EgresoDebe contener como mínimo

- Formulación del Perfil de egreso de la Carrera, explicitando:– Descripción del Perfil de egreso, explicitando claramente las competencias genéricas y especializadas.– Explicar cómo fue el proceso de construcción y validación del Perfil de Egreso, la periodicidad de su revisión

/ t li ió l i d dif ió t t i l i t ty/o actualización, y los mecanismos de difusión tanto a nivel interno como externo– Explicitar los dominios de desempeños y competencias asociadas a cada dominio. (Elaborar Matriz de

Análisis de Competencias, es decir, contiene dominios – competencias asociadas a cada uno de ellos yniveles de logro de las competencias)

Juan Music T 75

- Formulación del perfil a nivel de Licenciado (si corresponde), explicitando:– Las competencias genéricas y especializadas y los requisitos para su obtención

- Evaluación del criterio y resultados- Evaluación del criterio y resultadosPara ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

3.1.2 Criterio: Estructura CurricularDebe contener como mínimoDebe contener como mínimo

- Organización Curricular y descripción de cómo está organizado el Plan de Estudio- Elaborar matriz de correspondencia (es decir, relación entre competencias y actividades curriculares)- Mostrar relación entre dominios de desempeño definidos, actividades curriculares y niveles de logro. Para esto

colocar en el informe Malla curricular de la carrera, destacando que actividades contribuyen a cada dominio decolocar en el informe Malla curricular de la carrera, destacando que actividades contribuyen a cada dominio dedesempeño (Malla con distintos colores) y, el número total de créditos asociados a cada dominio de desempeño.

- Descripción de los métodos de enseñanza utilizados en la Carrera- Descripción del proceso de prácticas y titulación.- Esquema de cómo se elabora un programa de asignatura, destacando como se explicitan las competencias aq p g g , p p

desarrollar, los métodos pedagógicos a utilizar y los criterios de evaluación.- Evaluación del criterio y resultados

. Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

3.1.3 Criterio: Efectividad Proceso Enseñanza AprendizajeDebe contener como mínimo

- Criterios de Admisión- Diagnóstico del Perfil de Ingreso de los estudiantes y planes remediales asociados.- Mecanismos e instrumentos de evaluación para el logro de las competencias del Perfil de egreso.- Evaluación de la calidad de la docencia

Juan Music T 76

- Análisis de progresión de los estudiantes– Causas de deserción, conteniendo los indicadores de reprobación y deserción.

A i di di i ió i– Acciones tendientes a su disminución progresiva- Mecanismos de Apoyo a los estudiantes (académicos y socioeconómicos)- Evaluación del criterio y resultados

Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:lt d d t d i f t l i di d i d t )resultados de encuestas de informantes clave, indicadores asociados, etc.)

3.1.4 Criterio: Resultados del Proceso de FormaciónDebe contener como mínimo:- Eficacia y eficiencia del proceso de enseñanza

Eficacia:– Nivel de logro del Perfil de Egreso

Eficiencia:– Tasa de titulación por cohorte– Tiempo real de titulación– Tasa de deserción por cohorte

- Seguimiento de egresados- Vinculación con empleadores- Formación continua- Evaluación del criterio y resultados

Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

Juan Music T 77

3.1.5 Criterio: Vinculación con el Medio

D b í iDebe contener como mínimo:

- Actualización profesional y disciplinar del cuerpo de académico- Contacto sistemático con el medio social, productivo y de servicios

– Descripción de la participación del sector externo en la revisión y validación del Perfil de Egreso.– Promoción de la participación de los estudiantes en actividades profesionales y disciplinares

- Políticas y áreas de investigación- Políticas y actividades de extensión y prestación de servicios- Evaluación del criterio y resultados

– Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

3.1.6 Evaluación global y resultados de la dimensión Perfil de Egreso y Resultados

- Fortalezas- Debilidades

Juan Music T 78

3.2 Dimensión II: Condiciones de Operación

3.2.1Criterio:Estructura Organizacional, Administrativa y FinancieraDebe contener como mínimo:

- Estructura organizacional de la Unidad y su vinculación con la carrera- Equipo directivo relacionado con la administración de la Unidad y Carrera, sus funciones específicas en ella y sistemaq p y , p y

de evaluación de desempeño.- Mecanismos de participación de los académicos- Recursos financieros de la Carrera, su administración y control (cuadro ad-hoc)- Evaluación del criterio y resultados

– Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

3.2.2 Criterio: Recursos HumanosDebe contener como mínimo:

- Políticas de gestión de Recursos Humanos.. Señalar sistema de contratación, inducción, perfeccionamiento, jerarquización, evaluación, incentivos ydesvinculación del personal.

. Compromiso de desempeño del personal y su evaluación- Descripción del cuerpo docente de la Carrera (Se refiere a académico-docentes y profesores horas de la unidad de la

cual depende la Carrera y de otras personas y unidades académicas que prestan servicios a la Carrera),explicitando su nivel de formación y experiencia (Hacer un cuadro claro al respecto)

D i ió d l l d l d i- Descripción del personal de apoyo a la docencia- Evaluación del criterio y resultados

Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

Juan Music T 79

3.2.3 Criterio: Infraestructura, Apoyo Técnico y Recursos para la Enseñanza

Debe contener como mínimo:

- Descripción de Plataforma de apoyo al proceso de enseñanza – aprendizaje (incorporar cuadro con estadísticas deuso, por parte de académicos y alumnos)

- Descripción de Biblioteca y Material Bibliográfico existente (incorporar cuadros ad-hoc)- Descripción de salas de clase, laboratorios docentes y talleres (incorporar cuadro ad-hoc)- Software a disposición de los estudiantes y su relación con el proceso formativo(hacer cuadro explicativo)- Apoyo socioeconómico a los estudiantes (becas, crédito, salud, orientación, etc)- Mecanismo de reposición de equipos y material de apoyo al proceso de enseñanza- aprendizaje- Evaluación del criterio y resultados

Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

3.2.4 Evaluación global y resultados de la dimensión Condiciones de Operación

- Fortalezas- Debilidades

Juan Music T 80

3.3 Dimensión III: Capacidad de Autorregulación3.3.1 Criterio: Propósitos

D b í iDebe contener como mínimo:- Explicitar los propósitos de la Unidad de la cual depende la carrera y declaración de metas y objetivos de la Carrera.- Explicar la coherencia entre las directrices de la Universidad, la Unidad y la Carrera.- Demostrar consistencia del Perfil de Egreso con los propósitos de la Universidad, la Unidad y la Carrera.- Fundamentos curriculares y metodológicos en la obtención del grado de Licenciado (si corresponde).- Mecanismos de evaluación de la misión, propósitos y objetivos de la carrera.- Explicitación y descripción de reglamentación vinculada a la carrera- Evaluación del criterio y resultados

Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

3.3.2 Criterio: IntegridadDebe contener como mínimo:

- Explicar la organización y conducción para la toma de decisiones y el cumplimiento de los propósitos.- Consistencia entre los propósitos de la carrera y sus programas, recursos y equipamientos.- Consistencia entre el número de alumnos en la carrera y el total de recursos disponibles para su funcionamiento.- Difusión en el medio externo y veracidad en la información.- Consistencia en los servicios ofrecidos- Información sobre los procesos académicos- Políticas para asegurar la transparencia en sus procesos.- Demostrar que los procesos internos para la toma de decisiones es coherente con la reglamentación oficial existente- Demostrar que los reglamentos y normativas internas se conocen interna y externamente y se aplican.- Evaluación del criterio y resultados

Para ello considerar: los resultados de la autoevaluación realizada a este criterio (elementos de ello son:resultados de encuestas de informantes clave, indicadores asociados, etc.)

Juan Music T 81

3.3.3 Criterio: Proceso de AutoevaluaciónDebe contener como mínimo:

a) En relación al proceso de autoevaluación

- Organización del procesoMetodología utilizada- Metodología utilizada

- Obtención de antecedentes y encuestas a informantes claves- Nivel de participación interna y externa (empleadores, egresados, alumnos, académicos, profesores horas etc.)- Socialización del proceso

Lecciones aprendidas- Lecciones aprendidas

b) En relación al Informe de Autoevaluación

S d b d t l l i i l l i d l d t l ió id tifi l t- Se debe demostrar que el recoge las principales conclusiones del proceso de autoevaluación e identifica claramentelas fortalezas y debilidades las que se sustentan en evidencias

- Explicar mecanismos de socialización del informe de autoevaluación (explicar hitos relevantes)- Explicitar metodología para elaborar plan mejoramiento (relación clara entre debilidades y acciones propuestas)

3.3.4 Evaluación global y resultados de la dimensión Capacidad de Autorregulación

- FortalezasD bilid d- Debilidades

Juan Music T 82

3.4 Conclusiones y Plan de Mejoramiento

D b í iDebe contener como mínimo:

- Las principales conclusiones de la autoevaluación realizada

- Plan de Mejoramiento, conteniendo las acciones propuestas, con sus metas, hitos, indicadores comprometidos,plazos de cumplimiento , responsable y presupuesto

- Elaborar una carta Gantt

Juan Music T 83

M h G iMuchas Gracias

Juan Music T 84