1. Autoevaluación
Proceso de Evaluación
Institucional
Antecedentes y Prospectiva
Dra. Ángela Corengia
17 de noviembre de 2012
2. Mejorar
Cambiar
Evaluar para conocer
“Sin información de calidad, la gestión de la universidad es ciega o, lo que es lo mismo, queda
librada a la intuición” (Bernasconi, 2010).
3. EVALUACIÓN INSTITUCIONAL
Proceso que consta de cinco componentes:
1. Selección y definición de la realidad a evaluar.
2. Definición de los propósitos de la evaluación.
3. Producción de evidencia empírica acerca de la realidad evaluada.
4. Formulación de juicios de valor.
5. Toma de decisiones o acciones que transformen dicha realidad.
Proceso holístico
4. Fases Articuladas
“Nadie quiere la evaluación externa,
Nadie cree en la evaluación interna” (Nevo, 1997)
Autoevaluación
(UA)
Evaluación
Institucional
Evaluación externa
(CONEAU)
COOPERACIÓN Y DIÁLOGO
5. Características
Es un medio (no un fin).
Reúne evidencia (“hacer visible lo cotidiano”).
Desarrolla una actitud reflexiva.
Incluye procesos y resultados.
Participa toda la comunidad universitaria.
6. Diferencia con los Procesos de Acreditación
Foco en la institución como un todo.
No hay acciones externas punitivas.
Mejoramiento de la calidad más que aseguramiento.
En el marco de los objetivos de cada institución:
¿somos en la realidad lo que queremos y decimos ser?
7. Autoevaluación
La Evaluación Institucional en la Universidad Austral
1996-1997: autoevaluación
2000: evaluación externa
2001: reconocimiento definitivo
2000 a 2010: evaluaciones sectoriales
• Acreditación y reacreditación carreras grado y posgrado.
• Medición satisfacción: alumnos, graduados, docentes, no docentes, empleadores
de pasantes y graduados.
• Medición estilos de enseñanza.
• Medición hábitos de estudio y aptitudes educaciones de los ingresantes.
• Construcción de series de indicadores simples y complejos.
• Evaluación de proyectos de carreras de posgrado.
8. Autoevaluación
¿Para qué? (Objetivos)
1. A nivel interno e institucional
Diagnóstico
Fin último:
Reflexión
mejorar la calidad de la UA
Compromiso con el futuro
Conocer el grado de internalización de la misión, ideario, valores.
Identificar grado de avance de las recomendaciones de CONEAU.
Comparar el estado de situación de UA con otras universidades.
Avanzar en el desarrollo del modelo de calidad de la UA.
2. A nivel externo
Cumplir con lo exigido por la Ley de Educación Superior
9. Autoevaluación
¿Por qué en el 2010?
Mejoramiento de
la calidad
Momento
institucional más
favorable
Articulación con los procesos de
acreditación de carreras de
grado y posgrado
(Cfr. Res. CPCS 71/08, Res. CPCS 271/08)
10. ¿Qué se va a evaluar?
La universidad Austral como un todo:
Unidades académicas
Hospital Universitario Austral
Parque Austral
Áreas institucionales
Unidades de apoyo
11. Autoevaluación
¿Quiénes? Presidente: Rector
Vicepresidente: Vicerrector de Asuntos
Académicos
Secretario: Directora OEI
6 Vocales: Vicerrector de Asuntos
Económicos, Vicerrectora de Estudios,
Secretario General de la CP, Luis García
Ghezzi (FCE), Guillermo Perkins (IAE), Ángel
Centeno (CAS)
12. Autoevaluación
Resumen
1. Se evaluarán 8 variables que abarcan toda la realidad institucional.
2. Involucra de modo directo a 130 personas e indirectamente a todos.
3. Evaluación de dimensiones: 700 indicadores.
4. Fuentes de información:
- Documentos y base de datos de la universidad.
- Entrevistas en profundidad a 120 personas en puestos de responsabilidad.
- Cuestionarios cerrados a 15.000 personas de la UA: alumnos de pregrado, grado y
posgrado, graduados, personal docente y no docente, personal de salud y empleadores
de pasantes y graduados.
13. Autoevaluación
¿Qué se hizo hasta ahora?
h
2010:
- Diseño del modelo de Autoevaluación y de la guía de entrevista.
2011:
h
-- 120 entrevistas en profundidad a directivos de la UA, de ACES y de la
Prelatura del Opus Dei (duración aproximada entre 3 y 4 hs).
-- Diseño y aplicación de los cuestionarios para toda la comunidad universitaria
y empleadores. Porcentaje de respuesta promedio 90%.
- Comienzo de la codificación y pre-análisis de las entrevistas en profundidad.
14. Autoevaluación
Institucional
91% alumnos de grado 97% personal gerencial,
técnico y administrativo
89% alumnos de posgrado
90% profesores 60% personal de salud
15. Autoevaluación
Etapa diagnóstica: Organización de la Abril, mayo y
información cualitativa y cuantitativa por junio 2012
variable, dimensión, subdimensión e indicador
(a cargo de la OEI con seguimiento semanal de
algunos miembros de la CEI)
Reunión con las 8 comisiones de trabajo para Última semana
Última semana de junio
presentarles la información por variable, con de agosto 2012
2012
una guía para se análisis.
16. Autoevaluación
Etapa valorativa: las 8 comisiones analizan y
valoran (con una guía de análisis y con
estándares) la información relevada en la
etapa diagnóstica
Hasta el 15 de
Etapa prospectiva: las 8 comisiones se octubre
focalizarán en identificar las líneas de 2012
desarrollo y mejoramiento que tiendan a
revertir las debilidades encontradas y
potenciar las fortalezas.
Elaboración del informe final: la OEI y el CEI
Noviembre y
realizarán el informe final a partir del trabajo
diciembre
realizado por las 8 comisiones.
2012
21. Autoevaluación
Aplicación de Cuestionarios – Grupos a Encuestar
1. Alumnos de Pregrado
Todas las unidades 2. Alumnos de Grado
académicas (Facultades, 3. Alumnos de Posgrado
Cuestionarios
Institutos, Escuelas) de
4. Profesores en papel
CABA, Pilar y Rosario.
5. Personal Gerencial, Técnico y
Hospital Universitario
Austral. Administrativo
Parque Austral. 6. Personal de Salud
Áreas institucionales y
7. Graduados
unidades de apoyo. Cuestionarios
8. Empleadores de nuestros
electrónicos
alumnos (pasantes) y graduados
22. Autoevaluación
Delegados del Proceso de Aplicación de Cuestionarios
José María Corrales
(Pablo Murga y Florencia Paolini
Alumnos de Posgrado – EMBA - ; Eduardo Fracchia –
EMBA Regional -; María Eugenia
Delfino – MBA)
Profesores Alejandro Carrera
Personal Gerencial,
Mariana Bence
Técnico y Administrativo
Graduados y
Ernesto Ruete
Empleadores
La aplicación de estos cuestionarios
electrónicos estará centralizado en la OEI,
en conjunto con estas áreas.
23. Autoevaluación
Delegados del Proceso de Aplicación de Cuestionarios -
Responsabilidades
1 Coordinar el plan de comunicación del proceso de Autoevaluación en su unidad,
para cada grupo de personas a encuestar.
2 Coordinar el cronograma de aplicación de los cuestionarios teniendo en cuenta el
momento y la forma más oportuna para cada grupo de personas a encuestar, y
teniendo en cuenta el “cronograma base” de la OEI.
3 Aplicar los cuestionarios.
4 Realizar el seguimiento y control del número de respuestas obtenidas.
Cada delegado podrá armar un equipo de trabajo con otras personas. No
obstante, el responsable y el nexo de comunicación con la OEI será sólo y
siempre el “Delegado de Autoevaluación”.
24. Autoevaluación
1 Coordinar el Plan de Comunicación
El éxito de esta etapa depende en gran medida del soporte que se brinde a
través de un estratégico plan de comunicación que sensibilice a todos los
grupos a encuestar sobre la importancia del proyecto y su impacto en el
futuro de nuestra organización.
Contamos con:
Material de comunicación provisto por la OEI (folletos + video + carteles + Q&A).
Todas las herramientas de comunicación que gestiona cada Dirección de Comunicación de cada sede.
Aquellas nuevas acciones , específicas para esta etapa, que fomenten el compromiso de todos.
Acción a realizar por los delegados y sus equipos:
Concretar el plan de comunicación de cada grupo, teniendo en cuenta las fechas de aplicación de
cuestionarios. Dirección de Comunicación (Florencia Ameriso)
25. Autoevaluación
2 Coordinar el Cronograma de Aplicación de los Cuestionarios
El delegado deberá armar el cronograma de aplicación de cuestionarios para su
grupo, teniendo en cuenta las siguientes fechas y plazos de aplicación:
A partir del: Duración de la aplicación:
Alumnos de Posgrado 15 de Septiembre 1 semana + 1 semana para ausentes
Profesores 20 de Septiembre 2 semanas + 1 semana para ausentes
Personal G, T y A 29 de Septiembre 1 semana + 1 semana para ausentes
Es importante:
Tener en cuenta el momento más oportuno para cada uno de los grupos a encuestar. Ejemplo:
Alumnos: se tendrán en consideración las fechas de exámenes y será necesario “negociar” con los
profesores espacio en sus clases para poder aplicar el cuestionario.
Profesores: es conveniente aprovechar reuniones de claustro o departamentales, que cuenten con la
mayor asistencia posibles de profesores.
26. Autoevaluación
3 Aplicar los Cuestionarios
La OEI proveerá a cada delegado de:
Cuestionarios correspondiente al grupo a cargo.
Listados de personas a encuestar, con dos columnas de
seguimiento:
Columna de control de entrega del cuestionario a la
persona a encuestar.
Columna de control de que el encuestado depositó el
cuestionario en la urna.
Urnas en donde los encuestados depositarán los
cuestionarios.
27. Autoevaluación
3 Aplicar los Cuestionarios ALUMNOS
Al ser aplicados en clase, la entrega del formulario al alumno y su devolución es
inmediata. El control de doble columna en el listado consiste en la toma de asistencia y el
seguimiento de quiénes depositan el cuestionario completo en la urna.
Es necesario que el delegado o personas de su equipo se hagan presentes en el aula, con
los cuestionarios, listados y urnas.
Se le debe explicar a los alumnos:
La importancia de su participación en el proceso y su sinceridad en responder.
Que el cuestionario es anónimo y debe ser depositado en la urna una vez completo.
Que el listado es simplemente paras contabilizar el número de participantes.
Que cada alumno debe completarlo individualmente.
El delegado o la persona de su equipo debe estar presente hasta que finalicen todos los
alumnos y debe retirarse con la urna llena.
28. Autoevaluación
3 Aplicar los Cuestionarios PROFESORES Y PERSONAL G, T y A
Siempre que se respete el anonimato y los plazos, se podrá organizar la distribución y recolección
de la manera más adecuada.
Se sugiere aprovechar reuniones de profesores / personal para solicitar que completen allí mismo
los cuestionarios. Sino, se puede entregar el cuestionario individualmente (llevando control en el
listado).
Se debe tener en cuenta el personal / profesores part-time (anunciarles que pasen a retirarlo y
completarlo en caso que no asista a la unidad regularmente, enviarlo por correo, etc.). Siempre se
deberá hacer seguimiento de los cuestionarios entregados y devueltos.
Las urnas estarán disponibles para que los profesores / personal depositen los cuestionarios. Las
urnas no podrán estar solas, sino que deben permanecer bajo la custodia del delegado o personas
del equipo que llevarán el control. Cada responsable de urna tendrá los listados.
El delegado es el responsable de seguir el avance y reclamar la entrega del cuestionario a quienes
no lo hubieran hecho.
29. Autoevaluación
4 Seguimiento y control del número de respuestas obtenidas
Se prevé una semana más a cada periodo de aplicación a fin de que el delegado y su equipo
se encarguen de reclamar los cuestionarios que aún no han sido completados, y así de
obtener la mayor cantidad de respuestas posibles (censo).
Los cuestionarios completos deberán ser depositados en las cajas en las que fueron
entregados por la OEI, pero nunca deben ser mezclados (alumnos por un lado, profesores
por otro, y personal por otro).
El delegado y su equipo son responsables de que las cajas con los cuestionarios sean
guardadas en un lugar seguro. Las mismas deben ser devueltas a la OEI, selladas con cinta y
clasificadas, junto con los listados.
30. Autoevaluación
Plan de Comunicación y Aplicación
Modelo Alumnos de Posgrado
Septiembre Octubre
Acciones Responsable
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 1 2 3 4 5 6 7 8 9
Plan de Comunicación DCI / Delegado
Entrega de cuestionarios, listados y
OEI
urnas al Delegado
Aplicación de cuestionarios Delegado
Control primera semana Delegado / OEI
Refuerzo aplicación ausentes Delegado
Control segunda semana Delegado / OEI
Devolución a la OEI de cuestionarios
Delegado
completos, listados y urnas
31. Autoevaluación
Plan de Comunicación y Aplicación
Modelo Profesores
Septiembre Octubre
Acciones Responsable
17 18 19 20 21 22 23 24 25 26 27 28 29 30 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
Plan de Comunicación DCI / Delegado
Entrega de cuestionarios, listados y
OEI
urnas al Delegado
Aplicación de cuestionarios Delegado
Controles primera y segunda semana Delegado / OEI
Refuerzo aplicación ausentes Delegado
Control final Delegado / OEI
Devolución de cuestionarios
Delegado
completos, listados y urnas
32. Autoevaluación
Plan de Comunicación y Aplicación
Modelo Personal Gerencial, Técnico y Administrativo
Septiembre Octubre
Acciones Responsable
17 18 19 20 21 22 23 24 25 26 27 28 29 30 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
Plan de Comunicación DCI / Delegado
Entrega de cuestionarios, listados y
OEI
urnas al Delegado
Aplicación de cuestionarios Delegado
Control primera semana Delegado / OEI
Refuerzo aplicación ausentes Delegado
Control segunda semana Delegado / OEI
Devolución a la OEI de cuestionarios
Delegado
completos, listados y urnas