Comparativo de Sistemas de
Indicadores Internacionales
para la Educación Superior
(una aproximación para el problema de
implementación de un sistema nacional
de indicadores de educación superior)
Elementos a comparar



                                                Marco conceptual



                    Seguimiento
                                                                      Proceso de diseño
                    • Examen periódico del
                      sistema de indicadores.                           de indicadores




                                Explotación de la               Proceso de
                                  información                 implementación




Construcción basada en la Guía para la implantación de un sistema de indicadores. Norma española UNE 66175
Marco Conceptual


 ¿Cuál es la base de pensamiento sobre la que se sustentó
  la construcción del Sistema y que a la vez, condicionan la
           forma en que se diseño e implementó ?
                                            Propuesta de sistema
Propuesta basada en Propuesta de sistema basado         en     los
el            modelo basado      en      la modelos de contexto
procedimental     de metodología        de académico            de Modelo      para   la
diseño            de Cuadro de Mando.       Ramsden                Valoración de la
indicadores:                                                       Gestión del Sistema
                     Universidad Nacional Universidad de La
Universidad de       de                     Serena, Universidad de         Universidades
                                            de Los                 Estatales en Colombia
Santiago de Chile    Quilmes, Argentina
                                            Lagos, Universidad
                                            Católica de
                                            Valparaíso, Chile.
Marco Conceptual


 ¿Cuál es la base de pensamiento sobre la que se sustentó
  la construcción del Sistema y que a la vez, condicionan la
           forma en que se diseño e implementó ?
  Propuesta de modelo de
   costo “ABC” que intenta
    distribuir los costos de
        manera menos              Sistemas basados en         Sistema Basados en la
    arbitraria, combinando         Modelos de Calidad      filosofía de mejoramiento
 información financiera y no   desarrollados por CINDA:             continuo.
 financiera y una gestión de Instituto Tecnológico        Instituto Tecnológico de
costos basada en actividades                              Monterrey (ITESM)
             (ABM).          de Santo Domingo, INTEC.
Universidad de Mar del
Plata, Argentina,
Marco Conceptual


  ¿Cuál es la base de pensamiento sobre la que se sustentó
   la construcción del Sistema y que a la vez, condicionan la
            forma en que se diseño e implementó ?
Como marco organizativo
general el catálogo de indicadores    Propuesta de diferenciación del
parte del modelo de evaluación        perfil de las universidades y
de Stufflebeam                        ofrecer    un   conjunto    de    Sistema de Indicadores de gestión
(Stufflebean y                        indicadores     basado      en    de la calidad total.
Shinkfield, 1987), esto es, del       microdatos a nivel individual     Universidad    politécnica    de
conocido modelo CIPP                  (universidad)                     Catalunya
(context, input, process, product).           Universidad de
                                           Ingeniería, Pisa, Italia
Sistema Universitario Español .
El diseño de los indicadores


 ¿Qué conceptos se consideraron cuando
    se construyeron los indicadores?
 Modelo Procedimental de Diseño de Indicadores
 Especificación del objeto de análisis; definición de
     la perspectiva evaluadora; selección de los          Análisis sistemático de los factores asociados a la
macro, criterios evaluativos más relevantes; esto es      calidad de la enseñanza de la Ingeniería Industrial
eficacia, pertinencia, integridad, eficiencia, sustenta   SISTEMA SECAI. Usando Conceptos tales como: una
   bilidad; caracterización sistémica del objeto de       evaluación, diagnóstico y una propuesta de
   análisis frente a lo cual se propone una cadena        mejoramiento.
     lógica de propósitos, actividades, medios y
   resultados; selección de variables relevantes y        Universidad de Lima
              construcción del indicador.
          Universidad de Santiago de Chile
El diseño de los indicadores


 ¿Qué conceptos se consideraron cuando
    se construyeron los indicadores?
Indicadores del Sistema Universitario Español
Siguiendo la adaptación del modelo sistémico se Modelo para la Valoración de la Gestión del
consideraron conceptos tales como:              Sistema de Universidades Estatales en
1) Contexto,                                    Colombia
2) Pertinencia (Oferta y Demanda),              Modelar considerar:
3) Recursos (humanos, financieros, físicos) ,   1) Riqueza y complejidad relativa.
4) Procesos,                                    2) Desempeño.
5) Resultados
La Implantación del Sistema de Indicadores

¿Es precisa la definición de indicadores? ¿Están involucradas las personas
afectadas en su implantación? ¿se contemplaron procesos de validación?
  ¿Qué estrategias hay para la formación, comunicación, información y
                                motivación?
                                                                               El catálogo de Indicadores del Sistema
                                                                                        Universitario Español
  Modelo para la Valoración de la        Propuesta de indicadores para la
Gestión del Sistema de Universidades                                                Fue elaborado por una Comisión
                                         Universidad Oberta de Cataluña          Técnica constituida por el Consejo de
       Estatales en Colombia.
                                           Destaca la importancia de tener          Universidades y en su última fase
     Se establecieron umbrales          definida la estrategia general (y la de consensuado con representantes de la
 razonables, dada las diversidad de          calidad) antes de plantearse           Conferencia de Rectores, en una
    tamaños de las Instituciones,      indicadores (lo cual abona a una mejor         búsqueda conjunta de unos
 Además el modelo es dinámico: Se        precisión), y que todos ellos deben       indicadores comunes para todo el
encuentra en permanente proceso de     servir al objetivo de la implantación de sistema universitario español, con el
      revisión y construcción.                       la estrategia.               grado de credibilidad y aceptación
                                                                                 suficientes para que su implantación
                                                                                fuera posible sin especiales problemas
Explotación de la información


   ¿Qué utilidad le están dando a los indicadores?
 ¿cuál es la justificación de la existencia del sistema?
                                                                                        Evaluación de la gestión docente a través
                                           Sistema de Indicadores Referidos a los        de indicadores de: perfil profesional del
                                           Actores del Proceso Docente                       egresado, resultados e impacto
Indicadores para el Proceso Docente:        Identificar las agrupaciones de variables    Se detectaron algunas deficiencias en la
                                            que entreguen mayor información para la     formación, así como la baja participación
                                            toma de decisiones estratégicas y            y aun el desconocimiento de la realidad
Plantear los costos que implicaría para una financieras.
institución reformular el currículo, de                                                       externa en la definición de los
modo de considerar dichos elementos en                                                    perfiles, pero no se logró avanzar en la
la función docente.                                                                      definición de los costos asociados a un.
                                            Universidad de Concepción, Universidad
                                            de Tarapacá, Universidad de                 mejoramiento de las condiciones actuales
                                            Talca, Universidad del Bío Bío, Chile
                                                                                         Universidad de La Serena, Universidad
                                                                                                   Austral de Chile;
Explotación de la información


  ¿Qué utilidad le están dando a los indicadores?
¿cuál es la justificación de la existencia del sistema?

                                                               Sistema de Indicadores para la
Sistema       de Indicadores e
                                                               evaluación de la investigación
critérios de contratação de Sistema de evaluación del
                                                               y de la didáctica:
docentes                         desempeño docente
                                                               Con base en los resultados del
Facilitar la gestión y hacer más Se utilizan como indicaciones
                                                               cálculo de indicadores se hace
transparentes los procesos, en para establecer estímulos y el
                                                               un        comparativo         de
función       de    las    metas perfeccionamiento profesoral.
                                                               experiencias entre las entre
institucionales.                 Universidad de Panamá         universidades, año con año.
Universidad de São Paulo
                                                                Universidad de Génova, Italia.
Explotación de la información


   ¿Qué utilidad le están dando a los indicadores?
 ¿cuál es la justificación de la existencia del sistema?
Indicadores del Sistema Universitario
Español                                  Propuesta de sistema basado en la
1) Es usado como instrumento de metodología de Cuadro de Mando.                   Modelo para la Valoración de la
análisis y planificación del sistema Proveer información pública sobre las        Gestión del Sistema de Universidades
universitario y de las instituciones que varias dimensiones de la vida de las     Estatales en Colombia.
lo conforman.                            universidades para que sus distintos     El modelo es         utilizado   como
2) Se hace énfasis en que deben ser usuarios puedan tomar decisiones.             referente, como:
útiles para distintos propósitos. Como Sólo entonces viene la otra utilidad: la   1) Herramienta para asignar recursos.
los resultados son públicos, algunos de informar.                                 2)    Instrumento    de     Planeación
medios los utilizan para elaborar Universidad Nacional de Quilmes,                Estratégica
rankings entre las Instituciones.        Argentina
Examen periódico del Sistema de Indicadores


  ¿Siguen siendo pertinentes o cumplen con los objetivos para
 los que fueron construidos? ¿Hay una evaluación del costo de
    obtención de la información vs. la utilidad del indicador?
                                            Modelo para la Valoración de la Gestión
                                           del Sistema de Universidades Estatales en
                                                          Colombia.                      Indicadores del Sistema Universitario
Indicadores para asignar complementos
                                           Hay un reconocimiento del peligro de caer                     Español
salariales a los docentes universitarios
                                               en un perverso circulo vicioso que           Hubo análisis de los indicadores
Se reconoce la dificultad para elaborar     cataloga como poco eficiente a alguna(s)         originales, algunos ya no eran
indicadores compuestos que determinen       universidad(es), quitándoles recursos, lo   pertinentes, puesto que la realidad los
complementos salariales asociados a un     que las hará menos eficientes, en lugar de               había rebasado.
mejoramiento de la calidad, dadas las       realizar un diagnóstico de los obstáculos
implicaciones financieras que esto          reales de cada universidad que dificultan Se avanza en la homologación de criterios
conlleva.                                   su desarrollo y proporcionar los recursos      de construcción de la información
                                              para eliminar dichos obstáculos. Se          (especialmente de aquella que se
Comunidad de Canarias.
                                              sugiere agregar algunas variables de                considere relevante)
                                           resultados, para paliar las asimetrías entre
                                                         las Instituciones.
Reflexiones finales


•   En este primer acercamiento, las experiencias del Sistema Universitario Español y del Modelo
    para la Valoración de la Gestión del Sistema de Universidades Estatales en Colombia, por ser
    sistemas que ya están funcionando, y en proceso de evaluación de su impacto.

•   Actualmente nadie pone a discusión la pertinencia de un Sistema Nacional de Indicadores
    por su enorme utilidad como instrumento para el diagnóstico y evaluación de nuestras
    Instituciones de Educación Superior y la gestión de su calidad.

•   No hay duda de que un Sistema Nacional de Indicadores facilitaría enormemente el
    conocimiento del entorno de la Educación Superior en su conjunto y de cada una de nuestras
    instituciones, y a su vez, ayudará a ubicar cada una de estas en relación a las demás. Será sin
    duda un instrumento de información estratégica.

•   Lo que estamos iniciando no es más que un primer paso, que demanda otros muchos en el
    futuro, resolviendo adecuadamente los muchos problemas que se vislumbran en el
    horizonte.
Reflexiones finales

          Integración de los actores



                                           Comisión de
                                            Educación
      SHCP     SEP           ANUIES          Pública y
                                             Servicios
                                            Educativos



INEGI,

sIDERCO
                     IES1 , IES2 ,IES3 ,…,IESn

                Organizaciones diversas

Comparativo implementacion gestion de indicadores

  • 1.
    Comparativo de Sistemasde Indicadores Internacionales para la Educación Superior (una aproximación para el problema de implementación de un sistema nacional de indicadores de educación superior)
  • 2.
    Elementos a comparar Marco conceptual Seguimiento Proceso de diseño • Examen periódico del sistema de indicadores. de indicadores Explotación de la Proceso de información implementación Construcción basada en la Guía para la implantación de un sistema de indicadores. Norma española UNE 66175
  • 3.
    Marco Conceptual ¿Cuáles la base de pensamiento sobre la que se sustentó la construcción del Sistema y que a la vez, condicionan la forma en que se diseño e implementó ? Propuesta de sistema Propuesta basada en Propuesta de sistema basado en los el modelo basado en la modelos de contexto procedimental de metodología de académico de Modelo para la diseño de Cuadro de Mando. Ramsden Valoración de la indicadores: Gestión del Sistema Universidad Nacional Universidad de La Universidad de de Serena, Universidad de Universidades de Los Estatales en Colombia Santiago de Chile Quilmes, Argentina Lagos, Universidad Católica de Valparaíso, Chile.
  • 4.
    Marco Conceptual ¿Cuáles la base de pensamiento sobre la que se sustentó la construcción del Sistema y que a la vez, condicionan la forma en que se diseño e implementó ? Propuesta de modelo de costo “ABC” que intenta distribuir los costos de manera menos Sistemas basados en Sistema Basados en la arbitraria, combinando Modelos de Calidad filosofía de mejoramiento información financiera y no desarrollados por CINDA: continuo. financiera y una gestión de Instituto Tecnológico Instituto Tecnológico de costos basada en actividades Monterrey (ITESM) (ABM). de Santo Domingo, INTEC. Universidad de Mar del Plata, Argentina,
  • 5.
    Marco Conceptual ¿Cuál es la base de pensamiento sobre la que se sustentó la construcción del Sistema y que a la vez, condicionan la forma en que se diseño e implementó ? Como marco organizativo general el catálogo de indicadores Propuesta de diferenciación del parte del modelo de evaluación perfil de las universidades y de Stufflebeam ofrecer un conjunto de Sistema de Indicadores de gestión (Stufflebean y indicadores basado en de la calidad total. Shinkfield, 1987), esto es, del microdatos a nivel individual Universidad politécnica de conocido modelo CIPP (universidad) Catalunya (context, input, process, product). Universidad de Ingeniería, Pisa, Italia Sistema Universitario Español .
  • 6.
    El diseño delos indicadores ¿Qué conceptos se consideraron cuando se construyeron los indicadores? Modelo Procedimental de Diseño de Indicadores Especificación del objeto de análisis; definición de la perspectiva evaluadora; selección de los Análisis sistemático de los factores asociados a la macro, criterios evaluativos más relevantes; esto es calidad de la enseñanza de la Ingeniería Industrial eficacia, pertinencia, integridad, eficiencia, sustenta SISTEMA SECAI. Usando Conceptos tales como: una bilidad; caracterización sistémica del objeto de evaluación, diagnóstico y una propuesta de análisis frente a lo cual se propone una cadena mejoramiento. lógica de propósitos, actividades, medios y resultados; selección de variables relevantes y Universidad de Lima construcción del indicador. Universidad de Santiago de Chile
  • 7.
    El diseño delos indicadores ¿Qué conceptos se consideraron cuando se construyeron los indicadores? Indicadores del Sistema Universitario Español Siguiendo la adaptación del modelo sistémico se Modelo para la Valoración de la Gestión del consideraron conceptos tales como: Sistema de Universidades Estatales en 1) Contexto, Colombia 2) Pertinencia (Oferta y Demanda), Modelar considerar: 3) Recursos (humanos, financieros, físicos) , 1) Riqueza y complejidad relativa. 4) Procesos, 2) Desempeño. 5) Resultados
  • 8.
    La Implantación delSistema de Indicadores ¿Es precisa la definición de indicadores? ¿Están involucradas las personas afectadas en su implantación? ¿se contemplaron procesos de validación? ¿Qué estrategias hay para la formación, comunicación, información y motivación? El catálogo de Indicadores del Sistema Universitario Español Modelo para la Valoración de la Propuesta de indicadores para la Gestión del Sistema de Universidades Fue elaborado por una Comisión Universidad Oberta de Cataluña Técnica constituida por el Consejo de Estatales en Colombia. Destaca la importancia de tener Universidades y en su última fase Se establecieron umbrales definida la estrategia general (y la de consensuado con representantes de la razonables, dada las diversidad de calidad) antes de plantearse Conferencia de Rectores, en una tamaños de las Instituciones, indicadores (lo cual abona a una mejor búsqueda conjunta de unos Además el modelo es dinámico: Se precisión), y que todos ellos deben indicadores comunes para todo el encuentra en permanente proceso de servir al objetivo de la implantación de sistema universitario español, con el revisión y construcción. la estrategia. grado de credibilidad y aceptación suficientes para que su implantación fuera posible sin especiales problemas
  • 9.
    Explotación de lainformación ¿Qué utilidad le están dando a los indicadores? ¿cuál es la justificación de la existencia del sistema? Evaluación de la gestión docente a través Sistema de Indicadores Referidos a los de indicadores de: perfil profesional del Actores del Proceso Docente egresado, resultados e impacto Indicadores para el Proceso Docente: Identificar las agrupaciones de variables Se detectaron algunas deficiencias en la que entreguen mayor información para la formación, así como la baja participación toma de decisiones estratégicas y y aun el desconocimiento de la realidad Plantear los costos que implicaría para una financieras. institución reformular el currículo, de externa en la definición de los modo de considerar dichos elementos en perfiles, pero no se logró avanzar en la la función docente. definición de los costos asociados a un. Universidad de Concepción, Universidad de Tarapacá, Universidad de mejoramiento de las condiciones actuales Talca, Universidad del Bío Bío, Chile Universidad de La Serena, Universidad Austral de Chile;
  • 10.
    Explotación de lainformación ¿Qué utilidad le están dando a los indicadores? ¿cuál es la justificación de la existencia del sistema? Sistema de Indicadores para la Sistema de Indicadores e evaluación de la investigación critérios de contratação de Sistema de evaluación del y de la didáctica: docentes desempeño docente Con base en los resultados del Facilitar la gestión y hacer más Se utilizan como indicaciones cálculo de indicadores se hace transparentes los procesos, en para establecer estímulos y el un comparativo de función de las metas perfeccionamiento profesoral. experiencias entre las entre institucionales. Universidad de Panamá universidades, año con año. Universidad de São Paulo Universidad de Génova, Italia.
  • 11.
    Explotación de lainformación ¿Qué utilidad le están dando a los indicadores? ¿cuál es la justificación de la existencia del sistema? Indicadores del Sistema Universitario Español Propuesta de sistema basado en la 1) Es usado como instrumento de metodología de Cuadro de Mando. Modelo para la Valoración de la análisis y planificación del sistema Proveer información pública sobre las Gestión del Sistema de Universidades universitario y de las instituciones que varias dimensiones de la vida de las Estatales en Colombia. lo conforman. universidades para que sus distintos El modelo es utilizado como 2) Se hace énfasis en que deben ser usuarios puedan tomar decisiones. referente, como: útiles para distintos propósitos. Como Sólo entonces viene la otra utilidad: la 1) Herramienta para asignar recursos. los resultados son públicos, algunos de informar. 2) Instrumento de Planeación medios los utilizan para elaborar Universidad Nacional de Quilmes, Estratégica rankings entre las Instituciones. Argentina
  • 12.
    Examen periódico delSistema de Indicadores ¿Siguen siendo pertinentes o cumplen con los objetivos para los que fueron construidos? ¿Hay una evaluación del costo de obtención de la información vs. la utilidad del indicador? Modelo para la Valoración de la Gestión del Sistema de Universidades Estatales en Colombia. Indicadores del Sistema Universitario Indicadores para asignar complementos Hay un reconocimiento del peligro de caer Español salariales a los docentes universitarios en un perverso circulo vicioso que Hubo análisis de los indicadores Se reconoce la dificultad para elaborar cataloga como poco eficiente a alguna(s) originales, algunos ya no eran indicadores compuestos que determinen universidad(es), quitándoles recursos, lo pertinentes, puesto que la realidad los complementos salariales asociados a un que las hará menos eficientes, en lugar de había rebasado. mejoramiento de la calidad, dadas las realizar un diagnóstico de los obstáculos implicaciones financieras que esto reales de cada universidad que dificultan Se avanza en la homologación de criterios conlleva. su desarrollo y proporcionar los recursos de construcción de la información para eliminar dichos obstáculos. Se (especialmente de aquella que se Comunidad de Canarias. sugiere agregar algunas variables de considere relevante) resultados, para paliar las asimetrías entre las Instituciones.
  • 13.
    Reflexiones finales • En este primer acercamiento, las experiencias del Sistema Universitario Español y del Modelo para la Valoración de la Gestión del Sistema de Universidades Estatales en Colombia, por ser sistemas que ya están funcionando, y en proceso de evaluación de su impacto. • Actualmente nadie pone a discusión la pertinencia de un Sistema Nacional de Indicadores por su enorme utilidad como instrumento para el diagnóstico y evaluación de nuestras Instituciones de Educación Superior y la gestión de su calidad. • No hay duda de que un Sistema Nacional de Indicadores facilitaría enormemente el conocimiento del entorno de la Educación Superior en su conjunto y de cada una de nuestras instituciones, y a su vez, ayudará a ubicar cada una de estas en relación a las demás. Será sin duda un instrumento de información estratégica. • Lo que estamos iniciando no es más que un primer paso, que demanda otros muchos en el futuro, resolviendo adecuadamente los muchos problemas que se vislumbran en el horizonte.
  • 14.
    Reflexiones finales Integración de los actores Comisión de Educación SHCP SEP ANUIES Pública y Servicios Educativos INEGI, sIDERCO IES1 , IES2 ,IES3 ,…,IESn Organizaciones diversas