El documento trata sobre la evaluación de objetivos y programas en el sector público. Explica las diferentes fases de la evaluación (ex ante, durante, ex post) y los tipos de indicadores que se pueden utilizar, como indicadores de eficiencia, eficacia y calidad. También describe las características que debe tener un buen indicador y los desafíos en medir resultados en el sector público debido a factores como la ausencia de mercado y la diversidad de actividades.
4. William Edwards Deming (1900 – 1993).
Los indicadores son necesarios
para poder mejorar.
“No se puede mejorar lo que
no se controla; no se puede
controlar lo que no se mide;
no se puede medir lo que no
se define”.
5. Aurelia Valiño 5
Costes Recursos outputs Resultados
ECONOMIA EFICIENCIA EFICACIA
POBLACIÓN
OBJETIVO
Nivel del servicio Utilización
6. Aurelia Valiño 6
TIPO DE INDICADOR DE
REALIZACIÓN
OBJETIVOS
RELACIONADOS
ECONOMÍA
EFICIENCIA
EQUIDAD
EFICACIA
Conjunto de inputs
Proceso de entrega del
servicio
Conjunto de outputs
del servicio
Resultados
Estructura informativa
7. Aurelia Valiño 7
CARACTERISTICAS DEL SECTOR PÚBLICO QUE
DIFICULTAN LA MEDIDA DE LOS RESULTADOS
• Ausencia de mercado
• Problemas de especificación de objetivos
• Diversidad de actividades
• Diferentes niveles de la Administración
• Menor experiencia en la evaluación
• Tamaño del Sector Público
• Ambigüedad en la tecnología
• Determinación de la población objetivo
• “Política”
8. Aurelia Valiño 8
FASES EN LA EVALUACION DE LA
PROGRAMACIÓN DE OBJETIVOS
–seguimiento-
• Identificar los objetivos relevantes (resultados esperados)
• Especificar las partes o niveles del sistema que van a ser
analizados , señalando los usos para los que se establece la
evaluación
• Identificar los indicadores de realización claves
• Establecer los estándares para cada indicador
– Punto de comparación, referencia
– Tolerancia
• Establecer cómo se va a controlar
– Gradualidad
– Puntos de control
• Aclarar responsabilidades ( fase paralela)
• Diseñar y elaborar los informes
10. Aurelia Valiño 10
IDENTIFICACIÓN DE OBJETIVOS
• OBJETIVOS FINALES
– Variables que recogen el impacto del programa y los
resultados
• OBJETIVOS INTERMEDIOS
– Variables input: relacionadas con los recursos
materiales y humanos
– Variables operacionales: quién tiene que realizar qué,
cuándo y cómo
• Objetivos puente
-Asocian inputs y actividades con los resultados
finales
11. Aurelia Valiño 11
¿Qué es un indicador?
• “Es una unidad de medida que permite el
seguimiento y evaluación periódica de las
variables claves de una organización, por
comparación entre información interna de
distintos años, por comparación con información
externa de otras organizaciones, y por
comparación con valores preestablecidos.”
• Fuente: ONU(2002) Manual de Seguimiento y
Evaluación de Resultados. P ROGRAMA DE LAS NACIONES UNIDAS
PARA EL DESARRO LLO. OFICINA DE EVALUACIÓN
12. Aurelia Valiño 12
Definición de indicadores
• Nombre
- Identificar o definir explícitamente qué es lo que se quiere medir
- Puede expresarse en un concepto genérico (Rotación de inventarios) o
como concepto que relacione variables (Porcentaje de...)
• Fórmula de cálculo
– Establecer claramente las variables y operaciones que se deben realizar para el
cálculo del indicador
• Medios de verificación
– Identificar elementos observables
– Definir métodos/instrumentos de medición que garanticen autonomía del
evaluador
• Mecanismos de captura de datos
– De qué forma se registran y recuperan los datos para el cálculo del indicador
• Meta (estándar)
– Valor deseado del indicador que se desea alcanzar
– Temporalidad / Gradualidad
13. Aurelia Valiño 13
CARACTERISTICAS DE UN BUEN
INDICADOR DE REALIZACIÓN
• RELEVANCIA
• CONGRUENCIA
• SIN AMBIGÜEDAD
• FIABILIDAD
• NO MANIPULABLE
• CONTROL
• COSTE , SIMPLICIDAD
• AGREGACIÓN
14. Aurelia Valiño 14
¿QUÉ DEBEN REFLEJAR LOS
INDICADORES
• Volumen
• Productividad
• Coste
• Metas temporales
• Demanda de servicios
• Disponibilidad de los servicios
15. Aurelia Valiño 15
Dimensión y ámbito de los indicadores
• Dimensiones
– Eficacia
• Grado de cumplimiento
objetivos
– Eficiencia
• Relación recursos /
producción
– Calidad de servicio
• Respuesta oportuna y
adecuada a las
necesidades de los
usuarios
• Ámbitos
– Resultados
• Agregación de valor
– Productos
• Resultados directos y
observables de las
acciones planificadas
– Proceso
• Secuencia de actividades
requeridas para la
obtención del producto
16. Los indicadores de gestión o KPIs se agrupan
gráficamente en cuadros de mando para agilizar la
toma de decisiones. En el cuadro de mando se incluyen
los principales indicadores clave y de una forma visual
se obtiene la información deseada del cumplimiento del
plan establecido.
17. características principales:
-Medible: son métricas, por tanto su principal característica es que son
medibles en unidades. Ejemplo: 1,2, 100, 1000, 1000.000
-Cuantificable: si se puede medir, se puede cuantificar. Por ejemplo si
hablamos de unidades monetaria las cuantificaríamos en € o $. También
existen muchos indicadores de gestión que se miden en porcentaje.
-Especifico: se debe centrar en un único aspecto a medir, hemos de ser
concretos.
-Temporal: debe poder medirse en el tiempo. Por ejemplo podemos
querer medir a diario, de forma semanal, mensual o anual.
-Relevante: el propio término hace referencia a esta característica
“indicadores clave de gestión”. Únicamente sirven aquellos factores que
sean relevantes para la toma de decisiones.
Tienen que informar, controlar, evaluar y por último ayudar a que se
tomen decisiones.
18. Aurelia Valiño 18
Relación de indicadores con
objetivos de gestión
Eficiencia
en las
Compras
Transparencia
Calidad de
Servicio
Racionalización
del uso de
recursos
Duración de los inventarios üüü ü ü
Quiebres de inventarios üüü üüü
Cantidad de peticiones de
oferta enviadas ü üüü
Cantidad de ofertas recibidas
üüü üüü
Tiempo de ciclo de compras
üü üüü ü
Tiempo de despacho de la
orden de compra üü üüü ü
Indicadores de satisfacción de
usuarios üüü
Indicadores de evaluación de
proveedores üüü ü üüü
üüü = Alto impacto
üü = Impacto medio
ü = Impacto bajo o indirecto
19. Aurelia Valiño 19
CRITICAS Y LIMITACIONES AL
USO DE INDICADORES
• Relaciones ambiguas entre objetivos e indicadores
• Cuantificación de los objetivos
• Centran la atención en el elemento medido y analizan los
aspectos fácilmente medibles
• Índices de productividad física
• Incentivos a actuar según la media
• No está claro cuando son descriptivos , preceptivos
• Carácter estático o fotográfico
• Actividades fuera de control
• Problemas en la utilización de comparaciones
• Pueden introducir incentivos perversos cuando se
aplican en el sistema de incentivos y sanciones
22. OBJETIVOS DE DESARROLLO
SOSTENIBLE (ODS)
• En 2015, 193 países de Las Naciones Unidas han desarrollado y acordado 17
Objetivos de Desarrollo Sostenible (SDG en siglas en inglés – ODS en siglas en
castellano) a alcanzar en 2030. La organización Bertesmann Stiftung y la Red de
Soluciones de Desarrollo sostenible de la ONU han creado un índice para saber
cómo se acercan estos países a las ambiciosas metas marcadas y el esfuerzo
realizado desde 2015. Este índice se puede consultar en:
https://www.sdgindex.org/. Y el ranking que resulta al clasificar a los países en
función del logro conjunto de los 17 ODS se puede ver en
https://dashboards.sdgindex.org/rankings. Una puntuación de 100 en este ranking
indicaría que se han alcanzado todos los ODS.