La empresa sostenible: Principales Características, Barreras para su Avance y...
Guia para evaluar
1. LA IMPORTANCIA DE LA EVALUACIÓN
DE PROGRAMAS SOCIALES:
MIDIENDO RESULTADOS
Gonzalo Hernández Licona
Septiembre 2008
2. ¿Por qué evaluamos?
Necesitamos contar con evidencia sobre
lo que sí funciona y cómo mejorarlo
Se tienen presupuestos limitados
Mejorar la implementación (gestión,
diseño, operación) del programa o política
Mejorar la presupuestación de la Política
Social
Transparencia y rendición de cuentas
3. CONEVAL
Medición de Pobreza Nacional, Estatal y
Municipal
Evaluación de Política y Programas de
Desarrollo Social, más allá de la Sedesol
Aprobar indicadores de programas de desarrollo
social
El CONEVAL tiene independencia técnica y de
gestión
En el Órgano de Gobierno tienen mayoría 6
académicos investigadores, elegidos
democráticamente
3
4. Marco Normativo
CONEVAL (2005-
2006)
Ley de Lineamientos de
Presupuesto y Evaluación y
Responsabilidad Monitoreo
Hacendaria. SHCP (Marzo 2007)
(2006-7)
Sistema de
Evaluación del
SFP Desempeño
(2007)
PEF 2007. Cámara
de Diputados
5. Lineamientos de Evaluación y
Monitoreo
Planeación e Indicadores Evaluación
Programa Annual
Objetivos estratégicos: de Evaluación
Instituciones
Evaluación de Consistencia y
Resultados
Alineación de Resultados Evaluación de
Programas Impacto
Evaluación de
Procesos
Matriz de Marco Lógico:
Programas Evaluación de Políticas
Seguimiento de Recomendaciones
6. Objetivo de esta Administración: Planear, administrar,
evaluar, presupuestar para obtener resultados
Los indicadores más relevantes hoy en día son:
El presupuesto asignado a cada programa
El % del presupuesto ejercido cada año
El número de becas/cursos de capacitación/litros de
leche/pasaportes entregados/juntas realizadas, etc.
Pero falta medir RESULTADOS:
¿Aumentó el ingreso/la ocupación de quien recibió el microcrédito?
¿Los desempleados que recibieron capacitación aprendieron y
encontraron trabajo?
¿El campo es hoy más competitivo, a partir del financiamiento
público?
¿Disminuyó la delincuencia por el programa de seguridad?
7. Es importante poder medir esos
Resultados
Resultados
Porcentaje de capacitados que obtienen un
Fin mejor trabajo
Porcentaje de beneficiarios capacitados que
Propósito efectivamente adquieren los
conocimientos técnicos adecuados
Número de cursos y talleres realizados
Implementación
Componentes Número de becas repartidas
Monto total de las becas repartidas
Porcentaje de desempleados capacitados
Actividades % del presupuesto ejercido
Costo promedio x actividad
Costo promedio de distribución de la beca
Consejo Nacional de Evaluación de la Política de Desarrollo Social 7
8. SED. Información sistemática, veraz,
transparente, sobre el desempeño global del
programa
I
I
I
E
E
I
I
I
I
Consejo Nacional de Evaluación de la Política de Desarrollo Social 8
9. SED. Medición inter-temporal de indicadores
Porcentaje de Presupuesto ejercido
100
80
60
40
20
0
1er trimestre 2o trimestre 3er trimestre 4to trimestre
2008
Programa de Becas Educación Media
Superior
Consejo Nacional de Evaluación de la Política de Desarrollo Social 9
10. SED. Medición inter-temporal de indicadores
250,000 Número de becas entregadas
Meta
200,000
150,000
100,000
50,000
0
1er trimestre 2o trimestre 3er trimestre 4to trimestre
2008
Programa de Becas Educación Media
Superior
Consejo Nacional de Evaluación de la Política de Desarrollo Social 10
11. SED. Medición inter-temporal de indicadores
100
Indicador de Cobertura
90
80
70
60
50
40
30
20
10
0
2018
2020
2022
2012
2014
2016
2006
2008
2024
2010
Programa de Becas Educación Media
Superior
Consejo Nacional de Evaluación de la Política de Desarrollo Social 11
12. SED. Medición inter-temporal de indicadores
100
Tasa de deserción Escolar EMS
90
80
70
60
50
40
30
20
10
0
2018
2020
2022
2012
2014
2016
2006
2008
2024
2010
Programa de Becas Educación Media
Superior
Consejo Nacional de Evaluación de la Política de Desarrollo Social 12
13. SED. Menú de información valiosa
I
I
I
E
E
Reporte Resumen
(EED) I
I
I
I
Consejo Nacional de Evaluación de la Política de Desarrollo Social 13
15. No es:
Un presupuesto que se asigna por inercia
Un presupuesto que se incrementa siempre en
cada programa
Un presupuesto que se asigna si el año anterior
se ejerció el 100% de lo que le dio al programa
16. Sí es:
Un presupuesto que se asigna dependiendo de
los problemas nacionales en los que se debe
incidir.
Ej. Infraestructura en Comunicaciones y Transportes;
bajo crecimiento económico en promedio; creación de
empleo formal; aumentar la productividad de la mano
de obra; mejorar la calidad de los servicios educativos
y de salud; mejorar la nutrición (desnutrición y
obesidad); salud universal, seguridad social universal;
45% en pobreza: reducir la pobreza de manera
sistemática y acelerada; reducir sustancialmente la
mortalidad materna e infantil; dispersión de
programas
Un presupuesto que COMPLEMENTA las
acciones y políticas que se deben realizar.
Ej Obesidad
17. Sí es:
Un presupuesto que busca otorgar recursos a
los programas que MUESTRAN resultados
finales.
EJ. Liconsa; Piso Firme; Conafe; Estancias
Infantiles
EXIGIR que se midan RESULTADOS FINALES
(35%)
Ej. Alta Competencia, Enciclomedia, Opciones Productivas,
Un presupuesto que busca MEJORAR el
desempeño de programas presupuestales, a
partir de las evaluaciones, para buscar
RESULTADOS.
Ej. Oportunidades urbano, liconsa rural, opciones
productivas.
19. Evaluación de Consistencia y Resultados. ¿Qué
es?
Objetivo: Evaluar hasta qué punto los programas sociales
tienen una clara consistencia interna y una orientación
hacia resultados, basados en la documentación y procesos
de los propios programas.
Es un diagnóstico sobre la capacidad institucional,
organizacional y de gestión de los programas para la
búsqueda de resultados.
Es un instrumento homogéneo, cuantificable, para poder
comparar el desempeño entre programas.
La evaluación se llevó a cabo entre 2007 y 2008 para 119
programas (Sedesol, Sagarpa, IMSS, SEP, SS, Economía,
STPS, R Agraria, ..)
Esta evaluación es la línea de base para analizar con qué
tipo de programas cuenta el nuevo Gobierno para lograr
sus metas.
20. Evaluación de Consistencia y Resultados.
Características compone de 100 preguntas en los temas
La evaluación se
de: Diseño, Planeación Estratégica, Operación, Población
Objetivo y Cobertura, Percepción de los Beneficiarios y
Resultados Finales.
Las evaluaciones fueron elaboradas por entidades
externas (universidades, centros de investigación,
expertos)
En la evaluación se pidió tener un resumen ejecutivo y un
documento de Fortalezas, Retos y Recomendaciones.
Las evaluaciones se entregaron a la Cámara en Marzo
2008.
Actualmente los programas están analizando las
recomendaciones pertinentes y factibles de la Evaluación
de Consistencia y Resultados, y están haciendo un Plan
de Trabajo para mejorar el desempeño de los programas.
Este Plan de Trabajo será público
21. Hallazgos generales:
Operación adecuada
Retos en:
Medir Resultados Finales
Tener mejor planeación estratégica
Consejo Nacional de Evaluación de la Política de Desarrollo Social 21
22. Hallazgos generales:
Definición de la Población Objetivo y Estrategia de
Cobertura
24 % de los programas cuantifica su población objetivo y
potencial
23 % cuenta con una estrategia de cobertura a corto, mediano
y largo plazo
Cumplimiento con normatividad
84 % de los programas cumplen con la normatividad
establecida para la entrega de apoyos
89 % tienen evidencia documental de que cumple con los
procesos de ejecución establecidos
Información sobre el progreso en el cumplimiento de
objetivos
36 % de los programas han medido resultados finales
42 % de los programas recolectan información veraz y
oportuna sobre los indicadores que miden sus objetivos
Consejo Nacional de Evaluación de la Política de Desarrollo Social 22