Diseño y evaluación de Intervenciones Tempranas Comentario Dra. Paula Bedregal 6 noviembre 2008
Razones claras para una política de infancia basada en intervenciones temprana Prioridad ética:  Los niñ@s tienen Derechos La necesidad de Justicia Prioridad técnica: Hay evidencia científica mundial suficiente Prioridad económica: Es una inversión estratégica para el país
Razones claras para  evaluar y monitorizar Imperativo ético: Buen uso de Recursos Públicos. Imperativo técnico: Mejorar la calidad de lo que se hace con miras a los objetivos trazados
¿Cómo está nuestra cultura de evaluación?
La evaluación en el contexto de Modernización del Estado Eje central de la Modernización enfatizada en la década de 1990: Sin información NO se puede decidir (evaluación y control de la gestión) Cumplimiento de objetivos Rendición de cuentas a la ciudadanía Transparencia en el gasto público Cambio cultural: en sector público y privado
Resultados E valuación de Programas  Públicos   Recomendaciones – Implicancias (EPG  – EI ) 2000-2008 Fuente: Arenas A (DIPRES). Evaluación de Programas Públicos, agosto 2008
Algunas conclusiones programas evaluados en Chile (DIPRES)   Programas sin objetivos. Programas sin considerar sistemas de monitoreo ni evaluación (no hay indicadores útiles) Dificultad en evaluar la eficiencia y efectividad. Falta evaluar la rentabilidad social y la percepción en la ciudadanía.
BENEFICIOS DE LA EVALUACION ¿Vale la pena hacer lo que se hace? Construir capacidad institucional. Logro de objetivos claramente planteados: desarrollo infantil? Aprendizajes? ¿El programa/política está siendo implementado tal como fue diseñado? Mejorar la gestión del programa/proyecto Identificar variables claves ¿Responde a las necesidades de los interesados? ¿Es deseable expandir proyectos a mayor escala? ¿Me permite realizar abogacía en favor de los niñ@s y familias?
¿Qué sorprende en Chile? Hay evaluaciones  Falta de integración en un  SISTEMA DE EVALUACION. Consenso sobre objetivos y metas del SISTEMA DE EDUCACIÓN PREESCOLAR OBJETIVOS DE IMPACTO OBJETIVOS DE PROCESO
¿Cuál es el desempeño del Sistema? ¿Qué fracción de los resultados es atribuible directamente a CADA intervención y al CONJUNTO? ¿De aquellos que reciben realmente la intervención, cuantos logran resultados positivos?  Cobertura efectiva
¿Qué tipo de información requerimos? UN SISTEMA DE Información para decisiones inmediatas y futuras. Sistemas de evaluación: prospectiva   Clarificar qué se va evaluar: el programa? La política? El sistema? Evaluación del impacto (efectividad, costo, satisfacción de los usuarios). Qué diseño de evaluación Qué instrumentos de evaluación Que modelo explicativo Quienes participan, por qué, Entrega de información. Rendición de cuentas. A quiénes
¿Qué tipo de información requerimos? Sistemas de monitoreo: alerta inmediata ¿Cómo se va implementando y desarrollando?  ¿Tengo los insumos necesarios? RRHH, Infraestructura, Equipos, Insumos básico, en procesos de coordinación, en red, institucionalidad Evaluación continua de procesos ¿Cuáles son los logros intermedios del programa / política? Instalación de procesos
Pensemos  durante  el diseño del programa / política / sistema Evaluación  a priori  de los potenciales impactos que la instalación de una política/ programa / proyecto determinado tendrá. Qué impacto se espera Qué aspectos determinan los resultados.(Enfoque de determinantes sociales). Cuáles serán las necesidades mínimas en RR/organización para logro Variables críticas  Actores relevantes
Modelo ecológico (adaptado de Myers . In search of educational quality in Mexican Schools) 4. Sociedad y Comunidad 3. Sistema Educativo 2.Escuela 1.Aula Educadores Niños Padres y madres Valoración de Ed. Preescolar Disponibilidad de redes sociales Tipo de Gestión Tradiciones formales Competencia otras instancias Creencias y formación. Características intrínsecas Estructura, uso del aula, características del grupo Creencias y formación. Características intrínsecas
Red Social Sociedad Civil Contexto socio-económico Nacimiento Muerte Curso de la Vida Género Adaptado de Hertzman y Keating.  Early Child Development: A powerful equalizer, 2007 Enfoque de desarrollo y curso de vida
 
Fundamental contar con un consenso sobre los objetivos y metas del Sistema…y plazos La carta de navegación sobre la cual se dirijan los esfuerzos país
“ La evaluación es una tarea muy necesaria en mi trabajo cotidiano. Es esencial no solamente ayudando a evaluar mi trabajo sino también el del grupo.  Nos permite ser conscientes, responsables y reflexivos sobre los aportes de cada uno, y quizás lo más importante nos permite ver como progresamos y nos desarrollamos como individuos y como grupo” Supervisor de un programa para padres (Bernard van Leer Foundation, 2002).

Presentación de Paula Bedregal

  • 1.
    Diseño y evaluaciónde Intervenciones Tempranas Comentario Dra. Paula Bedregal 6 noviembre 2008
  • 2.
    Razones claras parauna política de infancia basada en intervenciones temprana Prioridad ética: Los niñ@s tienen Derechos La necesidad de Justicia Prioridad técnica: Hay evidencia científica mundial suficiente Prioridad económica: Es una inversión estratégica para el país
  • 3.
    Razones claras para evaluar y monitorizar Imperativo ético: Buen uso de Recursos Públicos. Imperativo técnico: Mejorar la calidad de lo que se hace con miras a los objetivos trazados
  • 4.
    ¿Cómo está nuestracultura de evaluación?
  • 5.
    La evaluación enel contexto de Modernización del Estado Eje central de la Modernización enfatizada en la década de 1990: Sin información NO se puede decidir (evaluación y control de la gestión) Cumplimiento de objetivos Rendición de cuentas a la ciudadanía Transparencia en el gasto público Cambio cultural: en sector público y privado
  • 6.
    Resultados E valuaciónde Programas Públicos Recomendaciones – Implicancias (EPG – EI ) 2000-2008 Fuente: Arenas A (DIPRES). Evaluación de Programas Públicos, agosto 2008
  • 7.
    Algunas conclusiones programasevaluados en Chile (DIPRES) Programas sin objetivos. Programas sin considerar sistemas de monitoreo ni evaluación (no hay indicadores útiles) Dificultad en evaluar la eficiencia y efectividad. Falta evaluar la rentabilidad social y la percepción en la ciudadanía.
  • 8.
    BENEFICIOS DE LAEVALUACION ¿Vale la pena hacer lo que se hace? Construir capacidad institucional. Logro de objetivos claramente planteados: desarrollo infantil? Aprendizajes? ¿El programa/política está siendo implementado tal como fue diseñado? Mejorar la gestión del programa/proyecto Identificar variables claves ¿Responde a las necesidades de los interesados? ¿Es deseable expandir proyectos a mayor escala? ¿Me permite realizar abogacía en favor de los niñ@s y familias?
  • 9.
    ¿Qué sorprende enChile? Hay evaluaciones Falta de integración en un SISTEMA DE EVALUACION. Consenso sobre objetivos y metas del SISTEMA DE EDUCACIÓN PREESCOLAR OBJETIVOS DE IMPACTO OBJETIVOS DE PROCESO
  • 10.
    ¿Cuál es eldesempeño del Sistema? ¿Qué fracción de los resultados es atribuible directamente a CADA intervención y al CONJUNTO? ¿De aquellos que reciben realmente la intervención, cuantos logran resultados positivos? Cobertura efectiva
  • 11.
    ¿Qué tipo deinformación requerimos? UN SISTEMA DE Información para decisiones inmediatas y futuras. Sistemas de evaluación: prospectiva Clarificar qué se va evaluar: el programa? La política? El sistema? Evaluación del impacto (efectividad, costo, satisfacción de los usuarios). Qué diseño de evaluación Qué instrumentos de evaluación Que modelo explicativo Quienes participan, por qué, Entrega de información. Rendición de cuentas. A quiénes
  • 12.
    ¿Qué tipo deinformación requerimos? Sistemas de monitoreo: alerta inmediata ¿Cómo se va implementando y desarrollando? ¿Tengo los insumos necesarios? RRHH, Infraestructura, Equipos, Insumos básico, en procesos de coordinación, en red, institucionalidad Evaluación continua de procesos ¿Cuáles son los logros intermedios del programa / política? Instalación de procesos
  • 13.
    Pensemos durante el diseño del programa / política / sistema Evaluación a priori de los potenciales impactos que la instalación de una política/ programa / proyecto determinado tendrá. Qué impacto se espera Qué aspectos determinan los resultados.(Enfoque de determinantes sociales). Cuáles serán las necesidades mínimas en RR/organización para logro Variables críticas Actores relevantes
  • 14.
    Modelo ecológico (adaptadode Myers . In search of educational quality in Mexican Schools) 4. Sociedad y Comunidad 3. Sistema Educativo 2.Escuela 1.Aula Educadores Niños Padres y madres Valoración de Ed. Preescolar Disponibilidad de redes sociales Tipo de Gestión Tradiciones formales Competencia otras instancias Creencias y formación. Características intrínsecas Estructura, uso del aula, características del grupo Creencias y formación. Características intrínsecas
  • 15.
    Red Social SociedadCivil Contexto socio-económico Nacimiento Muerte Curso de la Vida Género Adaptado de Hertzman y Keating. Early Child Development: A powerful equalizer, 2007 Enfoque de desarrollo y curso de vida
  • 16.
  • 17.
    Fundamental contar conun consenso sobre los objetivos y metas del Sistema…y plazos La carta de navegación sobre la cual se dirijan los esfuerzos país
  • 18.
    “ La evaluaciónes una tarea muy necesaria en mi trabajo cotidiano. Es esencial no solamente ayudando a evaluar mi trabajo sino también el del grupo. Nos permite ser conscientes, responsables y reflexivos sobre los aportes de cada uno, y quizás lo más importante nos permite ver como progresamos y nos desarrollamos como individuos y como grupo” Supervisor de un programa para padres (Bernard van Leer Foundation, 2002).