3. Temas de interés público
¿Cómo es administrado el programa?
¿Qué se hace realmente?
¿Qué resultados produce?
¿Alcanza los objetivos?
¿Los resultados valen lo que cuestan ?
¿Llega a todos los que va dirigido?
¿El programa debe mantenerse, aumentarse,
recortarse o abandonarse?
4. ¿Cómo seguir los resultados
de la gestión pública?
Auditoría
Evaluación
5. Auditoría
Auditoría es el proceso que consiste en
reunir y evaluar de manera objetiva y
sistemática las pruebas relativas a hechos
de manera de garantizar la
correspondencia entre estos hechos y los
criterios establecidos.
6. Según su alcance
Hay tres tipos básicos de auditoría:
financiera, cumplimiento y operacional (o de
valor por el dinero, desempeño). A las dos
primeras se las encuadra dentro de la
auditoría tradicional.
Juntos, estos tres tipos forman el marco de la
auditoría integral que ofrece una visión
completa de una organización o función.
7. Auditoría financiera
La auditoría financiera tiene por objetivo
determinar si los estados financieros del ente
auditado presentan razonablemente su
situación financiera, los resultados de sus
operaciones y sus flujos de efectivo, de
acuerdo a principios contables generalmente
aceptados.
8. Auditoría de cumplimiento
La auditoría de cumplimiento tiene por
objeto comprobar que las operaciones
efectuadas por el ente estén adecuadas a
las leyes, normas y procedimientos
aplicables a la entidad.
9. Cuando lo que se audita es la
gestión
Recibe varias denominaciones : de
gestión, operacional, de valor por el
dinero, de las tres E (economía, eficiencia
y eficacia), operativa, de resultados, de
desempeño, administrativa, de
rendimiento, etc.
10. Auditoría operacional o de
gestión
Su objetivo es evaluar el grado de
economía, eficiencia y eficacia en el manejo
de los recursos públicos, así como el
desempeño de los servidores y funcionarios
del Estado, respecto al cumplimiento de las
metas programadas y el grado en que se
están logrando los resultados o beneficios
previstos
11. Evaluación
Es el tipo de investigación aplicada que
intenta determinar el valor de un esfuerzo, de
una innovación, una intervención, algún
servicio o enfoque determinado (Robson,
1993)
12. Evaluación
Es el análisis sistemático de la operación
y/o de los efectos de una política o
programa , comparándolos con un grupo
de estándares implícitos o explícitos,
como medio para contribuir a mejorar el
programa o la política. Carol Weiss
13. La evaluación es un juicio de valor.
La evaluación es un proceso sistemático.
La evaluación es una medida de algo.
La evaluación es una herramienta
investigativa.
14. Evaluación formativa: produce información
que se aplicará durante el desarrollo del
programa para mejorarlo. Sirve a las
necesidades de los desarrolladores.
Evaluación sumativa: se hace luego de la
ejecución del programa. Aporta información
sobre la efectividad a los decisores de
políticas.
15. Cuando el cocinero prueba la
sopa, ésta es evaluación
formativa; cuando el comensal la
prueba, ésta es evaluación
sumativa. Carol Weiss
17. Evaluación es una palabra elástica que se
estira para cubrir juicios de distinto tipo.
Lo que todos los usos de la palabra tienen
en común es la noción de juzgar mérito.
18. El evaluador usa métodos de las ciencias
sociales para hacer el proceso valorativo
más sistemático y preciso.
La evaluación determina claramente las
cuestiones a indagar.
Reúne información en forma sistemática de
una variedad de aspectos afectados por la
implantación del programa.
19. Algunas veces traslada la evidencia en
términos cuantitativos y otras convierte los
datos en narrativa.
Se sacan conclusiones acerca de los modos
en que el programa es conducido, de sus
consecuencias más inmediatas o sobre su
efectividad en cumplir las expectativas de
quienes aportaron los fondos o participaron
del programa.
20. Establece comparaciones entre cambios
observados en distintas poblaciones.
Examina el contexto externo en el que el
programa opera para identificar otras
posibles razones que expliquen los cambios
observados.
Examina cuidadosamente la “teoría” de cómo
se supone que trabaja el programa y
compara con lo que realmente se observa
21. ¿Cuándo es importante
practicar una evaluación?
Cuando los resultados a evaluar son
complejos, difíciles de observar, compuestos
de varios elementos que reaccionan de
diversas maneras
Cuando las decisiones que se tomarán son
importantes y onerosas
Cuando hace falta contar con evidencias
para convencer a todos de la validez de las
decisiones sobre un programa
22. Fortalezas de la auditoría
Su credibilidad: Se espera que diga la
verdad en un mundo de ambigüedad y
enfoques sesgados.
Está apoyada por sociedades profesionales
fuertes
Está muy bien establecida y sigue
estándares que son ampliamente conocidos
y usados.
23. Fortalezas de la auditoría
Son estándares que tienen status legal o
cuasi legal.
Las prácticas de auditoría han sido capaces
de establecer criterios claros y valorar el
desempeño contra esos criterios de una
forma más definitiva y objetiva que la
evaluación.
24. Fortalezas de la evaluación
Puede explicar el porqué las cosas funcionan
o no.
Reconoce expresamente complejidad e
incertidumbre.
Usualmente no reclama búsqueda de la
verdad sino comprensión de lo sucedido.
Flexible en diseño y práctica.
Puede encarar respuestas sobre aspectos
atributivos.
25. Algunas diferencias
El rol que la evaluación juega depende de
quien es el cliente. La auditoría exige
independencia.
Cuando la responsabilidad de rendir cuentas
sólo significa cumplimiento con las normas,
ahí la evaluación tiene poco lugar.
Las preguntas para ser respondidas por una
auditoría son usualmente normativas en
lugar de causales o descriptivas como en la
evaluación.
26. Algunas diferencias
La existencia de criterios es una precondición
para auditar pero no para evaluar.
En auditoría el análisis toma en
consideración que las evidencias procedan
de fuentes autorizadas y en lo posible
oficiales.
Usualmente, sólo en auditorías de gran
magnitud se aplican algunas técnicas
estadísticas.
27. Algunas diferencias
En evaluación se hace uso de diseños
experimentales y cuasi experimentales.
La auditoría de desempeño muestra las
cualidades de chequeo de la auditoría y es
marcadamente diferente de las prácticas de
evaluación y de la ciencia empírica social.
El papel de la evaluación no está tan bien
articulado como el de la auditoría.
28. Algunas diferencias
La evaluación trata de comprender los
objetivos del programa pero no requiere la
precisión propia de una auditoría, para ella la
efectividad de un programa no siempre se
mide contra objetivos. Hay más interés en
medir cambios observados, establecer
relaciones causales y comparar con lo que
hubiera sucedido sin ese programa.
29. Algunas diferencias
Las auditorías de desempeño están fuertemente
ligadas con la evaluación de la economía y
eficiencia de los gastos efectuados para atender
la implementación de políticas, la evaluación no.
Siempre habrá necesidad de auditorías del tipo
cumplimiento. Responden preguntas que una
evaluación no podría satisfacer por los
procedimientos que se siguen.
30. Algunas diferencias
La auditoría toma y debe tomar una
perspectiva organizacional cuando
analiza sistemas y procedimientos
dado que las prácticas auditadas
ocurren dentro de la organización. La
evaluación, más rutinariamente toma
su programa o política como sujeto
de análisis.
31. Las diferencias clave no son las herramientas y
métodos usados sino los contextos
institucionales de cada una.
Auditorías de desempeño: son llevadas a
cabo por cuerpos de auditoría bien
organizados y con mandato legislativo.
Evaluación: no tiene una base institucional
comparable, usualmente es llevada a cabo
en nombre de alguna entidad que la
solventa.
32. Auditoría y evaluación
Similitudes:
♦ Ambas pueden ser usadas para valorar el
desempeño de programas del sector público.
♦ Ambas aplican procedimientos bien
establecidos y sistemáticos.
♦ Ambas son practicadas por profesionales.
33. En común:
Comparten el énfasis puesto en las
evidencias y en una adecuada recolección de
datos, aunque el tipo de datos es usualmente
distinto.
Ambas están asociadas a la idea de rendir
cuentas.
Prestan atención a la adecuada difusión de
los hallazgos
34. Ambas actividades se complementan.
Las auditorías siempre son una evaluación
independiente que pueden incluir algún
grado de análisis cuantitativo y cualitativo en
tanto que la evaluación implica un enfoque
menos independiente y más de consulta.
35. En la búsqueda de respuestas definitivas
en entramados complejos, el uso de la
auditoría aumenta el riesgo de que las
cosas no vayan bien, que sus hallazgos
puedan ser refutados.
36. Auditoría y evaluación
Tradicionalmente, la auditoría se centra más
en las prácticas de gestión, los sistemas y los
procedimientos y la evaluación pone el
énfasis en los resultados y el impacto de
programas y políticas.
Procesos vs. resultados
37. ¿En qué se parecen y en qué
difieren?
Evaluación = Rendición de cuentas + Aprendizaje
Auditoría = Rendición de cuentas