5. Diseño Investigación
Formulación
de la
estrategia de
investigación:
Elegir la técnica de investigación
Especificar la población a estudiar
Decidir el método de muestreo y el tamaño de la muestra
Diseñar los instrumentos de recogida de datos
Organizar el trabajo de campo
Preparar un presupuesto y un cronograma
7. Retomando la lógica genérica del diseño de una evaluación
PLAN, PROGRAMA, PROYECTO DE INTERVENCIÓN SOCIAL (MIRADA GENÉRICA)
Diagnóstico
Plan de
Intervención
Intervención Evaluación
Evaluación Ex Ante
-DE DISEÑO
-EFICIENCIA
Evaluación Intermedia
-SEGUIMIENTOY
MONITOREO
Evaluación Ex Post
-IMPACTO
-RESULTADOS
Universo de
Estudio
Unidades de
Análisis
Hipótesis Diseño muestral
Plan de análisis
Contexto y
formas de
recoger
información
Instrumentos Procesamiento
9. Diseño Investigación
Para realizar la evaluación de un
proyecto hay que precisar el
universo de estudio, las unidades
de análisis, las hipótesis, el diseño
muestral, el plan de análisis, el
contexto y las formas de recoger la
información, los instrumentos de
recolección de datos, las formas y
pasos del procesamiento y las
técnicas a utilizar.
Universo de
Estudio
Unidades de
Análisis
Hipótesis
Diseño Muestral Plan de Análisis
Contexto y formas
de recoger
información
Instrumentos Procesamiento
Estos ya los vimos
10. Diseño Muestral
La evaluación ex ante, intermedia, ex post, pretende establecer el GRADO DE
EFICIENCIA del desempeño del proyecto y determinar en qué medida se están
alcanzando los objetivos perseguidos (o se pueden alcanzar, en el caso ex ante) en la
población meta del mismo.
En ocasiones la
población es
demasiado amplia y
resulta imposible
abarcarla por
completo
Segmentamos
y generamos
una muestra
(subconjunto)
i) permitir la puesta a prueba de hipótesis sustantivas. En
este caso se trata de relaciones entre las variables que
permiten determinar la eficiencia operacional o el impacto
ii) hacer posible que los resultados obtenidos de la
muestra sean generalizables al universo. Las relaciones
contrastadas no deben limitarse al subconjunto muestral
sino a la totalidad del proyecto evaluado.
Una muestra debe satisfacer dos condiciones
12. La selección de la muestra requiere un orden secuencial
que es conveniente recordar.
DEFINICIÓN DE UN MARCO
MUESTRAL
Una vez establecido en forma precisa el universo de la evaluación, debe elaborarse el
marco de la muestra. Se trata de una lista que comprende todas las unidades que
constituyen la población y que incluye la información relevante que esté disponible.
DETERMINACIÓN DE LAS
UNIDADES ELEMENTALES DE
MUESTREO
Esto es, las personas o grupos que poseen los atributos a partir de los cuales se ha
definido la población.
ELECCIÓN DE LAS UNIDADES DE
MUESTREO.
Hay que elegir las unidades elementales que sirven de base para tomar la muestra. Se
recurre a la opción de tomar grupos de unidades por razones prácticas, como sucede
cuando hay diferentes modalidades de ejecución de proyectos que se llevan a cabo en
distintos ámbitos jurisdiccionales.
SELECCIÓN DE MUESTRAS.
Hay dos métodos básicos para elegir las muestras.
El primero se basa en el juicio del evaluador y al ser una muestra no probabilística sus
resultados no pueden generalizarse al universo.
El segundo método selecciona muestras, donde cada unidad muestral tiene una
probabilidad conocida de ser escogida, por lo que los hallazgos son generalizables al
universo y se puede determinar el grado de incertidumbre de la estimación.
13. EL PLAN DE ANÁLISIS
Funciones del plan de análisis i) sintetizar la información disponible en indicadores
ii) elegir los métodos y técnicas que permitan utilizar la
información para alcanzar los resultados buscados
iii) apreciar la naturaleza de los indicadores y las escalas
aplicables a los mismos (de razón, intervalar, ordinal o
nominal) y, en función de éstas, seleccionar las herramientas
estadísticas que cabe utilizar.
Al prepararlo es necesario tomar decisiones sobre la CANTIDAD DE INFORMACIÓN
requerida, losTIPOS DE INFORMACIÓN a analizar, la CLASE DE ANÁLISIS que va a
ser aplicado a cada tipo de información, los RECURSOSQUE SON NECESARIOS para
realizar los análisis, la combinación de información, análisis y recursos, en un
contexto temporal y la FORMA EN QUE SE PRESENTARÁN LOS RESULTADOS
(Rivera, 1976).
14. El contexto y las formas de recoger información
Lo primero
Todo proyecto es evaluado en su contexto sociocultural. Ello hace necesario analizar los factores territoriales y
socioeconómicos que le han influido.
Es indudable que el contexto afecta al proyecto, y puede llegar a determinar su éxito o fracaso. Por ello, hay que
prestarle particular atención durante la evaluación. Los aspectos relevantes del contexto deben considerase en
las unidades de análisis que resulten de las hipótesis generales y deben también especificarse en el modelo de
evaluación escogido.
Macro
Micro
2 contextos a) El CONTEXTO “MACRO”, que incluye los factores socioculturales, como el
régimen político, las actitudes frente al proyecto, la importancia que se
concede a los servicios prestados, las funciones asignadas a quienes pueden
contribuir o impedir que se recurra al servicio, y la influencia de diferentes
grupos de personas (Bond, 1985).
b) El CONTEXTO “MICRO” es el ambiente en que se produce la evaluación.
Puede ser informal, formal no estructurado y formal estructurado (cuadro 8
.1). El cuadro tiene una casilla imposible de llenar, porque no puede haber
resultados sistemáticos cuando la indagación no lo es.
16. Galtung dice que las respuestas pueden ser calificadas como actos. Los estados de los objetos
analizados pueden ser captados a través de actos no verbales y verbales. Estos últimos pueden
ser dicotomizados en orales y escritos.
Verbales y no verbales
/dicotomizarlos en orales y
escritos
Así hay tres contextos micro de recolección de información y tres tipos de resultados de la
indagación
3 contextos micro para la
evaluación
La recolección de información se realiza sobre las unidades de análisis. Según su naturaleza se
establecerán formas idóneas para relevar la información pertinente. Esto requiere consultar
informes sobre la situación económica, política y social, planes globales y sectoriales que
enmarcan al proyecto, informes de la agencia que lo supervisa y serias cronológicas de los
distintos recursos utilizados.
Las unidades de análisis son
las que entregan la
información / es relevante su
naturaleza y se cura con
elementos macro
La evaluación que utiliza modelos experimentales, cuasiexperimentales y no experimentales
exige efectuar un relevamiento de campo. Una forma adecuada de sistematizar las principales
formas que asume la información —desarrollada por Galtung (1966)— comienza definiendo al
dato como la respuesta a un estímulo dada por cierta unidad de análisis.
Esta puede ser cualquier unidad elemental de muestreo; no necesariamente un individuo. Así,
estímulo pasa a ser sinónimo de indagación y la respuesta es el resultado de la misma, que
expresa el estado del objeto analizado, mostrando esta secuencia:
No necesariamente debe ser
un individuo
Indagación
Resultado
de la
Indagación
DATO
18. Que son los datos y la indagación
Datos Indagación
Por datos “puede entenderse la variedad de
carácteres observados en las dimensiones de
atributos de las unidades investigadas, que no
representan otra cosa que un determinado valor
de una variable” (Maintz, 1975: 46).
Hay una interconexión entre la unidad de análisis
de la evaluación, las dimensiones conceptuales
proporcionadas por la teoría y el dato, que es la
observación registrada del valor que una unidad de
análisis alcanza en una dimensión
La indagación es sistemática cuando todas las unidades
son sometidas al mismo tratamiento, vale decir, cuando
todas ellas reciben el mismo estímulo (Galtung, 1966).
Los resultados de la indagación son sistemáticos cuando
las categorías de respuesta se mantienen constantes.
Los datos pasan a ser, entonces, los valores que asumen
las variables en cada unidad de análisis.
19. Referencias
Bibliográficas
• Canales Cerón, Manuel (2006). Metodologías de investigación
social. Santiago. Lom Ediciones. 408 p.
• Cohen Ernesto y Franco Rolando (2012). Evaluación de proyectos
sociales. Editorial siglo XXI. México.
• Pérez Serrano, Gloria (2016). Diseño de proyectos sociales:
aplicaciones prácticas para su planificación, gestión y evaluación.
Editorial Narcea. Madrid, España.
• Nirenberg, Olga ( 2017). Evaluar para la transformación :
Innovaciones en la evaluación de programas y proyectos
sociales. Editorial Paidos, Buenos Aires,Argentina.
• Hernández Sampieri, Roberto, Fernández Collado, Carlos y
Baptista Lucio María del Pilar (2010). Metodología de la
investigación. México D.F.: Mcgraw-Hill.