Este documento describe el método evaluativo de Scriven orientado al consumidor. Scriven propuso que los evaluadores deben actuar como sustitutos informados de los consumidores para ayudar a los profesionales a mejorar la calidad de sus productos y servicios y para ayudar a los consumidores a identificar y valorar opciones. El método implica identificar y ordenar programas y productos disponibles para los consumidores de manera independiente.
1. Universidad Popular Autónoma del Estado de
Puebla
DOCTORADO EN PEDAGOGÍA
ANÁLISIS Y EVALUACIÓN DE LA EDUCACIÓN
Dra. Judith Águila Mendoza
Método Evaluativo orientado hacia el consumidor
PRESENTA:
Equipo 2
José Eduardo Castillo Caballero
Fortino Rincón Lucero
Pablo Jesús López Vázquez
Puebla, Pue. 18 de noviembre de 2011.
2. • EL PAPEL DEL EVALUADOR «SUSTITUTO INFORMADO DEL
CONSUMIDOR»
• a) Provisto de técnicas para una información pertinente y
exacta.
• b) El evaluador debe ayudar a los profesionales a
proporcionar productos de alta calidad para los
consumidores.
• c) El evaluador debe ayudar a los consumidores a identificar y
valorar bienes y servicios alternativos.
Universidad Popular Autónoma del Estado de Puebla
METODO EVALUATIVO DE SCRIVEN ORIENTADO AL CONSUMIDOR
3. • Scriven ha definido la evaluación; como la valoración
sistemática delvaloroelméritodelascosas.
• Los evaluadores deben ser capaces de llegar a
juicios de valor justificables más que de medir
cosas o determinar si las metas han sido
alcanzadas.
• Su método evaluativo práctico, consiste en
identificar y ordenar los programas y productos
disponibles para los consumidores.
Universidad Popular Autónoma del Estado de Puebla
4. DEFINICIÓN DE EVALUACIÓN
EVALUACIÓN (1967) Actividad metodológica que consiste en la recopilación de
datos, mediante la definición de unas metas.
1.- Los instrumentos de
recopilación de datos.
2.- Las valoraciones 3.-La selección de metas.
En su evolución del término EVALUACIÓN, «ES LA DETERMINACIÓN
SISTEMÁTICA Y OBJETIVA DEL VALOR O EL MÈRITO DE ALGÚN OBJETO,
LAS EVALUACIONES SE REALIZAN MEJOR CONTRATANDO A UN
EVALUADOR INDEPENDIENTE, PARA QUE EMITA JUICIOS.
LA EVALUACIÓN ES PREFERENTEMENTE COMPARATIVA
Universidad Popular Autónoma del Estado de Puebla
5. SCRIVEN
TRADICIÓN TYLERIANA
(considera que la
evaluación debe
determinar si los objetivos
han sido alcanzados)
Las evaluaciones basadas en este
método, son demasiado
limitadas para prever efectos
secundarios. Los evaluadores
deben juzgar las metas y no
dejarse limitar por ellas.
Los evaluadores deben identificar
todos los resultados de un
programa, valorar las
necesidades de los consumidores
SCRIVEN
PLAN DE CRONBACH (1963)
Criticó la práctica predominante
de la evaluación de Programas.
Aconseja un método orientado
hacia el desarrollo.
Este Plan olvida la importante
distinción entre la meta y las
funciones de la evaluación,
identifica la evaluación con una
sola de sus funciones, la que
denomina «^EVALUACIÓN
FORMATIVA»
Universidad Popular Autónoma del Estado de Puebla
6. EVALUACIÓN FORMATIVA Y SUMATIVA
EVALUACIÓN FORMATIVA
Ayuda a desarrollar programas y
otros objetos.
Proporciona información continua
para ayudar a planificar y luego
producir algún objeto.
En la elaboración de currículos
soluciona problemas acerca de la
validez del contenido.
En general, se realiza para ayudar al
personal a perfeccionar cualquier
cosa que esté desarrollando
EVALUACIÓN SUMATIVA
Calcula el valor del objeto una vez
que ha sido desarrollado y puesto en
el mercado.
Permite decidir si todo el
currículo ya finalizado,
representa un avance sobre las
otras alternativas posibles. Por
lo general debe ser realizada
por un evaluador externo.
Sirve a los consumidores ya que
proporciona valoraciones
independientes.
Universidad Popular Autónoma del Estado de Puebla
7. EVALUACIÓN AMATEUR VS EVALUACIÓN PROFESIONAL
EVALUACIÓN
AMATEUR
• (AUTOEVALUACIÓN) Scriven la prefiere ante la profesional.
Quienes actúan como sus propios evaluadores pueden ser poco
sistemáticos y subjetivos.
• Pueden ser solventes, dedicados a la consecución del éxito.
EVALUACIÓN
PROFESIONAL (EP)
• Si intervienen demasiado pronto, pueden «ahogar la creatividad de un
grupo productivo». Pueden retardar el proceso de desarrollo urgiendo
la clarificación de los objetivos.
• Son necesarios durante las últimas etapas del desarrollo
SCRIVEN
• Recomienda que un EP sea incluido en el personal que interviene para
llevar a cabo la evaluación formativa, aconseja que los EP sean los
encargados de realizar y presentar las evaluaciones sumativas.
Universidad Popular Autónoma del Estado de Puebla
8. EVALUACIÓN INTRÍNSECA Y EVALAUCIÓN FINAL
LA EVALUACIÓN INTRINSECA
valora las cualidades de una
mediación, sin tener en cuenta
los efectos sobre los clientes,
juzgando ciertas características
como las metas, estructura,
metodología, entre otras.
LA EVALUACIÓN FINAL, no se
preocupa de la naturaleza del
programa, sino de los efectos
sobre los clientes.
Scriven, reconoce que ambos
tipos pueden contribuir tanto a
la evaluación formativa y
sumativa.
Universidad Popular Autónoma del Estado de Puebla
9. METODOLOGÍA
Los métodos incluyen listas de control, la valoración
de las necesidades, la evaluación de los objetivos, la
planificación experimental y cuasiexperimental, el análisis
del modus operandi y el análisis de los costes.
Otro método para el consumidor externo e
independiente consiste en recomendar la obtención, de
conclusiones a partir de estudios de programas
financiados públicamente.
Universidad Popular Autónoma del Estado de Puebla
10. 1.- EVALUACIÓN SIN METAS
Según este método, el evaluador permanece a
propósito ignorante de las metas fijadas para el programa
e investiga todos sus efectos, independientemente de sus
objetivos.
Es reversible y complementario; se puede empezar sin
metas, con el fin de investigar todos los efectos, y luego
cambiar al método basado en las metas para asegurar
que la evaluación determinará si las metas han sido
alcanzadas, incluso puede realizarse simultáneamente
ambos tipos por diferentes evaluadores.
Universidad Popular Autónoma del Estado de Puebla
11. VALORACIÓN DE LAS NECESIDADES
¿Cómo se pueden separar las consecuencias
deseadas, de las indeseadas?
Comparando los resultados observados con las
necesidades valoradas de los consumidores. Una
necesidad es cualquier cosa que sea esencial para un
modo satisfactorio de existencia. Ejemplo: la vitamina C y
la alfabetización, si faltan, enferman a una persona o
social e intelectualmente la debilitan. Por sus resultados
un programa puede juzgarse como bueno, malo o
indiferente, dependiendo si contribuyen o no a satisfacer
las necesidades identificadas.
Universidad Popular Autónoma del Estado de Puebla
12. LISTA DE CONTROL DE INDICADORES DE LA
EVALUACIÓN
Emplea múltiples perspectivas, introduce múltiples
niveles de valoración y utiliza múltiples métodos, por lo
cual se le denomina multimodelo de evaluación. Incluye
indicadores formativos y sumativos, en 18 puntos que
son:
1. Descripción. ¿Qué hay que evaluar? El evaluado, descrito
objetivamente. ¿Cuáles son sus componentes? ¿Cuáles
son sus relaciones?
2. El cliente. ¿Quién ha encargado la evaluación? Que
puede ser o no iniciador de la investigación evaluativa (
fabricante, agencia, planificador).
Universidad Popular Autónoma del Estado de Puebla
13. 3. Antecedentes y contexto del evaluado y la evaluación,
incluye la identificación de los mantenedores (no clientes,
patrocinador, etc.), la presunta naturaleza del evaluado,
tipo deseado de evaluación.
4. Recursos. Lo que se pueda utilizar por el evaluado y los
evaluadores (dinero, habilidad, experiencia, tecnología,
condiciones de flexibilidad).
5. Función. ¿Qué hace el evaluador? Lo que se supone que
hace y la función real para el evaluador y consumidor.
6.-Sistema de distribución. ¿Cómo llega al mercado el
avaluado? ¿Cómo se mantiene en servicio? ¿Cómo se
pone al día? ¿Cómo se lleva acabo su realización, control y
perfeccionamiento? ¿Quién hace todo eso?
Universidad Popular Autónoma del Estado de Puebla
14. 7. El consumidor. ¿Quién utiliza o recibe los efectos de la
evaluación? Distinguir los consumidores escogidos
(mercado deseado), poblaciones afectadas (verdadero
mercado), población receptora (verdaderos
consumidores). El investigador, el cliente y el contexto
deben considerarse en los efectos totales, describiéndose
como afectados, impactados o implicados.
8. Las necesidades y valores de los afectados. Incluye los
deseos, necesidades, valores y normas sobre el mérito y
los ideales juzgados o supuestos.
9. Normas. ¿Existen normas preexistentes y objetivamente
valoradas, acerca del mérito o el valor, que deban
aplicarse?
Universidad Popular Autónoma del Estado de Puebla
LISTA DE CONTROL DE INDICADORES DE LA EVALUACIÓN
15. ¿Procede alguna de ellas del cliente o el consumidor, de la
función y de las necesidades/valores? Si se tienen en
cuenta las metas y pueden ser valoradas como
apropiadas, legales y éticas pueden ser aceptadas como
normas.
Universidad Popular Autónoma del Estado de Puebla
16. Universidad Popular Autónoma del Estado de Puebla
10.- EL PROCESO EVALUACION.
LIMITACIONES, COSTES,
BENEFICIOS
EVALUANDO
LISTA DE CONTROL DE INDICADORES DE LA EVALUACIÓN
11.- RESULTADO EFECTOS EN EL
EVALUANDO
AFECTIVOS,
COGNITIVOS,
PSICOMOTORES,
SANITARIOS, SOCIALES,
AMBIENTALES
DESEADOS
O INDESEADOS
D
U
R
A
C
I
O
N
12.-POSIBILIDAD DE
GENERACIÓN
POSIBILIDAD DE DISTRIBUCIÓN, VENTA,
EXPORTACIÓN, DURACIÓN, MODIFICACIÓN.
PERSONAS,
LUGARES, TIEMPOS,
VERSIONES
13.- COSTES
PREPARACION, MANTENIMIENTO Y
PERFECCIONAMIENTO.
PERSONAL
14.- COMPARACIONES
OPCIONES ALTERNATIVAS.
LAS DISPONIBLES, LAS NO
DISPONIBLES,
COMPARAR EN TERMINOS DE
EFECTIVIDAD
17. Universidad Popular Autónoma del Estado de Puebla
15.- SIGNIFICADO
VALIDACION
PROCEDIMINETO.
SINTESIS DEL
PROCESO
LISTA DE CONTROL DE INDICADORES DE LA EVALUACIÓN
16.- RECOMENDACIONES CRITERIO
PERSONAL
REALIZAR
RECOMENDACIONES
REPRESENTO
UTILIDAD
17.-EL INFORME
18.- LA METAEVALUACION
NO EXISTEN PRUEBAS
CIENTIFICAS
ES NECESARIO EVALUAR EL VOCABULARIO, LA
EXTENSION, EL DISEÑO, EL MEDIO, LA
LOCALIZACION, Y EL PERSONAL
EXAMEN
LA EVALUACION DEBE SER EVALUADA ANTES DE SU
REALIZACION Y DE LA DIFUSION DEL INFORME
EVALUA INSTRUMENTOS DE EVALUACION
1968 SCRIVEN UTILIZAR LISTA DE INDICADORES DE LA EVALUACIÓN
18. Universidad Popular Autónoma del Estado de Puebla
SCRIVEN
CONCEPTOS
EVALUATIVOS
PREDOMINANTES
CRITICO
REFLEXIVO Y
EXPRESIVO
IDEOLOGIAS EVALUATIVAS
CLASIFICA CONCEPTOS EVALUATIVOS EN CUATRO:
CONCLUYE LA
EVALUACION
DEBE SER
AUTOREFERENTE
IDEOLOGIA
SEPARISTA
IDEOLOGIA
POSITIVISTA
IDEOLOGIA
ADMINISTRATIVA
IDEOLOGIA
RELATIVISTA
EN CONTRA DE LA
AUTOREFERENCIA,
BUSCA EVALUADORES
INDEPENDIENTES POR
LA VALORFOBIA
“INTENSISIMO MIEDO A
SER EVALUADO “
LA EVALUACION
NO TIENE
VALOR , NO HAY
SIGNIFICADO A
RESULTADOS
OBTENIDOS
ESTABLECE
ORGANIZACIÓN PARA
EVALUAR AL
PROGRAMA , NO AL
PERSONAL,
TENDENCIA A
PRODUCIR INFORMES
FAVORABLES
TODO ES RELATIVO , ASI
LA EVALUACION TIENE
VALORACIONES
MULTIPLES, RESPUESTAS
MULTIPLES,
PERSPECTIVAS
MULTIPLES, CRITERIOS
MULTIPLES
PROFESIONALIZACION DE LA EVALUACIÓN: PROFESIONALIZAR LA EVALUACIÓN DE IDEAS Y
TRABAJOS DE EVALUADORES
19. Universidad Popular Autónoma del Estado de Puebla
METODO EVALUATIVO DE SCRIVEN ORIENTADO AL CONSUMIDOR
EL EVALUADOR QUE UTILICE EL MÉTODO PUEDE LLEGAR
A INDEPENDIZARSE TANTO DE QUIENES LO PRACTICAN
QUE QUIZA NO PUEDA AYUDARLES A LA HORA DE SERVIR
MEJOR A LOS CONSUMIDORES
DESVENTAJA
VENTAJA
ES UNA VALORACIÓN SÓLIDA E INDEPENDIENTE
CONCEBIDA PARA PROTEGER A LOS CONSUMIDORES DE
PRODUCTOS Y SERVICIOS DE MUY BAJA CALIDAD.
AUNQUE