Este documento define la validez y discute sus diferentes tipos. Define la validez como el significado o interpretación del puntaje de un test y las implicaciones de esa interpretación, en lugar de ser una propiedad del test mismo. Examina la evidencia de validez basada en el contenido del test, los procesos de respuesta, la estructura interna y la relación con otras variables a través de correlaciones con otros tests y comparaciones de grupos. Enfatiza que la validez depende del test, el sujeto y las circunstancias, y que la validez nunca qu
1- Validez Aparente.
2- Validez de Contenido:
- Índice de Lawshe.
3- Validez de Criterio:
- Validez Concurrente
- Validez Predictiva.
- Criterio.
- Contaminación del criterio.
- Datos de expectativa.
- Validez incremental.
- Pronosticador.
- Tasa basal.
- Índice de aciertos (Sensibilidad y especificidad).
- Índice de fallas (Falso positivo y falso negativo).
- Valor predictivo positivo.
- Valor predictivo negativo.
4- Validez de Constructo:
- Evidencia de homogeneidad.
- Evidencia de cambios con la edad.
- Evidencia de cambios pre-prueba y pos-prueba.
- Evidencia de grupos distintos.
- Evidencia convergente.
- Evidencia discriminante.
- Análisis factorial.
Validez y confiabilidad de instrumentos de medición en investigación cuantita...Mariela Nuñez
Presentación en formato power point sobre La Validez y Confiabilidad de los instrumentos de medición en una investigación científica, exigido por pensum de estudios de la maestría en Gerencia de Finanzas y de los Negocios, cuyo profesor titular es el Msc. Leonardo Castillo, Universidad Yacambu, Barquisimeto, Estado Lara, Venezuela.
Mafalda está más viva que nunca. Reaparece siempre fresca y renovada en sus nuevos libros y periódicos. Hace cine y televisión. Viaja en la imaginación colectiva de infinidad de naciones que son muy diferentes entre ellas culturalmente. Y llega a los lugares más insospechados, volviéndose familiar a generaciones que no tienen nada que ver con la que vio nacer a Mafalda
1. Validez
Sergio R. Muñoz, Ph.D.
munozs@ufro.cl
Definición:
• Hasta 1980:
“Es la medida en que un test mide lo que pretende
medir?”
• Después 1980 (Messick):
“Que dice de la persona un score igual a X?”
“Que inferencias se pueden hacer sobre la persona
basándome en los resultados del test?”
“Que tanta confianza tengo en relación a esas
inferencias?”
1
2. Definición:
“Validez no es una propiedad del test ni una
evaluación de el, sino que el significado del
score del test.
Estos scores son función no solo de los ítems o de las
condiciones de estimulo, sino que también de las
personas que responden y del contexto de la
evaluación.
En particular, lo que necesita ser validado es el
significado o la interpretación del score; tanto como
cualquier implicación de la acción que ese significado
implica.”
Messick, 1995
Definición:
• No se valida un test
• Se valida un uso para el cual se ha puesto
el test
• La validez depende del test, sujeto, y
circunstancias
• Un test puede ser valido para un grupo o
en un ambiente, e invalido para otros
2
3. Ejemplos:
1. Escalas de alcoholismo pueden ser no
validas en población Mapuche
2. Las escales de maltrato infantil pueden
ser no validas NSE alto
Definición:
• “Acuracidad” es a veces usado como
sinónimo
• Usemos la analogía de un tiro al blanco
3
5. Definición:
• “Acuracidad” a veces usado como sinónimo
• Usar analogía con tiro al blanco
• Puede ser apropiado si hay un verdadero “gold
standard”
Ej, resultados de lab, hallazgos físicos
• Raramente verdadero para escalas
• Muchos blancos
Diferentes grupos
Diferentes circunstancias
Confiabilidad y Validez
5
6. Confiabilidad y Validez
• Confiabilidad da el limite de la validez:
• Validez máxima posible = sqrt(Confiabilidad)
‘Tipos’ de Validez
6
7. Tipos de Validez
• Hasta 1980, la validez se reconocía como la
valides de las ‘3 Cs’:
– Validez de Contenido
– Validez de Criterio
– Validez de Constructo
• Con la nueva definición de validez, esta
distinción desaparece
– Todas las pruebas de validez responden a la misma
pregunta:
– “Que me dice de la persona este score?”
Tipos de Validez
Estas fuentes de evidencia pueden iluminar
distintos aspectos de validez, pero no
representan distintos tipos de validez.
La validez es un concepto unitario.
Es el grado para el cual toda la evidencia
acumulada apoya la interpretación de los
puntajes de la escala para el propósito para el
cual fue construida.
7
8. Validez de Constructo
• Que es un constructo?
– Atributos o conceptos o características que
no pueden observarse directamente
– Que es lo que se ve:
• Efecto en comportamientos medibles
• Relaciones entre variables
– Ej: depresión, inteligencia, ansiedad, muchos
diagnósticos
Validez de Constructo
• Involucra probar hipótesis acerca de los
conceptos
• Si el estudio tiene resultados positivos:
– Las hipótesis sobre el concepto se refuerzan
– El test da mas confianza
• Si el resultado es negativo
– Puede que la hipótesis este errónea
– Puede que el test sea pobre
– Ambas
8
9. Validez de Constructo
• Malas noticias: probar la validez nunca
queda completa
• Siempre se puede aprender mas sobre el
significado de los scores
– Con diferentes grupos
– En diferentes circunstancias
• Buenas noticias: todos los estudios con
escalas son estudios de validez
Validez de Constructo
1. Evidencia basada en el contenido del
test
• Relevancia de Contenido
• Cobertura del Contenido
9
10. Tipos de Validez:
1. Evidencia basada en contenido del test
2. Evidencia basada en los procesos de
respuesta
Procesos de Respuesta:
• Sesgos
• Entender los ítems
• Trabajando las formas de responder
10
11. Tipos de Validez:
1. Evidencia basada en contenido del test
2. Evidencia basada en los procesos de
respuesta
3. Evidencia basada en la estructura interna
Estructura Interna:
• Grado en el cual las componentes
internas del test se parean con el
constructo definido
• Gente con la misma cantidad del
“concepto” obtienen scores similares?
11
12. Estructura Interna:
• Constructos definidos por pareo:
– Los ítems se agrupan juntos como se ha
hipotetizado?
análisis factorial confirmatorio
• Similitud de las respuestas:
– Los ítems se comportan similarmente en
diferentes grupos (hombres/mujeres, grupos
culturales
Tipos de Validez:
1. Evidencia basada en contenido del test
2. Evidencia basada en los procesos de respuesta
3. Evidencia basada en la estructura interna
4. Evidencia basada en la relación con otras
variables
12
13. Relación con otras variables
Se corresponde con lo que se ha llamado:
- Validez de Criterio (concurrente y predictiva)
- Validez Convergente
- Validez Discriminante
Relación con otras variables
• Correlación con otras escalas
13
14. Correlación con otras escalas:
• El nuevo test X se correlaciona con otras
escalas existentes?
– Se desea algún grado de correlación
– No tan alto ya que el nuevo test puede ser
innecesario
– Generalmente se espera un nivel de
correlación moderada
• Mejor si se hipotetiza una magnitud de
correlación a priori
(….):
• Cual es la razón de desarrollar un test si
ya existe uno?
• Varias razones:
– El test existente con cubre totalmente el
concepto
– Muy caro
– Muy invasivo
– Muy demoroso en su aplicación
– Quiero mi nombre en el test
14
15. Correlación con otras escalas:
• Correlación con otras escalas
• No correlación con constructos no
relacionados
Sin relación con otros Constructos:
• Si el nuevo test mide X, debiera este
correlacionarse con otros constructos?
– El test de ansiedad debiera correlacionarse
con autoestima?, depresión?
– El test de habilidades matemáticas debiera
correlacionarse con la habilidad de lectura?
15
16. Relación con otras variables
• Correlación con otras escalas
• No correlación con constructos no
relacionados
• Estudios de comparación de grupos
Estudios de comparación de
grupos:
• Grupos extremos
– Pacientes vs. no-pacientes
– Problemas:
• En algunos casos, depende de la opinión de
expertos”
• Pruebas Clínicas diseñadas para grupos medios
• Estudios antes-despues
– Antes y después de un tratamiento
– Problema:
• Asume que el tratamiento es efectivo
16
17. Validez:
• No hay una prueba estadística única
• Se basan en el tipo de estudio
- Correlacional – familia de correlaciones
- Comparación de grupos – familia ANOVA
Preguntas?
17