Descripcion de los principales metodos de validez y confiabilidad y sus caracteristicas distintivas. Desarrollada por estudiantes del III Período académico del año 2010
2. 2
Validez y Confiabilidad de los
Instrumentos de Recolección de Datos
Validez
− Definición.
− Evidencias Relacionadas.
− Técnicas utilizadas para su Cálculo.
Confiabilidad
− Definición.
− Tipos.
− Técnicas para su Cálculo.
Factores que Pueden Afectar la Validez y Confiabilidad
de un Instrumento.
¿Cómo saber si un instrumento es confiable y válido?
3. 3
VALIDEZ
Grado en que un instrumento realmente
mide lo que el investigador pretende.
Thorndike
Definición Según Diversos Autores:
Grado en que un instrumento realmente
mide la variable que pretende medir.
Hernández Sampieri
5. 5
Evidencia Relacionada con el
CONTENIDO
Es el grado en que la
medición representa
al concepto medido.
Se determina antes de la
aplicación del instrumento,
mediante el Juicio de
Expertos
6. 6
Evidencia Relacionada con el
CRITERIO
Establece la validez de
un instrumento de
medición comparándola
con algún criterio
externo. Entre más se
relacionen los resultados
del instrumento con el
criterio, mayor será su
validez.
7. 7
Evidencia Relacionada con el
CRITERIO
Validez Concurrente : Si el
Criterio se fija en el presente
Validez Predictiva:
Si el criterio se fija
en el futuro
9. 9
1. Relación Teórica entre los conceptos.
2. Correlación de Conceptos y análisis.
3. Interpretación de la evidencia empírica
de acuerdo con el nivel en que clarifica
la validez de un constructo de una
medición en particular.
Evidencia Relacionada con el
CONSTRUCTO
La validez de un constructo incluye tres (03)
etapas:
10. 10
Cálculo de la Validez
Validez de Contenido: Juicio de expertos.
Validez de Criterio: Correlacionar la medición con el
criterio para obtener el coeficiente de validez.
Validez de Constructo: Suele determinarse un
procedimiento estadístico denominado “Análisis de
Factores”´.
Sólidos Conocimientos Estadísticos.
Programas apropiados de Computadoras.
14. 14
En Relación con el Calificador
Dos expertos califican los
resultados obtenidos por un
grupo, luego calculan el
Coeficiente de Correlación
“producto momento” de
Pearson (r), o el porcentaje de
coincidencia entre ambos
observadores.
Cuestionarios
con
Preguntas
Abiertas
15. 1515
En el Curso del TiempoEn el Curso del Tiempo
El investigador obtiene valores diferentes al aplicar
el instrumento a la misma unidad de estudio en
ocasiones diferentes
2 Correlacionar los
resultados.
Inestabilidad Temporal de la Medición:
SE
RECOMIENDA:
1 Aplicar el
instrumento dos veces a
un mismo grupo.
16. 16
Muestreo o
selección de los
ítems.
Variedad de
contenidos que se
desean medir.
Confiabilidad en
Relación al
Contenido de
la Prueba
17. 1717
Técnicas para el Cálculo de laTécnicas para el Cálculo de la
ConfiabilidadConfiabilidad
Térm
inos
Coeficiente
Correlación
Estratificar
Ítem
Hipótesis
VariableBásicos
18. 1818
CoeficienteCoeficiente
Relación o proporción entre una
variable significativa y cierta base
arbitrariamente fijada dentro de un
área espacial determinada y cierto
período de tiempo convencional:
Coeficientes de producción, de
natalidad, de criminalidad, de
mortalidad, de divorcios.
Valor relativo que se le atribuye a
cada prueba o examen.
19. 1919
Correlación:Correlación:
- Relación recíproca.
- Medida de la asociación
lineal entre dos variables
Estratificar:Estratificar:
Conjunto de elementos que, con
determinados caracteres comunes,
se ha integrado con otros conjuntos
previos o posteriores para la
formación de una entidad o producto
históricos, de una lengua.
20. 20
Técnicas para el Cálculo de
la Confiabilidad
Valores: Cero (0) a Uno (1).
No puede ser NEGATIVO.
√Coeficiente de confiabilidad = Índice de
Confiabilidad del instrumento
Coeficiente de Correlación = Coeficiente de
Confiabilidad del Instrumento
Coeficiente de Correlación = Coeficiente de
Confiabilidad del Instrumento
21. 21
Técnicas para el Cálculo de la
Confiabilidad
Test re-test o Medida de
Estabilidad.
Test Paralelos o Método de
Formas Alternativas.
División por Mitades o Mitades
Partidas.
Coeficiente Alfa de Cronbach.
Kuder – Richardson o Coeficiente
KR-20.
22. 22
1. El investigador debe aplicar el mismo
instrumento dos veces al mismo grupo
después de cierto período.
1. Debe calcular la confiabilidad del
instrumento ANTES de la aplicación
definitiva del mismo.
1. Coeficiente de Correlación de Pearson
altamente positivo = Instrumento
confiable.
Técnica de Test re-test o
Medida de Estabilidad
23. 23
El período de tiempo (corto o largo),
entre las mediciones puede
confundir la interpretación del
Coeficiente de Confiabilidad
obtenido mediante esta técnica.
LIMITACIONES de la Técnica
de Test re-test o Medida de
Estabilidad
24. 24
Técnica de los Test Paralelos o
Método de Formas Alternativas
Se administran dos o más versiones equivalentes
de un mismo instrumento.
Deben ser similares en contenido, instrucciones,
tipos de preguntas y dificultad.
Son administradas al mismo grupo en un período
relativamente corto.
Los patrones de respuestas deben variar POCO
entre las aplicaciones.
Coeficiente de Confiabilidad = Fórmula de
Correlación de Pearson.
25. 25
Dificultad para obtener dos pruebas realmente
paralelas.
Efecto que el primer instrumento tiene sobre los
puntajes del segundo.
Implica un doble trabajo de construcción de
instrumentos.
Confiable sólo si correlación entre los resultados
de ambas aplicaciones es positiva.
LIMITACIONES de la Técnica de
los Test Paralelos o Método de
Formas Alternativas
26. 26
Requiere sólo una aplicación de la medición.
El conjunto total de ítems es dividido en dos
mitades y se comparan las puntuaciones
obtenidas en ambas mediciones.
Correlación de Spearman Brown = Coeficiente
de Confiabilidad.
Puntuaciones de ambas mitades fuertemente
correlacionadas = Instrumento confiable.
Más Ítems = Mayor confiabilidad.
Técnica de División por
Mitades o Mitades Partidas
27. 27
LIMITACIONES de la Técnica de
División por Mitades o
Mitades Partidas
Confiabilidad varía de acuerdo con el
número de ítems que incluya el
instrumento de medición.
Demasiados ítems provocarán
cansancio en el respondiente.
Riesgo que el contenido de las mitades
sea diferente.
28. 28
Coeficiente Alfa de Cronbach
Requiere sólo una aplicación del
instrumento de medición.
Produce valores que oscilan entre cero
(0) y uno (1).
No es necesario dividir en mitades los
ítems del instrumento.
Se aplica la medición y se calcula el
coeficiente.
29. 29
Técnica Kuder – Richardson o
Coeficiente KR-20.
Permite calcular la confiabilidad con
una sola aplicación del instrumento.
No requiere el diseño de pruebas
paralelas.
Es aplicable sólo en instrumentos con
ítems dicotómicos, que puedan ser
codificados con 1 – 0 (correcto –
incorrecto, presente – ausente, a favor
– en contra, etc.) .
30. 30
Técnicas de Confiabilidad según
el Instrumento de Medición a
Aplicar
TestTest
Pruebas de
conocimientos
Pruebas de
conocimientos
EscalasEscalas
CuestionariosCuestionarios
Test
Re-
Test y
Paralelos
Test
Re-
Test y
Paralelos
No se aplican en
Pruebas de
Velocidad
31. 31
Técnicas de Confiabilidad según el
Instrumento de Medición a Aplicar
Kuder - Richardson: Pruebas
de Conocimientos.
Alfa de Cronbach: Escalas.
32. 32
−Sexo. - Memoria. - Ocupación.
−Edad. - Motivación al responder.
−Conocimientos.
−Capacidad de Respuesta.
Condiciones en
que se aplica
Aspectos Mecánicos =
- Ruido - Frío - Largo
No es Empático
Factores que Pueden Afectar la
Validez y Confiabilidad de un
Instrumento
Extranjeros
Instrumentos
33. 33
¿Cómo Saber si un Instrumento de
Medición es Confiable y Válido?
¡Coeficiente
de Validez!
¡Mínimo
Grado de
error !
¡Coeficiente
de
Confiabilidad!
36. ¿Estadísticamente cuando sabe que una
prueba es confiable?
Los resultados de la prueba necesitan ser
seguros es decir, deben ser reproducibles,
estables (confiables y significativos)
(validos).
La confiabilidad se expresa mediante un
coeficiente de confiabilidad o por el error
estándar de la medida que se deriva del
coeficiente de confiabilidad.
37. no debe confiarse en una prueba si su
coeficiente de confiabilidad es bajo. Para
la mayor parte de las pruebas de
habilidades cognoscitivas y especiales.
38. METODO TEST- RETEST
FORMAS
EQUIVALENTES
(PARALELAS -
ALTERNAS
DIVISION POR
MITADES O
PAR - IMPAR
COEFICIENTE El coeficiente es
de estabilidad
laboral
el coeficiente es
de equivalencia
El coeficiente es
de consistencia
interna
APLICACIÓN
DEL
INSTRUMENT
O Ó TIPO
Se aplica el
mismo test o
prueba
Una prueba con
una forma alterna
o varias
Es el mismo test
o prueba
NÚMERO DE
VECES QUE
SE APLICA
Se aplica os o
mas veces con
intervalos de
tiempo
Se aplica en
ambas o de
formas alternas A
: en forma
continua Y B :
con intervalo de
Es una sola
aplicación del
instrumento
39. METODO TEST -
RETEST
FORMAS
EQUIVALE
NTES
(PARALELA
S –
ALTERNAS)
DIVISION
POR
MITADES
Ó
PAR -
IMPAR
METODOS
DE CALCULO
DE
COEFICIENTE
ESTADISTICO
Correlación R
de pearson
Correlación R
de pearson
Correlación
“R “de
pearson
( mitad de la
prueba) y la
formula
correctiva de
spearman
Brow
TIEMPO Es de Existen dos En una misma
41. CALCULO DE
CONSISTENCI
A INTERNA
FORMAS
ALTERNAS
TEST -- RETES
El procedimiento:
de correlación o
para calcular la
confiabilidad de
consistencia
interna se de
emplean formulas
especializadas.
EL
PROCEDIMIENT
O: de correlación
producto
momento de
pearson se
utiliza para
determinar los
coeficientes de
confiabilidad de
formas alternas
EL
PROCEDIMIENT
O: de correlación
producto
Momento de
pearson se
utiliza para
determinar los
coeficientes de
confiabili8dad:
test - retes.
42. CALCULO DE
CONSISTENCIA
INTERNA
FORMAS
ALTERNAS
TEST -- RETES
Los cálculos de
confiabilidad basados
en la correlación
promedio entre
reactivos conciernen
a la consistencia
interna.
Normalmente la
formas alternativas
se administran con
dos semanas de
diferencia, lo que da
tiempo para que
varíen las
habilidades y
actitudes
EL
PROCEDIMIENTO
COMUN: para
obtener el
coeficiente de
confiabilidad
consiste en la
aplicación de la
misma prueba al
mismo grupo en dos
ocasiones
diferentes, en
general, dentro de
un periodo corto de
43. CALCULO DE
CONSISTENCIA
INTERNA
FORMAS
ALTERNAS
TEST -- RETES
El tamaño del
coeficiente: de
confiabilidad esta
basado en la correlación
promedio entre
reactivos ( consistencia
interna ) como en el
numero de los mismos
POSEDIMIENTO:
deben aplicarse dos
formas de la misma
prueba a una muestra
grande, a la mitad de la
muestra se le aplica la
forma A . Segunda de
la forma B, y a la otra
mitad de la muestra se
le proporciona la forma
B, seguido de la forma
A.
Entonces se
correlaciona las
puntuaciones de ambas
La correlación que se
obtiene, en ocasiones se
denomina: coeficiente
de estabilidad, que
representa el grado en
que la prueba es
consistente en el
transcurso del tiempo.
44. CALCULO DE
CONSISTENCIA
INTERNA
FORMAS
ALTERNAS
TEST -- RETES
Un tipo de coeficiente
interna se obtiene
mediante dividir las
pruebas en dos mitades
equivalentes
( confiabilidad de
división por
mitades ). esta
división crea dos formas
alternas de la prueba. La
forma mas común de
dividir la prueba
consiste en asignar los
reactivos impares a una
forma y los pares a la
Si la correlación
promedio de los
reactivos de la forma
“A” es mas alto que de
la forma “B”, una forma
es mas confiable que la
otra. Es este caso habría
muestras de algo
erróneo en la
construcción de alguna
de las dos formas y
habría que elaborar una
nueva forma para
correlacionarla con la
forma confiable ya
Esta correlación se ve
afectada, por ejemplo,
por factores que se
asocian por las
aplicaciones especificas
de las pruebas o con lo
que el niño recuerda o
aprendió en ese tiempo.
45. CALCULO DE
CONSISTENCIA
INTERNA
FORMAS
ALTERNAS
TEST -- RETES
Otro tipo de coeficiente
se basa en las
interacciones entre
todas las partes
comparables de la
misma prueba formulas
especiales como la de
cronbach para el
coeficiente alfa y la
20 de kuder-
Richardson, miden la
uniformidad u
homogeneidad de los
reactivos a lo largo de la
prueba
Si es considerable la
correlación promedio,
dentro de las dos
formas de prueba, pero
la correlación cruzada
promedio entre los
reactivos de ambas
formas es baja, se
podría estar seguro que
las dos formas miden
confiablemente rasgos
que de alguna manera,
son diferentes.
En general entre mas
corto sea el intervalo
de reevaluación mayor
será el coeficiente de
confiabilidad, dado.
46. CALCULO DE
CONSISTENCIA
INTERNA
FORMAS
ALTERNAS
TEST -- RETES
El coeficiente
alfa: es la formula
base para
determinar la
confiabilidad basada
en la consistencia
interna. No son
apropiados para
pruebas con limite
de tiempo y no
toman en cuenta los
cambios que se dan
Los coeficientes de
confiabilidad de
forma alterna: se
encuentran
sometidos a alguna
de las mismas
influencia de los
coeficientes de
confiabilidad del test
– retest.
que dentro de un
lapso de tiempo
existen menos
razones para que
cambie la calificación
de un individuo
48. DEFINICION DE CONCEPTOS
Coeficiente de Confiabilidad: expresa el grado
de consistencia en la medición de las
puntuaciones de la prueba.
Confiabilidad Test –Retes: este método
requiere la aplicación del mismo test dos veces._
Mide la estabilidad del instrumento y muestra el
grado en que los resultados de una prueba
pueden generalizarse en otras personas._ Entre
mayor sea la confiabilidad menos susceptibles
serán los resultados de los examinados o en el
entorno en el que se aplica la prueba. 2
49. Confiabilidad de formas alternas
o paralelos: es cuando el intervalo
entre la prueba inicial y el retes es
corto, se construyen dos test
tratando de satisfacer lo mejor
posible las condiciones de estricto
paralelismo._ Los dos test con un
intervalo de tiempo dado, la
confiabilidad se calcula como la
correlación de los resultados de la
medida. 3
50. Coeficiente de consistencia
interna: se basa en la confiabilidad de
consistencia interna en las
puntuaciones que obtengan los
individuos durante la aplicación de una
prueba.
Confiabilidad: se refiere a la
consistencia de una medida de
comportamiento.
Es decir a la consistencia de las
puntuaciones obtenidas por las mismas
personas, cuando se les examina en
distintas ocasiones con el mismo test,
con conjuntos equivalentes de reactivos
o en otras condiciones de examinacion. 4
51. Confiabilidad por mitades: se trata de la
correlación del puntaje total de un individuo en
la mitad de una prueba, con el puntaje total en
la otra mitad ._Las dos mitades se crean
dividiendo aleatoriamente los reactivos en dos
partes.
Alfa de Croanbach: aquí el investigador
calcula la correlación de cada reactivo con cada
uno de los otros reactivos; resulta una gran
cantidad de coeficiente de correlación.
(Promedio de todos los coeficientes de
correlación) 5
52. Confiabilidad entre calificadores: es
cuando una evaluación requiere que el
examinador califique el comportamiento de
un menor, se necesita otra clase de
procedimiento de confiabilidad ínter
calificador
Confiabilidad referida o de criterio: se
refiere a las pruebas referidas a normas las
cuales están diseñadas principalmente para
diferenciar entre individuos que posen
varias cantidades de características
específicas. 6
53. Factores que afectan la confiabilidad de las
pruebas:
Extinción de la prueba: entre mas
reactivos existan en una prueba y más
homogéneos sean es probable que la
confiabilidad sea mayor.
Adivinación: entre menos adivinación
en una prueba ocurra, es decir entre
menos sujetos respondan de manera
aleatoria a los reactivos, es probable que
la confiabilidad sea mayor.
53
54. Validez: es el grado en el que un
instrumento realmente mide la variable
que pretende medir, por lo tanto lo
apropiado de las inferencias que puedan
realizarse con base en los resultados de
prueba.
Validez de Contenido: se refiere a algo
más que la apariencia._La validez de
contenido atañe a si este produce un rango
de respuestas que son representativas del
dominio entero o universo de habilidades,
entendimiento y otras conductas que
supuestamente debe medir la prueba.
54
55. Validez con respecto al criterio: esta
se refiere a la relación entre las
puntuaciones de prueba y ciertos tipo de
criterio o resultado, como calificaciones,
clasificaciones u otras puntuaciones de
prueba
Validez Predictiva: se refiere a la
correlación entre las puntuaciones de
prueba y la ejecución en un criterio
relevante donde existe un intervalo de
tiempo entre la aplicación de la prueba y
la ejecución en ese criterio.
55
56. Validez Concurrente: sirve para confirmar
los resultados de la investigación, es el hecho
de dos o mas grupos de personas difieran de
manera esperada en la medida posibles tal
grado en que dos sistemas de medición
diferentes produzcan la correlación de los
resultados ,debemos tener muy claro que una
escala que tenga validez concurrente no
necesariamente tendrá validez predictiva. para
determinar la validez concurrente implica
tener dos situaciones de medida diferentes: el
predictor y el criterio.
56
57. Validez aparente a de facie: la
evidencia de la validez es que la medida
parece medir lo que supone debe medir._
La validez aparente no es muy
sofisticada implica únicamente el juicio
de que dada la definición teórica de la
variable, el contenido de la medida
aparentemente mide variable.
Validez Creciente: es cuando se
intenta decidir si la aplicación de un
instrumento particular de evaluación con
propósitos predictivos o de diagnostico
esta justificada por su costo. 57
58. Validez Convergente: se usa para
instrumento que se miden conceptos
complejos y abstractos, no observable
directamente. Se refiere a que ambas
mediciones independientes de un mismo
concepto tenga una fuerte correlación
.Esta puede buscar confirmar que el
rasgo medido producirá resultados
similares al utilizar diferentes métodos
58
59. Validez de Constructo: esta se refiere al
grado en el que una prueba mide constructo
o rasgo psicológico. Se utiliza diversos
procedimientos para determinar que tanto
se relacionan los reactivos en una prueba
con los constructo teóricos que esta supone
medir.
Validez Ecológica: se refiere a la medida
en la que el ambiente de los sujetos
experimentan en una investigación
científica tiene las propiedades que el
investigador supone que tiene. 59
60. Validez Discriminativa: se muestra
cuando la medida no esta relacionada
con variables con las que no debe estarlo,
la medida debe discriminar entre el
constructo que se mide y otro que tiene
relación con el.
Factores que afectan la validez: dado
que los coeficientes de validez lo son
también de correlación , se ven afectados
por factores como son el rango de talento
que se mide y la longitud del intervalo
entre la aplicación de las dos medidas. 60
61. FACTORES QUE AFECTAN LA VALIDES:
Factores relacionados con la prueba afectan
la validez esto incluye las habilidades de
resolución de pruebas, ansiedad,
motivación, velocidad, comprensión de
instrucción de la prueba, grado de novedad
del reactivo o formato Rapport.
Los factores que se vinculan con el criterio
también afectan la validez.
Los eventos y contingencias interventores
pueden también afectar la validez
predictiva. 61