Tarea 5-Selección de herramientas digitales-Carol Eraso.pdf
Psicometria basica
1. Psicometría Básica
Dra. Carmina Flores Domínguez
Academia de Educación en Ciencias de la Salud
Facultad de Ciencias de la Salud
Universidad Anáhuac México Norte
D.R. Dra. Carmina Flores-Domínguez. 2013
2. Psicometría básica
¿Por qué evaluar?
Objetivos de la Evaluación
Indicar a sus alumnos qué material es importante
Incentivar a los alumnos a estudiar
Identificar las áreas deficientes que requieren de
más estudio
Determinar las notas finales o tomar decisiones
de promoción
Detectar los puntos débiles del curso/programa
de estudios
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez. 2013
3. Psicometría básica
¿Qué se debe evaluar?
El contenido de la prueba debe coincidir con los objetivos del
curso, en este caso, con las competencias del mismo.
Los temas fundamentales deben tener más peso que los temas
menos importantes.
El tiempo de evaluación dedicado a cada tema debe reflejar la
importancia relativa del tema.
La muestra de preguntas debe representar los objetivos del
aprendizaje, en este caso, las competencias.
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez. 2013
4. Psicometría básica
Psicometría
Disciplina que tiene por finalidad el desarrollo de modelos
cuantitativos que permitan “transformar” o codificar hechos en
datos por medio del diseño de métodos adecuados para la
aplicación de tales modelos y conocer las diferencias
individuales de los sujetos en cuanto a sus propiedades,
atributos o rasgos.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
5. Psicometría Básica
Esta ciencia es la encargada de hacer las mediciones en
Psicología.
Generación o formulación de modelos.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
6. Psicometría básica
Pruebas
Desarrollo tecnológico derivado de los modelos teóricos.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
7. Psicometría básica
Niveles de medición
Desde la simple nominación hasta la cuantificación de la
cantidad del atributo que el sujeto posee.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
8. Niveles de medición o tipos de escalas
de Stevens.
Nominal
Ordinal
Intervalar
-Indica
pertenencia a la
categoría
-Cualifica
-Indica pertenencia
-Ordena
-No unidad de
medida común
-No indica cantidad
-Cualifica e Indica
pertenencia
-Ordena
-Indica cantidad
-Unidad de medida
común, de medidas
iguales
-Permite todas las
operaciones de
cálculo estadístico
-Cero arbitrario
Cualitativo
Semi
cuantittativo
Cuantitativo
-Cualifica
De razón
o cociente
-Cualifica e Indica
pertenencia
-Ordena
-Indica cantidad
-Unidad de medida
común, de medidas
iguales
-Permite todas las
operaciones de
cálculo estadístico
-Cero real
Cuantitativo
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina .
D.R. Dra. Carmina Flores-Domínguez. 2013
9. Psicometría Básica
Prueba, test, escala o instrumento psicométrico.
Dispositivo o procedimiento estandarizado para obtener una
muestra del comportamiento de un examinado en un dominio
específico para su posterior evaluación y puntuación utilizando
procedimientos estandarizados.
Cuenta con evidencias empíricas sobre la validez y confiabilidad
de los resultados.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
10. Psicometría básica
Los reactivos de un test son la mínima unidad distinguible en
el instrumento.
Se trata de pequeñas tareas que el individuo debe realizar
para responder.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
11. Psicometría básica
Toda prueba Psicometría supone:
Medición de un atributo del sujeto que se ha operacionalizado
desde un modelo teórico.
Noción de escalamiento
Capacidad para discriminar diferencias individuales entre
personas
Validez y confiabilidad
Atributos formales
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
12. Psicometría básica
Operacionalización
Todos los elementos de una evaluación se deben operacionalizar.
Elaboración de una tabla de especificaciones en base a los
objetivos formativos, o bien, a las competencias a evaluar.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
13. Psicometría básica
¿Qué es el escalamiento?
Posibilidad de traducir las respuestas brindadas en una
puntuación.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
14. Psicometría básica
Discriminación
Definir si el instrumento es realmente capaz de captar las
diferencias entre los individuos.
En educación médica: poder diferenciar a los estudiantes que sí
saben de los que no.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
15. Psicometría básica
Confiabilidad
Confianza que podemos tener acerca de que los resultados que
la prueba da al utilizarla.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
16. Psicometría básica
Validez
Los estudios de validez señalan de qué manera el autor de la
prueba y/u otros expertos aportaron evidencias empíricas de
que el instrumento evalúa lo que verdaderamente pretende
evaluar.
Que el instrumento sirva para medir lo que se pretende medir.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
17. Psicometría básica
Validez
¿Qué mide el instrumento?
¿Cómo lo mide?
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
18. Psicometría Básica
Confiabilidad-consistencia interna
Coeficiente α-Cronbach.
Indicador de grado de covarianza observada entre los reactivos
que conforman la prueba o de la proporción de la varianza del
error con respecto a la varianza total restado de 1 (confiabilidad
perfecta).
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
19. Psicometría Básica
Valores adecuados= 0.8-0.7, el ideal es 0.9 o más.
Fernández M., Cayssials A., Pérez M. (2009). Curso básico de Psicometría. Teoría Clásica. Editorial Lugar. Buenos Aires, Argentina.
D.R. Dra. Carmina Flores-Domínguez. 2013
20. Psicometría Básica
Finalmente, el grado de importancia de las características
psicométricas de un método de evaluación está determinado
por el objetivo del examen y por las decisiones que se
tomarán en base de los resultados.
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez. 2013
21. Psicometría Básica
En el caso de exámenes que tienen un gran peso en
aprobación del curso los resultados deben ser reproducibles
(precisos, confiables) y exactos (válidos).
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez. 2013
22. Psicometría Básica
Para generar un puntaje reproducible, es necesario elaborar
una muestra con un contenido amplio (es decir, mínimo una
docena casos, o bien, mínimo 100 preguntas de opción
múltiple o preguntas de respuesta breve).
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez. 2013
23. Psicometría Básica
Para saber más:
Case SM, Downing SM. (1989) Performance of various
multiple-choice item types on medical specialty examinations:
types A, B, C, K, and X. Proceedings of the 28th Annual
Conference on Research in Medical Education, 167-172.
Swanson DB, Case SM. (1992) Trends in written assessment: a
strangely biased perspective. En Harden R, Hart I, Mulholland H
(Eds.), Approaches to the Assessment of Clinical Competence:
Part 1. Page Brothers, Norwich, Inglaterra, 38-53.
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez 2013
24. Psicometría Básica
Swanson DB, Case SM. (1995) Variation in item difficulty and
discrimination by item format on Part I (basic sciences) and
Part II (clinical sciences) of U.S. licensing examinations. En
Rothman A, Cohen R (Eds.), Proceedings of the Sixth
Ottawa Conference on Medical Education. University of
Toronto Bookstore Custom Publishing, 285-287.
Norman G, Swanson DB, Case SM. (1996) Conceptual and
methodological issues in studies comparing assessment
formats. Teaching and Learning in Medicine, 8(4):208-216.
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez 2013
25. Psicometría Básica
Case SM, Swanson DB. (1993) Extended-matching items: a
practical alternative to free-response questions. Teaching and
Learning in Medicine, 5(2), 107-115.
Case S., Swanson D. NBME. (2006). Cómo elaborar preguntas para evaluaciones escritas en el área de ciencias básicas y clínicas.
National Board of Medical Examiners. Philadelphia, USA.
D.R. Dra. Carmina Flores-Domínguez 2013