Taller para presentar ítems liberados de pruebas internacionales de evaluación

1. TALLER:
Presentación de ítems liberados de
pruebas internacionales de evaluación
Logroño, 7 y 8 de mayo de 2014
@educainee INEE_MECD

2. ¿Has visto que
prueba han hecho?
¿A quién se le habrá
ocurrido?
Mira este ítem.
¡Qué barbaridad!

3. EVALUACIONES EDUCATIVAS
Currículo
Competencias y
habilidades
para la vida
Evaluación
LO DESEABLE DE UN SISTEMA EDUCATIVO

4. EVALUACIONES EDUCATIVAS
Currículo
Competencias y
habilidades
para la vida
Evaluación
LO OBSERVADO CON UNA PRUEBA DE EVALUACIÓN

5. Matriz de especificaciones
Niveles cognitivos
(Niveles de complejidad en la resolución de la tarea)
Ponderación
Procesos
Dimensiones/Dominios Proceso I Proceso II Proceso III
Dominio 1 Descriptores Descriptores Descriptores %
Dominio 2 Descriptores Descriptores Descriptores %
Dominio 3 Descriptores Descriptores Descriptores %
Ponderación % % %
Descriptores:
Formulaciones sintéticas de las
competencias/capacidades que medirán los ítems

6. EJEMPLO DE CONSTRUCCIÓN
DE PRUEBAS
DESCRIPTOR
BLOQUES DE CONTENIDOS
• Números
• Álgebra
• Geometría
• Funciones y Gráficas
• Estadística y Probabilidad
• Contenidos comunes
Ejemplo: Contenidos y Procesos
para Matemáticas 2º ESO

7. EJEMPLO DE CONSTRUCCIÓN
DE PRUEBAS
PROCESO DE CONSTRUCCIÓN DE PRUEBAS
MATRIZ
ESPECIFICACIONES
Estímulo
Ítem
Pilotaje
Aplicación
principal
Explotación
de datos
Tipo respuesta:
• Elección múltiple
• Cerrada
• Abierta construida
• Abierta

8. EJEMPLO TIMSS CIENCIAS
CLAVE
TRONCO
A, C y D
DISTRACTORES
ESTÍMULO o CONTEXTO

9. Recomendaciones para
seleccionar estímulos
• Buscar estímulos en los que el alumno pueda tener interés.
• Seleccionar en función de las preguntas que se harán:
 Textos (continuos o discontinuos).
 Gráficos, imágenes, fotografías, dibujos, etc.
 Esquemas (sinópticos, eléctricos, planos, distribución, montaje).
 Comentarios, notas al pie, aportaciones laterales.
 Tiras cómicas.
 Mapas de metro, de autobús, de ciudad, de carreteras.
 Organigramas, tablas, listados, notas manuscritas, carteles, etc.
• Deben ser correctos y respetuosos desde el punto de vista de la
igualdad de los sexos, creencias religiosas, etc.

10. C

11. PONGÁMONOS A PRUEBA
http://pisa-sq.acer.edu.au/showQuestion.p http://www.youtube.com/watch?v=QHzpPflDiMY hp?testId=2295&questionId=5

12. PONGÁMONOS A PRUEBA

13. PONGÁMONOS A PRUEBA

14. Presentación de ítems liberados de PISA,
TIMSS y PIRLS: Marco teórico, elaboración y
aprovechamiento didáctico

15. Presentación de ítems liberados de PISA,
TIMSS y PIRLS: Marco teórico, elaboración y
aprovechamiento didáctico
CRITERIOS DE CORRECCIÓN PREGUNTA A

16. Presentación de ítems liberados de PISA,
TIMSS y PIRLS: Marco teórico, elaboración y
aprovechamiento didáctico

17. Presentación de ítems liberados de PISA,
TIMSS y PIRLS: Marco teórico, elaboración y
aprovechamiento didáctico
CRITERIOS DE CORRECCIÓN PREGUNTA B

18. Presentación de ítems liberados de PISA,
TIMSS y PIRLS: Marco teórico, elaboración y
aprovechamiento didáctico
CRITERIOS DE CORRECCIÓN PREGUNTA C

19. Presentación de ítems liberados de PISA,
TIMSS y PIRLS: Marco teórico, elaboración y
aprovechamiento didáctico
CRITERIOS DE CORRECCIÓN PREGUNTA D

20. Recomendaciones para
elaborar preguntas (ítems)
• Si son de respuesta múltiple:
 Incluir un número par de respuestas. Se recomienda cuatro.
 Solo exista una respuesta inequívocamente correcta.
 Los distractores sean plausibles pero erróneos.
 Todas las opciones tengan una forma de redacción similar.
 Todas las opciones tengan una longitud similar.
 No emplear preguntas negativas o alternativas negativas.

21. Recomendaciones para
elaborar preguntas (ítems)
• Si son de respuesta elaborada:
 No incluir expresiones del tipo “cita al menos tres …”. Ser preciso
en lo que se pide ayuda a la codificación. Podríamos sustituir la
expresión anterior por “Enumera tres …”.
 Evitar preguntar cuestionas vinculadas con el idioma de manera
directa: “sustituye la palabra por un sinónimo”.
 Elaborada larga: plantearla para que la codificación sea posible =>
ejemplos de respuestas reales.

22. Codificación
• CUANDO ESTÁ “BIEN O MAL”
Puntuación máxima
Código 1: … (cuando es abierta se acompaña con ejemplos de lo que
se considera que está correcto)
Sin puntuación
Código 0: otras respuestas …
Código 9: sin respuesta

23. Codificación
• PUNTUACIÓN PARCIAL
Puntuación máxima
Código 2: … (ejemplos de lo que se considera que está correcto)
Puntuación parcial
Código 1: … (ejemplos de lo que se considera que está
parcialmente correcto)
Sin puntuación
Código 0: otras respuestas …
Código 9: sin respuesta

24. Curso evaluaciones externas
internacionales

25. http://www.mecd.gob.es/inee/
¡¡Muchas gracias!!
Síguenos en Twitter:
@educaINEE
En nuestro blog:
http://blog.educalab.es/inee/
Y en slideshare:
http://www.slideshare.net/INEE_MECD