1. Enrique Roca Competencias básicas y evaluaciones generales del sistema educativo Enero 08

2. Educación y competencias básicas Lo que pueden aportar las evaluaciones externas de las competencias básicas PISA Evaluación general de diagnóstico Evaluar, ¿para qué?: las políticas de mejora

4. Cómo está cambiando la demanda de competencias (Levy y Murnane) Mean task input as percentiles of the 1960 task distribution

6. Competencias básicas españolas Competencia en comunicación lingüística. Competencia matemática. Competencia en el conocimiento y la interacción con el mundo físico. Tratamiento de la información y competencia digital. Competencia social y ciudadana. Competencia para aprender a aprender. Competencia cultural y artística. Autonomía e iniciativa personal.

8. Decidir qué evaluar... mirando al pasado: qué se espera que los estudiantes hayan aprendido … o… mirando al futuro: con qué éxito pueden extrapolar lo que han aprendido y aplicar sus conocimientos y habilidades en nuevos contextos Para PISA, los países de la OCDE eligen el segundo planteamiento.

10. Las dimensiones de las competencias Los niveles de adquisición de las competencias (el grado relativo) Las cuestiones utilizadas para evaluar las distintas Competencias Los resultados Los ejemplos de PISA

11. Dimensiones de las competencias Actitudes Contextos Procesos de la competencia a b c ...

12. Competencias básicas y evaluaciones PISA

13. Matriz de especificaciones de la competencia científica Competencias Identificar cuestiones científicas Explicar fenómenos científicamente Utilizar pruebas científicas Conoc. de la ciencia “ Sistemas físicos” LLUVIA ÁCIDA P2 LLUVIA ÁCIDA P3 “ Sistemas vivos” EJERCICIO FÍSICO P1 EJERCICIO FÍSICO P 3 EJERCICIO FÍSICO P 5 MARY MONTAGU P2 MARY MONTAGU P3 MARY MONTAGU P4 “ Sistemas de la Tierra y el espacio” GRAN CAÑÓN P3 GRAN CAÑÓN P5 EFECTO INVERNADERO P5 “ Sistemas tecnológicos” PRENDAS P2 Conoc. acerca de la ciencia “ Investigación científica” LLUVIA ÁCIDA P5 PROTECT. SOLARES P2 PROTECT. SOLARES P3 PROTECT. SOLARES P4 PRENDAS P1 CULTIVOS GENÉTICAMENTE MODIFICADOS P3 GRAN CAÑÓN P 7 “ Explicaciones científicas” PROTECTORES SOLARES P5 EFECTO INVERNADERO P3 EFECTO INVERNADERO P4

15. Porcentaje de alumnos en cada nivel (media OCDE) y lo que los alumnos son capaces de hacer Nivel 6 1.3% de los alumnos dentro de la OCDE son capaces de realizar tareas en el nivel 6 de la escala combinada de ciencias En el nivel 6, los alumnos pueden, de forma consistente, identificar, explicar y aplicar su conocimiento científico y su conocimiento sobre la ciencia a una variedad de situaciones vitales complejas. Pueden enlazar fuentes de información y explicaciones diferentes, y emplear la evidencia que emerge de esas fuentes para justificar sus decisiones. De forma clara y consistente, demuestran un razonamiento científico avanzado, y están dispuestos a emplear su comprensión científica para respaldar las soluciones planteadas a situaciones desconocidas en los ámbitos científico y tecnológico. Los alumnos en este nivel son capaces de usar su conocimiento científico y desarrollar argumentos que apoyen recomendaciones y decisiones centradas en situaciones personales, sociales o globales.

16. Porcentaje de alumnos en cada nivel (media OCDE) y lo que los alumnos son capaces de hacer Nivel 5 9.1% de los alumnos dentro de la OCDE son capaces de realizar tareas al menos en el nivel 5 de la escala combinada de ciencias En el nivel 5, los alumnos pueden identificar los componentes científicos de muchas situaciones vitales complejas, aplicar conceptos científicos y su conocimiento sobre la ciencia a estas situaciones, y comparar, seleccionar y evaluar la evidencia científica adecuada para responder a situaciones vitales. Los alumnos en este nivel emplean capacidades de investigación adecuadas, enlazan conocimientos de forma apropiada y ofrecen visiones críticas a situaciones particulares. Pueden elaborar explicaciones basadas en la evidencia, y argumentos basados en su propio análisis crítico.

17. Porcentaje de alumnos en cada nivel (media OCDE) y lo que los alumnos son capaces de hacer Nivel 4 29.4% de los alumnos dentro de la OCDE son capaces de realizar tareas al menos en el nivel 4 de la escala combinada de ciencias En el nivel 4, los alumnos son capaces de enfrentarse de forma eficaz con situaciones y temas sobre fenómenos explícitos que les obliguen a hacer inferencias sobre el papel de la ciencia o de la tecnología. Pueden seleccionar e integrar explicaciones de diferentes dominios de la ciencia o de la tecnología y enlazar esas explicaciones con aspectos reales de la vida. Los alumnos en este nivel pueden reflexionar sobre sus acciones y comunicar sus decisiones empleando su conocimiento científico y la evidencia.

18. Porcentaje de alumnos en cada nivel (media OCDE) y lo que los alumnos son capaces de hacer Nivel 3 56.8% de los alumnos dentro de la OCDE son capaces de realizar tareas al menos en el nivel 3 de la escala combinada de ciencias En el nivel 3, los alumnos son capaces de identificar temas científicos claramente descritos en una variedad de contextos. Pueden seleccionar hechos y conocimientos para explicar los fenómenos, y aplicar modelos o estrategias de investigación simples. Los alumnos en este nivel pueden interpretar y emplear conceptos científicos de diferentes dominios y pueden aplicarlos directamente. Pueden elaborar afirmaciones breves utilizando hechos y formar decisiones basadas en su conocimiento científico. Nivel 2 80.9% de los alumnos dentro de la OCDE son capaces de realizar tareas al menos en el nivel 2 de la escala combinada de ciencias En el nivel 2, los alumnos poseen un conocimiento científico adecuado para ofrecer explicaciones posibles en contextos familiares, o para extraer conclusiones basadas en investigaciones simples. Son capaces de razonar directamente (sin inferencias) y de hacer interpretaciones literales de los resultados de la investigación científica o de problemas tecnológicos.

19. Porcentaje de alumnos en cada nivel (media OCDE) y lo que los alumnos son capaces de hacer Nivel 1 94.9% de los alumnos dentro de la OCDE son capaces de realizar tareas al menos en el nivel 1 de la escala combinada de ciencias En el nivel 1, los alumnos tienen un conocimiento científico tan limitado que sólo pueden aplicarlo a unas determinadas situaciones familiares. Pueden ofrecer explicaciones científicas que son obvias y se siguen explícitamente de una evidencia dada.

20. LLUVIA ÁCIDA A continuación se muestra una foto de las estatuas llamadas Cariátides, que fueron erigidas en la Acrópolis de Atenas hace más de 2.500 años. Las estatuas están hechas de un tipo de roca llamada mármol. El mármol está compuesto de carbonato de calcio. En 1980, las estatuas originales fueron trasladadas al interior del museo de la Acrópolis y fueron sustituidas por copias. Las estatuas originales estaban siendo corroídas por la lluvia ácida.

21. El efecto de la lluvia ácida en el mármol puede simularse sumergiendo astillas de mármol en vinagre durante toda una noche. El vinagre y la lluvia ácida tienen prácticamente el mismo nivel de acidez. Cuando se pone una astilla de mármol en vinagre, se forman burbujas de gas. Puede medirse la masa de la astilla de mármol seca antes y después del experimento. Pregunta 3: LLUVIA ÁCIDA S485Q03 Una astilla de mármol tiene una masa de 2,0 gramos antes de ser sumergida en vinagre durante toda una noche. Al día siguiente, la astilla se extrae y se seca. ¿Cuál será la masa de la astilla de mármol seca? a. Menos de 2,0 gramos. b. Exactamente 2,0 gramos c. Entre 2,0 y 2,4 gramos d. Más de 2,4 gramos LLUVIA ÁCIDA; PUNTUACIÓN DE LA PREGUNTA 3 Máxima puntuación Código 1: A. Menos de 2,0 gramos Ninguna puntuación Código 0: Otras respuestas. Código 9: Sin respuesta.

22. EL GRAN CAÑÓN El Gran Cañón está situado en un desierto de los Estados Unidos. Es un cañón muy largo y profundo que contiene muchos estratos de rocas. En algún momento del pasado, los movimientos de la corteza terrestre levantaron estos estratos. Hoy en día el Gran Cañón tiene 1,6 km de profundidad en algunas zonas. El río Colorado fluye por el fondo del cañón. Mira la siguiente foto del Gran Cañón, tomada desde su orilla sur. En las paredes del cañón se pueden ver los diferentes estratos de rocas. Caliza A Arcillita A Caliza B Arcillita B Esquistos y granito

23. Pregunta 7: EL GRAN CAÑÓN S426Q07 Cada año unos cinco millones de personas visitan el parque nacional del Gran Cañón. Existe preocupación por el deterioro que está sufriendo el parque debido al elevado número de visitantes. EL GRAN CAÑÓN; PUNTUACIÓN DE LA PREGUNTA 7 Máxima puntuación Código 1:Las dos respuestas son correctas: Sí, No, en este orden ¿Es posible responder esta pregunta mediante una investigación científica? ¿Sí o No? ¿Qué cantidad de erosión se produce por la utilización de las pistas forestales? Sí / No ¿El parque es tan bello como lo era hace 100 años? Sí / No

25. Rendimiento en ciencias Países Bajos 525 Alemania 516 ESPAÑA 488 Noruega 487 Portugal y Andalucía 474 Dinamarca 496, Francia y País Vasco 495 Italia 475 Galicia 505 Navarra 511 Aragón 513 Cantabria 509, Asturias 508 Suecia 503 Castilla y León y La Rioja 520 Cataluña e Islandia 491 Estados Unidos 489 Diferencia no significativa con España Grecia 473 Total Internacional 461 Promedio OCDE 500 Total OCDE 491

26. Rendimiento en ciencias Diferencia no significativa con España

28. Niveles inferiores de rendimiento en ciencias (Porcentajes de alumnos) Niveles inferiores de rendimiento en ciencias

29. Porcentaje de alumnos en los distintos niveles de rendimiento 20 Estos alumnos pueden, de forma consistente, identificar, explicar y aplicar su conocimiento científico, enlazar fuentes de información y explicaciones diferentes y emplear la evidencia que emerge de esas fuentes para justificar sus decisiones, demostrar un razonamiento científico avanzado en situaciones desconocidas… Estos alumnos a menudo confunden características claves de una investigación científica, aplican información incorrecta y mezclan creencias personales con hechos para apoyar una postura…

30. Niveles de rendimiento. Comparación de promedios de España y Finlandia

32. Índice del estatus social, económico y cultural (ESEC).

33. Relación entre el índice social, económico y cultural y los resultados en ciencias.

34. Relación entre el índice social, económico y cultural y los resultados en ciencias.

35. Estudios más altos alcanzados por las madres. España

36. Libros en el hogar . España

37. La equidad no depende sólo de los recursos Hay buenos resultados en equidad en países con promedios elevados (Finlandia) o discretos (España) y con porcentajes escasos de alumnos en los niveles más bajos de rendimiento Se pueden mejorar resultados y equidad

38. Equidad en ciencias . Distribución de países y CCAA por coeficiente de variación y zona geográfica

40. Rendimiento en ciencias en función del curso

41. Rendimiento en ciencias Alumnos 4º ESO 528

43. (LOE, art. 144) El Instituto de Evaluación y …las administraciones educativas (...) colaborarán en la realización de evaluaciones generales de diagnóstico de las competencias básicas Evaluaciones de diagnóstico LOE (LOE, art. 21, 29) Al finalizar 4º de primaria y 2º de ESO ... todos los centros realizarán una evaluación de diagnóstico de las competencias básicas alcanzadas por sus alumnos. Esta evaluación, competencia de las administraciones educativas, tendrá carácter formativo y orientador para los centros e informativo para las familias y para el conjunto de la comunidad educativa, (...) Tendrán como marco de referencia las evaluaciones generales de diagnóstico(...)

44. Borrador del marco de las evaluaciones generales de diagnóstico Versión 19 dic 07 Aspectos generales. Muestras. Contextos. Pruebas. Objeto de la evaluación: las competencias básicas. Análisis de resultados. Informes y difusión de los resultados

46. Cuadro de intersecciones entre cada área de primaria y cada competencia. Competencias Nº Cono Medio Artística E. Física Lenguas oficiales Idioma Matemát. Soc y ciu. 1 ●● ● □ ●● ●● □ ● 2 ● ● □ □ □ ●● □ 3 ●● ● ● □ □ ● □ 4 ● ● □ ● ● ● □ 5 ●● ● ● ● ● □ ●● 6 ● ●● □ ● ● □ ● 7 ●● ● ● ●● ●● ●● □ 8 ● ● ● ● ● □ ●

47. Dimensiones de las competencias Actitudes Contextos y situaciones Procesos de la competencia a b c ...

48. Cuadro de relaciones entre procesos y contenidos … a través de los criterios de evaluación de las distintas áreas del currículo que contribuyan a la competencia, Bloques de contenidos Procesos Pesos (%) Criterios evaluación distintas materias Criterios.. Criterios.. 30 Criterios.. Criterios.. Criterios.. 20 Criterios.. Criterios.. Criterios.. 50 25 40 35 100

49. Competencia matemática 4º EDUCACIÓN PRIMARIA REPRODUCCIÓN CONEXIÓN REFLEXIÓN Acceso e identificación Comprensión Aplicación Análisis y valoración Síntesis y creación Juicio y regulación Total Números y operaciones 35% La medida 20 % Geometría 25 % Tratamiento de la Inf. azar y probabilidad 20 % 10% 15% 25% 20% 20% 10% 100%

50. Matriz de especificaciones de la competencia científica Competencias Identificar cuestiones científicas Explicar fenómenos científicamente Utilizar pruebas científicas Conocimiento de la ciencia “ Sistemas físicos” LLUVIA ÁCIDA P2 LLUVIA ÁCIDA P3 “ Sistemas vivos” EJERCICIO FÍSICO P1 EJERCICIO FÍSICO P 3 EJERCICIO FÍSICO P 5 MARY MONTAGU P2 MARY MONTAGU P3 MARY MONTAGU P4 “ Sistemas de la Tierra y el espacio” GRAN CAÑÓN P3 GRAN CAÑÓN P5 EFECTO INVERNADERO P5 “ Sistemas tecnológicos” PRENDAS P2 Conocimiento acerca de la ciencia “ Investigación científica” LLUVIA ÁCIDA P5 PROTECTORES SOLARES P2 PROTECTORES SOLARES P3 PROTECTORES SOLARES P4 PRENDAS P1 CULTIVOS GENÉTICAMENTE MODIFICADOS P3 GRAN CAÑÓN P 7 “ Explicaciones científicas” PROTECTORES SOLARES P5 EFECTO INVERNADERO P3 EFECTO INVERNADERO P4

51. Evaluaciones ¿para qué? RENDIR CUENTAS CONOCER MEJORAR COMPARAR

52. Políticas de mejora Escasos recursos Recursos suficientes Propuestas de mejora Escasa exigencia y control Elevada exigencia. Evaluación Mejora del rendimiento Mejora sistemática Bajo rendimiento Mejoras de carácter particular Conflicto Desmoralización Bajo rendimiento Estancamiento

53. Muchas gracias Cuando puedes medir aquello de lo que hablas, y expresarlo con números, sabes algo acerca de ello; pero cuando no lo puedes medir … tu conocimiento es pobre e insatisfactorio: puede ser el principio del conocimiento, pero apenas has avanzado con tus pensamientos hacia la ciencia Lord Kelvin Enrique Roca www.institutodeevaluacón.mec.es