El documento describe el proceso de elaboración de las pruebas de diagnóstico en la Comunidad Autónoma de Andalucía, incluyendo la redacción de los ítems por un panel de expertos, la realización de un estudio piloto con 800 alumnos de 20 centros de primaria y 16 institutos, y la selección final de los ítems teniendo en cuenta criterios estadísticos y de cobertura de competencias.

2. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Evaluación de Diagnóstico
en la Comunidad Autónoma de Andalucía.

3. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
ELABORACIÓN DE LAS PRUEBAS
DE DIAGNOSTICO.

4. 0. INTRODUCCIÓN.
RESUMEN:
DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Proceso de elaboración de las pruebas.
• Muestras empleadas.
• Forma en que se han obtenido los datos.
• Procedimiento para la selección de los items.
• Características de estos items.
• Asignación de puntuaciones a los alumnos/as evaluados.

5. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Naturaleza de las pruebas de Diagnóstico.
• La Orden de 28 de Junio de 2006, establece que la prueba
está dirigida al alumnado que ha terminado el cuarto curso
de Educación Primaria y segundo de la Educación
Secundaria Obligatoria.
• La evaluación del rendimiento del alumnado se centra en
la valoración del nivel de competencias básicas. Asimismo,
es una evaluación formativa ya que va a posibilitar la
obtención de información a los propios centros docentes
para que tomen decisiones encaminadas a la mejora.

6. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Redacción de los ítems y de los criterios de corrección:

Redacción por parte de un panel de expertos.

Situaciones problemas que adoptan diferentes formas:
preguntas de respuesta cerrada, preguntas abiertas,
preguntas
que
exigen
desarrollo
de
distintos
procedimientos.

En cada una de las competencias básicas se
identificaron ítems hasta cubrir todos los elementos de
competencia definidos en cada etapa.

(Ver tabla)

7. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
tabla
COMPETENCIA COMUNICACIÓN
LINGÜÍSTICA
COMPETENCIA MATEMÁTICA
SITUACIONES
PROBLEMA
ÍTEMS
SITUACIONES
PROBLEMA
ÍTEMS
PRIMARIA
15
72
13
54
SECUNDARI
A
18
77
34
50

8. Estructuración del banco de items.
DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN

Partiendo del material se elaboraron 16 modelos de
pruebas, cuatro por cada una de las competencias
básicas y etapas de Primaria y Secundaria.
COMPETENCIA
MATEMÁTICA
COMPETENCIA
COMUNICACIÓN
LINGÜÍSTICA
EP
ESO
EP
ESO
Modelo A
Modelo B
Modelo C
Modelo D
14
14
13
13
12
13
12
13
16
21
21
14
10
10
10
10
Total de ítems
54
50
60*
34*
Prueba

9. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Diseño y desarrollo del estudio piloto.

Muestra.


Se han elegido al azar dos cursos de cada etapa.

Aproximadamente 800 alumnos.


Se han seleccionado un total de 20 centros de
Primaria y 16 IES.
La selección de centros se hizo tratando de incluir
diferentes contextos socioeconómicos y culturales .
(Ámbito rural, urbanas, ZAEP y medio alto).
Tabla 3.

10. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Diseño y desarrollo del estudio piloto.
CENTROS
ALUMNOS
ETAPAS
RURALES
URBANOS
N. BAJO
URBANOS
N. MEDIO-ALTO
TOTAL
LEN
MAT
EP
4
6
10
20
804
821
ESO
4
4
8
16
700
674

11. Aplicación de la prueba:
DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
. Curso 2005/06.
. Pruebas de matemáticas y comunicación lingüística.
. Dos días consecutivos .
. Al inicio de la jornada escolar.
. Sesiones de 90 minutos con descanso de quince.
Corrección y tabulación:
. Corrección por el mismo profesorado que participado en la
aplicación.
. Respuesta del alumnado se traslada a hoja de cálculo.

12. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Selección de los ítems.

Se procede a seleccionar los items más adecuados ,
atendiendo a los siguientes criterios:

Usando modelos logísticos de la Teoría de
Respuesta al items (TRI), se han descartado los
elementos que carecen de bondad de ajuste al
modelo de crédito parcial generalizado. Se ha usado
nivel de significación igual al 0,05%.

Usado chi-cuadrado para medir la bondad de ajuste
al modelo logÍstico de referencia.

Atendiendo a la dificultad se han eliminado los ítems
con baja dificultad
e igualmente aquellos que
requerían un alto nivel de capacidad para ser
respondidos correctamente.

Cobertura de las competencias evaluadas.

13. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
Puntuación e interpretación de las respuesta.

Se asume que la distribución de las puntuaciones es
normal se ha transformado la escala original en una
escala con media 500 y desviación típica 100. (Igual que
PISA)

Tabla FIGURA 1.

14. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN
16 %
366
25 %
433
25 %
500
16 %
9%
9%
567
634
Competencia

15. DIRECCIÓN GENERAL DE ORDENACIÓN Y EVALUACIÓN
EDUCATIVA
CONSEJERÍA DE EDUCACIÓN