SlideShare una empresa de Scribd logo
1 de 28
Descargar para leer sin conexión
Autores: Liliana Miranda
Andreas Schleicher
Coordinación editorial: Rosa María de los Heros
Colaboración: Francisco Marcone
Diseño y carátula: Rafael Moy
Diagramación: Liliana Baluarte
Corrección de estilo: Hugo Melo
Fotografía de carátula: Cortesía Consejo Nacional de Educación
SERIE:LAEDUCACIÓNDELFUTURO
La educación peruana
en el contexto de PISA
01_28 PISA.indd 101_28 PISA.indd 1 10/23/09 6:38:40 PM10/23/09 6:38:40 PM
ÍNDICE
PISA 2009: Su importancia para el Perú y su contribución
a la mejora de las formas de monitorear y evaluar
la educación peruana 3
Lo que el Perú puede aprender de los resultados
comparados de las pruebas PISA 20
El Consejo Nacional de Educación (CNE) y el Grupo Santillana
tienen el agrado de poner en sus manos el segundo fascículo de la
serie: La educación del futuro.
Con motivo de la aplicación de las pruebas del Programa Interna-
cional para la Evaluación de Estudiantes (PISA), el CNE y la Fun-
dación Santillana, con la colaboración de AprenDes/USAID, hicie-
ron posible la presencia en Lima de Andreas Schleicher, Jefe de la
División de Evaluación de la Organización para la Cooperación y
Desarrollo Económico (OCDE) y responsable de las pruebas PISA.
La medición de la calidad educativa es uno de los principales temas
en la agenda educativa mundial en los últimos 20 años. Los técni-
cos y los responsables de la educación de cada país han ido toman-
do conciencia de la necesidad e importancia de evaluar los sistemas
educativos y los niveles de aprendizaje de los estudiantes. La prueba
PISA, la más conocida internacionalmente, está siendo aplicada el
2009 a adolescentes de más de 60 países. Esta es la segunda vez en
la que participa el Perú, y el área principal de la evaluación es la
comprensión lectora, tal como ocurrió en el 2000 y 2001.
Los artículos seleccionados para esta edición nos ayudarán a co-
nocer de qué manera los resultados de las pruebas PISA pueden
ayudar a la educación en nuestro país.
Las opiniones expresadas en este texto son responsabilidad de los autores
y no comprometen al Consejo Nacional de Educación.
Xxx
Xxx
01_28 PISA.indd 201_28 PISA.indd 2 10/23/09 6:38:43 PM10/23/09 6:38:43 PM
3
En las dos últimas décadas, el número de países que par-
ticipa en evaluaciones internacionales de logro educativo
para obtener información sobre el diseño y mejora de sus
políticas educativas ha ido aumentando significativamente.
Sin embargo, esta participación es uno de los temas más
controvertidos en el campo educativo2
, en tanto que el valor
y validez de este tipo de evaluaciones es aún materia de in-
tensas discusiones en los medios académicos (Ferrer y Arre-
gui 2003).
No obstante, a pesar de estos cuestionamientos, consideramos que la
participación en los estudios internacionales de logros académicos
serios y rigurosos puede jugar un rol crucial en el mejoramiento de
los sistemas educativos y en las prácticas de enseñanza-aprendizaje
si esas evaluaciones son entendidas como una oportunidad para ob-
tener información que pueda proveer elementos de juicio a quienes
toman decisiones. Aun cuando Reimers y McGinn (1997) ya nos han
alertado que la relación entre información y toma de decisión dista de
ser inmediata, los análisis y resultados que provienen de las compa-
raciones internacionales pueden ayudar a fundamentar ciertas opcio-
nes de política durante el proceso de debate y negociación de esta.
PISA 2009: Su importancia para el Perú y
su contribución a la mejora de las formas de
monitorear y evaluar la educación peruana
La participación en los
estudios internacionales
de logros académicos
serios y rigurosos puede
jugar un rol crucial en
el mejoramiento de
los sistemas educativos
y en las prácticas de
enseñanza-aprendizaje.
Importancia de PISA 2009
Liliana Miranda M.1
1 Jefa de la Unidad de Medición de la Calidad Educativa del Ministerio de Edu-
cación. Coordinadora Nacional del Programa Internacional para la Evaluación
de Estudiantes (PISA).
La autora agradece las sugerencias y comentarios de Alfredo Altamirano y An-
drés Burga.
2 Esta controversia se acentúa en el caso de los países que cuentan con pobla-
ciones lingüística y culturalmente diversas, en tanto entran a tallar adicional-
mente cuestiones relativas a la pertinencia cultural de los instrumentos utiliza-
dos para estos países.
01_28 PISA.indd 301_28 PISA.indd 3 10/23/09 6:38:43 PM10/23/09 6:38:43 PM
4 Serie: La educación del futuro
Si bien es comprensible que la participación en evaluaciones interna-
cionales genere expectativas de los distintos actores involucrados en
el quehacer educativo, es importante recordar que las evaluaciones
–sean de carácter nacional o internacional–, al igual que cualquier
estudio de investigación, no pueden responder a múltiples propósi-
tos. Una sola evaluación no puede atender a todas las demandas de
información. El objetivo y el uso de los resultados definen en gran
medida el diseño y las exigencias metodológicas y técnicas que cada
evaluación requiere (Ravela y otros 2008). Un buen sistema de eva-
luación debe definir claramente las preguntas que busca responder y
los usos que se pretende dar a sus resultados, y por lo tanto, el valor
de la evaluación debe ser juzgado en dichos términos3
.
En este sentido, un sistema de evaluación debe buscar ofrecer infor-
mación complementaria a través de los distintos estudios que lleve
a cabo –que pueden responder a distintos propósitos– de acuerdo
con lo que se espera de él. De allí que consideramos fundamental
evaluar cuidadosamente la participación en estudios internaciona-
les, de manera que estos aporten información relevante y adicional a
la acopiada a través de evaluaciones nacionales.
El presente artículo busca aportar a la reflexión y discusión sobre los
beneficios que conlleva la participación del Perú en PISA desde la con-
vicción de que puede contribuir al mejoramiento de nuestro sistema
educativo. Esto es, si esta participación es comprendida y valorada
en términos de los propósitos que ella busca, y sus resultados son
usados desde una visión de responsabilidad compartida en relación
con la educación, con una orientación fuerte para apoyar a los actores
educativos en sus tareas –especialmente a los directores y docentes– y
una manifiesta voluntad política en los distintos niveles de decisión de
encarar acciones dirigidas a resolver los problemas y deficiencias que
la evaluación ponga de manifiesto (Ravela y otros 2008).
Evaluaciones del rendimiento estudiantil
A mediados de la década de 1990, en nuestro país, al igual que en la
mayoría de los países de la región, se inició el desarrollo del sistema
de evaluación del rendimiento estudiantil. Desde entonces, el Minis-
Un buen sistema
de evaluación debe
definir claramente las
preguntas que busca
responder y los usos que
se pretende dar a sus
resultados.
3 Es importante tener en cuenta que esto reduce las tensiones y dilemas que
enfrentan los sistemas de evaluación, pero no los desaparece del todo.
Un sistema de
evaluación debe buscar
ofrecer información
complementaria a través
de los distintos estudios
que lleve a cabo.
01_28 PISA.indd 401_28 PISA.indd 4 10/23/09 6:38:44 PM10/23/09 6:38:44 PM
5
terio de Educación, a través de la Unidad de Medición de la Calidad
Educativa (UMC), ha llevado a cabo diversas evaluaciones naciona-
les e internacionales.
En el transcurso de estos años, los propósitos y características del
sistema de evaluación se han ido redefiniendo, atendiendo no solo
a los cambios del propio sistema educativo y a las demandas de los
diferentes actores que intervienen en él, sino también al proceso de
descentralización que se viene desarrollando en el país4
.
Actualmente, el sistema de evaluación está conformado por un con-
junto de evaluaciones de carácter muestral y censal que busca proveer
de información pertinente a la sociedad en su conjunto, y a quienes
toman decisiones, acerca del nivel de logro de nuestros estudiantes
en capacidades y habilidades fundamentales, así como de los facto-
res escolares y extraescolares que se asocian a dichos logros. En este
sentido, no solo se ha aportado con información sobre el resultado
de los estudiantes que asisten al nivel primario y secundario en com-
petencias que tradicionalmente son evaluadas como la comprensión
lectora y matemática, sino también se ha brindado información so-
bre el nivel de logro de los estudiantes en capacidades más complejas
de evaluar, tales como producción de textos escritos –en castellano
y en lenguas nativas–, resolución de problemas matemáticos usando
material concreto, formación ciudadana5
, etc.
Cada evaluación ha supuesto un aprendizaje que ha permitido enri-
quecer y mejorar el diseño y elaboración no solo de los instrumentos
que buscan evaluar el rendimiento estudiantil y estudiar los facto-
res asociados a este, sino también de metodologías más complejas y
exactas. Entre estas se puede citar el tránsito que ha supuesto pasar
de pruebas cuya interpretación de resultados está referido a la nor-
ma (que permiten solamente ordenar y comparar a un estudiante
Cada evaluación ha
supuesto un aprendizaje
que ha permitido
enriquecer y mejorar
el diseño y elaboración
de los instrumentos
que buscan evaluar el
rendimiento estudiantil.
Importancia de PISA 2009
4 Dicho proceso no ha estado exento de tensiones, en tanto –como se ha seña-
lado antes– no siempre es posible que los sistemas de evaluación respondan a
los diversos intereses y demandas de los actores involucrados en el quehacer
educativo. Sin embargo, la discusión sobre este tema excede a los propósitos
del presente artículo.
5 Adicionalmente, el año pasado la UMC ha emprendido el desafío de llevar a
cabo la primera evaluación a niños de 5 años de educación inicial, lo que per-
mitirá obtener información sobre algunos desempeños alcanzados en las áreas
evaluadas del Diseño Curricular Nacional: Lógico Matemática, Comunicación
Integral y Personal Social; así como de los factores del contexto familiar y edu-
cativo a los que están asociados dichos desempeños.
01_28 PISA.indd 501_28 PISA.indd 5 10/23/09 6:38:45 PM10/23/09 6:38:45 PM
6 Serie: La educación del futuro
con su grupo de pares) a pruebas cuya interpretación de resultados
está referida a criterios (que además de ordenar y comparar grupos
de estudiantes, permiten estimar cuántos alcanzan el criterio o es-
tándar establecido, y sobre todo permiten describir qué es lo que los
estudiantes saben y son capaces de hacer). También podemos desta-
car el uso de métodos como el Bookmark sobre puntos de corte, para
establecer los límites entre los niveles de desempeño. Igualmente se
ha introducido el uso de los Modelos Jerárquicos Lineales (HLM6
),
que permiten analizar la relación entre la medida en una prueba de
logro (criterio) y un conjunto de variables asociadas al rendimien-
to académico (predictores). La ventaja de este tipo de modelos es
que consideran la estructura jerárquica de los datos, pues hay varia-
bles que corresponden al nivel de escuela (p. ej.: el clima escolar) y
otras que pertenecen al nivel individual (p. ej.: la autoeficacia del
estudiante), lo que permite tener una estimación más precisa de
los errores estándar del coeficiente que asocia cada predictor con el
criterio.
Además, se están utilizando modelos de análisis factorial para obte-
ner evidencias de validez referidas a la estructura de los constructos
evaluados. Y, finalmente, podemos mencionar el uso de métodos de
remuestreo (p. ej.: el Jacknife) para estimar el porcentaje de los erro-
res estándar de los estudiantes en cada nivel de desempeño.
El Perú en las evaluaciones internacionales
Las evaluaciones internacionales sobre educación constituyen es-
fuerzos multinacionales para obtener información confiable y com-
parable sobre el nivel de logro de aprendizaje y de algunos otros indi-
cadores educativos relevantes, con el fin de que puedan ser utilizados
como insumo en el diseño y mejoramiento de políticas educativas
(UMC 2002). Dichas evaluaciones están dirigidas a diversas pobla-
ciones en grados o grupos etarios seleccionados y adoptan distin-
tas características. Generalmente son coordinadas por organismos
y agencias intergubernamentales o privadas; en los cuales el grado
de participación y representación de los países participantes tiende a
ser variable (Ferrer y Arregui 2003).
6 Por sus siglas en inglés: Hierarchical Linear Model.
Las evaluaciones
internacionales sobre
educación constituyen
esfuerzos para obtener
información confiable
y comparable, con el
fin de que puedan
ser utilizados como
insumo en el diseño
y mejoramiento de
políticas educativas.
01_28 PISA.indd 601_28 PISA.indd 6 10/23/09 6:38:45 PM10/23/09 6:38:45 PM
7
El Perú ha participado
en dos programas
internacionales
de evaluación de
estudiantes. El primero,
de carácter regional,
es el Laboratorio
Latinoamericano de
Evaluación de la Calidad
de la Educación (LLECE).
Actualmente existen diversos programas internacionales de evalua-
ción educativa. Entre los principales se puede citar a aquellos que
promueve la Asociación Internacional para la Evaluación del Logro
Educativo (IEA7
) –Estudio Internacional de Educación Cívica y de
Ciudadanía (ICCS), Estudio Internacional de Progreso en Compren-
sión Lectora (PIRLS) y Estudio Internacional de Tendencias en Ma-
temática y Ciencias (TIMSS)–; la Organización para la Cooperación
y el Desarrollo Económico (OCDE) –Programa Internacional de
Evaluación de Estudiantes (PISA)–; el Instituto de Estadística de la
UNESCO –el Programa de Medición y Seguimiento de la Alfabetiza-
ción (LAMP8
)–; el Laboratorio Latinoamericano de Evaluación de la
Calidad de la Educación (LLECE) y el Consorcio de África del Sur
para la Evaluación de la Calidad Educacional (SACMEQ9
).
El Perú ha participado en dos programas internacionales de eva-
luación de estudiantes. El primero, de carácter regional, es el
LLECE, que está conformado por todas las Unidades de Evaluación
de los países de la región, y cuya coordinación técnica está a car-
go de la Oficina Regional de Educación para América Latina y el
Caribe (OREALC) de la UNESCO. Este programa sustenta su mar-
co evaluativo en una matriz curricular común a los países partici-
pantes, a través del cual se han evaluado capacidades referidas a las
áreas de comunicación y matemática, y recientemente al área de
ciencias.
El LLECE, en los años 1997 y 2006, ha llevado a cabo dos proce-
sos de evaluación dirigidos a los estudiantes de educación primaria.
Nuestro país ha participado en ambos. Actualmente, este programa
se encuentra diseñando los lineamientos y requerimientos técnicos
necesarios para garantizar la comparabilidad de sus resultados en
el tiempo10
, así como para establecer una periodicidad regular entre
sus evaluaciones.
Importancia de PISA 2009
7 Por sus siglas en inglés: Association for the Evaluation of Educational Achie-
vement.
8 Se ha mantenido las siglas de los nombres de las evaluaciones en inglés, pues
son más conocidas por ellas.
9 Por sus siglas en inglés: Southern Africa Consortium for Monitoring Educa-
tional Quality.
10 Los resultados de las dos evaluaciones que se han llevado a cabo no son
comparables entre sí.
01_28 PISA.indd 701_28 PISA.indd 7 10/23/09 6:38:46 PM10/23/09 6:38:46 PM
8 Serie: La educación del futuro
El segundo programa internacional de evaluación de estudiantes en
el que ha participado el Perú es PISA, que agrupa actualmente a
más de 60 países11
, y que es promovido por la Organización para la
Cooperación y el Desarrollo Económico (OCDE), a través de un con-
Participación del Perú en evaluaciones internacionales
Programa de
Evaluación
Interpretación
de resultados2
Población
evaluada
Áreas
evaluadas
Cobertura
NIVEL LATINOAMERICANO – LLECE – UNESCO
Primer Estudio
Regional
Comparativo
y Explicativo
(PERCE) 1997
Normas
3o
y 4o
grados de
primaria
Comunicación
y Matemática
Muestra
inferencial:
Megaciudad /
Urbano / Rural
Segundo
Estudio
Regional
Comparativo
y Explicativo
(SERCE) 2006
Criterios
3o
y 6o
grados de
primaria
Comprensión
de textos,
Producción
de textos,
Matemática,
Ciencias
Muestra
inferencial:
Nacional /
Urbano / Rural
NIVEL MUNDIAL – PISA – OCDE
Ciclo 2000+1
Criterios
15 años en
secundaria3
Comprensión
de textos4
,
Matemática y
Ciencias
Muestra
inferencial:
Nacional
Ciclo 2009 Criterios
15 años en
secundaria3
Comprensión
de textos4
,
Matemática y
Ciencias
Muestra
inferencial:
Nacional
1 En el Perú la evaluación se realizó el 2001, en un proceso denominado PISA+ (PISA PLUS).
2 Referido a las normas: en este caso se interpretaron los resultados en función de un pro-
medio. Se hace con el fin de comparar poblaciones entre sí. Por ejemplo: se dice que el
rendimiento promedio de los estudiantes urbanos es mayor que el de los rurales.
Referido a los criterios: se interpretan los resultados considerando un criterio o estándar de
logro. Por ejemplo: se dice que el 30% de los estudiantes urbanos logra el nivel de logro
esperado para el grado.
3 O su equivalente en otras modalidades educativas como la Educación Básica Alternativa.
4 Énfasis de la evaluación, lo que implica que aplican una mayor cantidad de ítems y, por lo
tanto, hay una mayor riqueza en la explicación y el análisis de los resultados; además, que
la medición de los factores asociados se encaminan al área enfatizada.
11 En un inicio PISA estuvo pensado para ser aplicado en los países perte-
necientes a la OCDE; sin embargo, desde la primera aplicación, varios países
que no eran miembros de esta organización mostraron su interés en participar.
Estos fueron aceptados bajo la figura de “países socios en PISA”. Desde enton-
ces, PISA se ha constituido en el estudio internacional que agrupa a la mayor
cantidad de países en el mundo.
01_28 PISA.indd 801_28 PISA.indd 8 10/23/09 6:38:46 PM10/23/09 6:38:46 PM
9
Una de las características
esenciales de PISA es su
regularidad, es decir, se
trata de un programa
diseñado en tres ciclos
evaluativos de tres
años cada uno, con la
finalidad de hacer un
seguimiento al progreso
educativo de los países
participantes.
Importancia de PISA 2009
sorcio de instituciones especializadas en la evaluación e investiga-
ción educativa. Este programa evalúa en los estudiantes de 15 años
–independientemente de la modalidad, grado o ciclo que estén cur-
sando–, capacidades relacionadas con la comprensión lectora, mate-
mática y ciencia.
PISA se sustenta en un enfoque abierto de la evaluación, es decir, no
se basa en los marcos curriculares nacionales. De allí que PISA no
esté diseñado para evaluar el nivel de aprendizaje de los contenidos
específicos establecidos en los currículos ni aporta información so-
bre el grado en que este se está implementando. Los instrumentos
que utiliza PISA se “diseñan a partir de un conjunto de estándares
de contenido y desempeño, elaborados por un grupo de expertos y
especialistas en diferentes áreas de conocimiento que se consideran
imprescindibles para la adecuada inserción de los jóvenes en la so-
ciedad y en el mundo laboral de hoy” (Ferrer y Arregui 2003: 17).
Dado que el presente artículo se centra en este programa, en el si-
guiente acápite detallaremos sus principales características12
, aun-
que sin ser exhaustivos, con el único propósito de que se pueda
comprender y ponderar las ventajas que conlleva la participación del
Perú en él.
El Programa Internacional para la
Evaluación de Estudiantes (PISA)
PISA se concibe como un programa que se caracteriza principalmen-
te por tres aspectos: i) establecer un marco conceptual comprensivo
y riguroso para evaluar lectura, matemática y ciencia; ii) explorar
habilidades y características de los estudiantes que van más allá de
los contenidos propiamente escolares; y iii) analizar las característi-
cas de los sistemas, escuelas y estudiantes que se asocian a los resul-
tados escolares (OCDE 2008).
Una de las características esenciales de PISA es su regularidad, es de-
cir, se trata de un programa diseñado en tres ciclos evaluativos de tres
años cada uno, con la finalidad de hacer un seguimiento al progreso
educativo de los países participantes (UMC 2002). En cada ciclo se
12 El lector interesado en profundizar en las características de PISA pue-
de revisar las distintas publicaciones que hay al respecto en su página web:
http://www.pisa.oecd.org
Los instrumentos que
utiliza PISA se diseñan
a partir de un conjunto
de estándares de
contenido y desempeño
que se consideran
imprescindibles para
la adecuada inserción
de los jóvenes en la
sociedad y en el mundo
laboral de hoy.
01_28 PISA.indd 901_28 PISA.indd 9 10/23/09 6:38:47 PM10/23/09 6:38:47 PM
10 Serie: La educación del futuro
estudia en profundidad una de las áreas evaluadas, que se traduce en
la aplicación de un mayor número de ítems del área privilegiada en
relación con las otras dos, lo que permite reportar los resultados de
dicha área en términos de subescalas13
y de niveles de competencia.
Nuestro país participó en el primer ciclo de evaluación en el año
2001, y se ha vuelto a reintegrar para el ciclo 200914
. En ambos casos
el énfasis de la evaluación ha estado centrado en la lectura.
Quizá una de las características más importantes de PISA sea “el
innovador concepto de competencia (literacy), que [introduce] y que
se refiere a la capacidad de los alumnos de aplicar sus conocimien-
tos y habilidades en áreas académicas fundamentales y de analizar,
razonar y comunicar eficazmente cuando plantean, resuelven e in-
terpretan problemas relacionados con distintas situaciones” (OCDE
2005: 20).
Esta noción de competencia supone abandonar la visión dicotómi-
ca que ha imperado en el ámbito educativo, y al hablar de “niveles
de competencia” se asume la idea de que las personas desarrollan
de manera progresiva sus conocimientos, destrezas y habilidades en
distintos contextos a lo largo de la vida. En tal sentido, PISA eva-
lúa los conocimientos y habilidades de los estudiantes como un
contínuum. Dicho enfoque, entonces, no permite responder pregun-
tas de si los estudiantes saben o no leer, sino que aporta información
sobre el tipo de habilidades y destrezas que ponen en juego los estu-
diantes al leer y el grado en que las han adquirido.
En tal sentido, un elemento relevante de PISA 2009 es la introduc-
ción de un conjunto de ítems de menor dificultad que permitirá des-
cribir lo que saben, comprenden y pueden hacer los estudiantes de
países que mostraron un bajo nivel de desempeño en lectura. Como
es conocido, en el ciclo 2000 una proporción importante de estudian-
tes de los países participantes –pero en particular en los países que
no pertenecían a la OCDE15
– se ubicó en el grupo por debajo del pri-
mer nivel de competencia establecido en lectura, lo que no permitía
describir los conocimientos y habilidades que estaban asociados
13 Por ejemplo, para el caso de lectura, las subescalas establecidas son: i) recu-
peración de información, ii) interpretación de textos y iii) reflexión y evalua-
ción.
14 Es decir, no participó en el 2003 ni en el 2006, que tuvieron como énfasis la
evaluación de competencias matemáticas y científicas, respectivamente.
15 En el caso del Perú, de los cinco niveles de competencia considerados, el 54%
de los estudiantes se ubicó por debajo del nivel 1.
Dicho enfoque aporta
información sobre el
tipo de habilidades y
destrezas que ponen en
juego los estudiantes al
leer y el grado en que
las han adquirido.
Esta noción de
competencia supone
abandonar la visión
dicotómica que ha
imperado en el ámbito
educativo.
01_28 PISA.indd 1001_28 PISA.indd 10 10/23/09 6:38:48 PM10/23/09 6:38:48 PM
11
Adicionalmente,
PISA estudia en
cada ciclo evaluativo
otras habilidades y
características de los
estudiantes de 15 años,
tales como sus actitudes
hacia la lectura, la
matemática y la ciencia.
Importancia de PISA 2009
a dicho desempeño. Una razón adicional para incluir este tipo de
ítems –más fáciles– es que la experiencia de los estudiantes con me-
nor nivel de desempeño sea más satisfactoria16
.
Un aspecto importante de PISA es que se aplican diferentes cuader-
nillos a los estudiantes evaluados. Cada cuadernillo está organizado
por bloques de ítems pertenecientes a las tres áreas evaluadas, que,
a su vez, tienen ítems únicos e ítems en común con los otros cuader-
nillos. Los bloques están distribuidos en los cuadernillos en distinto
orden, de manera que no siempre queden al inicio o al final en todos
los cuadernillos en los que aparecen. Este diseño, llamado Bloques
Incompletos Balanceados, permite, por un lado, que los estudiantes
se enfrenten a un número razonable de preguntas que sirvan para
medir su desempeño de manera adecuada, evitando el factor can-
sancio, y por otro lado, que se logre evaluar todo el espectro de cono-
cimientos, capacidades y habilidades que se especifican en el marco
conceptual de la evaluación. No obstante, es preciso tener en cuenta
que este diseño, además de otras consideraciones técnicas17
, tiene al-
gunas implicancias, como el hecho de que no permite reportar resul-
tados a nivel individual; es decir, PISA no está diseñada para obtener
resultados a nivel de escuela o de estudiante evaluado.
Adicionalmente a la evaluación de las áreas de lectura, matemática
y ciencias, PISA estudia en cada ciclo evaluativo otras habilidades y
características de los estudiantes de 15 años, tales como sus actitu-
des hacia la lectura, la matemática y la ciencia18
, sus concepciones
sobre sí mismos, las estrategias que siguen en su proceso de aprendi-
zaje, su sentido de pertenencia con la escuela, entre otros.
Con el fin de recoger información sobre el contexto en que se des-
envuelven los estudiantes evaluados y de estimar el aporte de los
factores que se asocian a sus resultados, PISA utiliza un conjunto
Los Bloques Incompletos
Balanceados permiten
evaluar todo el espectro
de conocimientos,
capacidades y
habilidades que se
especifican en el marco
conceptual de
la evaluación.
16 Es importante destacar la conformación del Grupo Iberoamericano de PISA,
que está integrado por Argentina, Brasil, Chile, Colombia, España, México, Pa-
namá, Perú, Portugal y Uruguay, cuyo propósito es fomentar la colaboración
entre los países de Iberoamérica que participan en PISA. Este grupo elaboró un
conjunto de ítems que fueron seleccionados por PISA, y que se monitorearon
en el ciclo 2009.
17 Entre otros, se puede señalar el carácter muestral de la evaluación, el hecho
de evaluar a un máximo de 35 estudiantes por escuela.
18 Por ejemplo, en el 2006 la actitud de los estudiantes hacia la ciencia fue es-
tudiada a través de un conjunto de preguntas que buscaban indagar sobre i) el
interés en la ciencia, ii) la aceptación del pensamiento científico como vía de
conocimiento y iii) la responsabilidad hacia el uso de los recursos y el medio
ambiente.
01_28 PISA.indd 1101_28 PISA.indd 11 10/23/09 6:38:48 PM10/23/09 6:38:48 PM
12 Serie: La educación del futuro
de cuestionarios dirigidos a los estudiantes y a los directivos de las
instituciones educativas de los países participantes. A través de estos
instrumentos busca obtener información sobre las condiciones eco-
nómicas, sociales, culturales y familiares de los estudiantes, además
de las características antes señaladas, así como acerca de la calidad
de los recursos financieros, materiales, humanos de las escuelas, las
características institucionales, las prácticas directivas, entre otros.
Aportes de PISA para el monitoreo y
evaluación del sistema educativo peruano
A pesar de que, como se ha señalado al inicio de este artículo, la
participación en evaluaciones internacionales no está exenta de con-
troversias, consideramos que estas pueden cumplir un rol importan-
te en el mejoramiento del sistema educativo y del proceso de ense-
ñanza-aprendizaje. En dicho sentido se manifiestan Ferrer y Arregui
(2003: 13), luego de analizar los argumentos a favor y en contra de
dicha participación, al señalar que “El balance entre las ventajas y
limitaciones que presentan las pruebas internacionales pareciera in-
dicar que la participación en estos proyectos puede ser valiosa para
los países, incluso para los países en desarrollo, siempre y cuando se
tomen ciertas previsiones con respecto a las características técnicas
de las pruebas y a las condiciones políticas e institucionales para su
aplicación, incluyendo mecanismos para la correcta interpretación y
difusión de los resultados”.
En las siguientes líneas daremos cuenta de los aportes de PISA para el
monitoreo y evaluación del sistema educativo peruano, entendiendo
dicho programa en su integralidad, y no solo en cuanto a la informa-
ción que brinda en términos de resultados de las pruebas de rendi-
miento. Es importante precisar que en este recuento se ha privilegiado
aquellos aportes que puede brindar la participación en PISA, teniendo
en cuenta las particularidades y desafíos que tiene nuestro país.
Monitoreo del logro académico en el tiempo
Considerando que uno de los objetivos del sistema educativo pe-
ruano es “Formar personas capaces de lograr su realización ética,
intelectual, artística, cultural, afectiva, física, espiritual y religiosa
La participación en estos
proyectos puede ser
valiosa para los países,
incluso para los países
en desarrollo, siempre
y cuando se tomen
ciertas previsiones
con respecto a las
características técnicas
de las pruebas y a las
condiciones políticas e
institucionales para su
aplicación.
01_28 PISA.indd 1201_28 PISA.indd 12 10/23/09 6:38:48 PM10/23/09 6:38:48 PM
13
[…], así como el desarrollo de sus capacidades y habilidades para
vincular su vida con el mundo del trabajo y para afrontar los ince-
santes cambios en la sociedad y el conocimiento”19
, las decisiones
de política educativa debieran ser valoradas por la medida en que se
estén cumpliendo estos objetivos. Por esta razón, como señala Fors-
ter (2002), las mediciones de los resultados del aprendizaje tienen un
significado especial como indicadores de calidad en la educación, en
tanto constituyen una base relevante con el fin de señalar metas para
el mejoramiento y para el monitoreo del progreso de los objetivos
educativos.
En tal sentido, la participación en evaluaciones internacionales nos
permite “obtener información objetiva sobre el logro académico de
los estudiantes en relación con estándares internacionales de conte-
nido, que impacte la opinión pública y facilite una toma de decisio-
nes mejor informada para el mejoramiento del sistema educativo”
(Ferrer y Arregui 2003: 20).
En el caso particular de PISA, la participación de nuestro país en
el ciclo 2009 no solo nos permitirá poder evidenciar los resultados
obtenidos por los estudiantes peruanos en comparación con aquellos
logrados por los estudiantes del resto de países participantes, sino
que también –y consideramos que esto es lo más relevante– nos per-
mitirá conocer en qué medida ha variado la proporción de estudian-
tes ubicados en cada uno de los niveles de desempeño de la escala de
comprensión lectora, y en el promedio de la escala de alfabetización
matemática y científica, entre los casi 8 años que median entre las
dos aplicaciones de la prueba PISA en nuestro país. Esta informa-
ción, sumada a otras, proporcionará un insumo fundamental para
hacer una evaluación objetiva de las políticas educativas aplicadas, y
del funcionamiento del sistema durante este periodo.
Orientación para la mejora de políticas
educativas y pedagógicas
La participación en PISA podría favorecer la reflexión sobre los con-
tenidos curriculares contemplados en nuestro Diseño Curricular Na-
cional (DCN). Establecer la relación entre aquello que propone el
Importancia de PISA 2009
19 Artículo 9 de la Ley General de Educación 28044. 28 de julio del 2003.
Las decisiones de
política educativa
debieran ser valoradas
por la medida en que se
estén cumpliendo estos
objetivos.
Esta información,
sumada a otras,
proporcionará un
insumo fundamental
para hacer una
evaluación objetiva de
las políticas educativas
aplicadas, y del
funcionamiento del
sistema durante este
periodo.
01_28 PISA.indd 1301_28 PISA.indd 13 10/23/09 6:38:49 PM10/23/09 6:38:49 PM
14 Serie: La educación del futuro
currículo peruano para las diversas modalidades educativas20
y las
competencias para la vida adulta en que se basa la evaluación PISA
resultaría enriquecedor para el primero. Ello no implica asumir una
suerte de disyuntiva entre ambos, como algunos plantean, puesto
que el currículo nacional es el referente normativo a partir del cual
los docentes debieran enseñar, y lo que se espera que los estudian-
tes aprendan en cada grado, ciclo o nivel, mientras que PISA evalúa
algunas competencias y capacidades requeridas para que cualquier
joven cercano a incorporarse a la vida adulta se desempeñe exitosa-
mente de acuerdo con las demandas de una sociedad global que le
exige seguir aprendiendo21
(UMC 2002).
De otro lado, la aplicación de las pruebas PISA con la incorporación
de ítems de menor nivel de dificultad permitirá contar con una des-
cripción más detallada sobre los procesos cognitivos implicados en
las actividades que los estudiantes con menor nivel de habilidad han
podido resolver. Dichas descripciones –sumadas a las referidas a los
ítems de mayor dificultad– aportarán mayor evidencia empírica para
la tarea que el Ministerio está próximo a emprender en la construc-
ción de estándares de desempeño. Esto es particularmente relevante
en el caso de la comprensión lectora para el nivel secundario o su
equivalente, pues no resulta una tarea fácil establecer la gradualidad
de contenidos para cada grado o ciclo escolar.
Asimismo, PISA podría enriquecer la elaboración de textos escolares,
no solo incorporando distintos tipos de textos, sino también textos
que combinen formatos continuos y discontinuos y que propicien
una lectura intertextual22
.
Un sistema de evaluación como PISA también puede desempeñar un
papel importante para comunicar expectativas de aprendizaje al in-
terior de las escuelas. Como señala Forster y otros (2002: 15), dichas
evaluaciones “pueden ser un método efectivo de concentrar la aten-
ción de los alumnos en los resultados de aprendizaje que se valoran,
20 Resulta importante recordar que PISA no se circunscribe a evaluar solo a los
estudiantes de Educación Básica Regular, sino que también incluye a estudian-
tes de otras modalidades.
21 En todo caso, quizá las competencias evaluadas por PISA podrían cristalizar
algunos de los objetivos que debiera proponerse en el currículo para cuando los
estudiantes culminen la secundaria.
22 Una experiencia interesante a este respecto la constituyen los módulos y las
pruebas elaboradas para la Movilización Nacional por la Comprensión Lectora
que actualmente viene implementando el Ministerio de Educación.
Dichas evaluaciones
“pueden ser un método
efectivo de concentrar la
atención de los alumnos
en los resultados de
aprendizaje que se
valoran, promoviendo
razonamientos y
reflexiones de mayor
nivel de complejidad
[...] y estimulando a los
estudiantes a alcanzar
niveles de logro aun
mayores”.
01_28 PISA.indd 1401_28 PISA.indd 14 10/23/09 6:38:49 PM10/23/09 6:38:49 PM
15Importancia de PISA 2009
promoviendo razonamientos y reflexiones de mayor nivel de com-
plejidad [...] y estimulando a los estudiantes a alcanzar niveles de
logro aun mayores”. En tal sentido, se podría pensar en proveer a los
docentes reportes que contengan los resultados del logro estudian-
til desagregados por subescalas, para que puedan conocer en qué
contenidos y capacidades tienen más dificultades los estudiantes; del
mismo modo se podrían elaborar materiales que les permitan visua-
lizar y comprender los procesos involucrados en actividades con di-
ferente tipo de demanda cognitiva.
De otro lado, también podría considerarse la posibilidad de mode-
lar las prácticas evaluativas de los docentes para aproximarlos –por
ejemplo, en el caso de la comprensión lectora– a indagar por proce-
sos lectores mediante preguntas cuyas formulaciones no son únicas,
sino que varían de acuerdo con las características de contenido y
forma de los textos, o según los planteamientos para la calificación
de preguntas de respuesta abierta (UMC 2002).
Finalmente, todo esto también será de ayuda para los programas de
capacitación docente, los cuales deberán ayudar al docente a am-
pliar sus concepciones acerca de la lectura y los criterios que utiliza
en la selección de textos y preguntas adecuados para desarrollar la
comprensión lectora de los estudiantes.
Identificación y comprensión de los factores
asociados
El enfoque comprensivo de la evaluación PISA permite dar cuenta
no solo del rendimiento de los estudiantes en las áreas estudiadas,
sino que también atiende a las condiciones y factores del entorno
familiar y escolar que influyen en dicho rendimiento, pues lo que los
estudiantes reciben en su hogar y en la escuela puede estimular o li-
mitar el desarrollo de sus habilidades. Los resultados de este tipo de
análisis pueden dar lugar a amplios debates en torno a políticas no
solo educativas, sino también intersectoriales. De hecho una infor-
mación importante que proveen los resultados de PISA está referida
a evaluar en qué medida los sistemas educativos están garantizando
una distribución equitativa de las oportunidades de aprendizaje.
En relación con este tema conviene recordar lo señalado por la UMC
(2002) a propósito de la participación del Perú por primera vez en la
Los programas
de capacitación
deberán ayudar al
docente a ampliar
sus concepciones
acerca de la lectura
y sus criterios para la
selección de textos y
preguntas adecuados
para desarrollar la
comprensión lectora de
los estudiantes.
De hecho una
información importante
que proveen los
resultados de PISA
está referida a evaluar
en qué medida los
sistemas educativos
están garantizando una
distribución equitativa
de las oportunidades de
aprendizaje.
01_28 PISA.indd 1501_28 PISA.indd 15 10/23/09 6:38:50 PM10/23/09 6:38:50 PM
16 Serie: La educación del futuro
evaluación PISA. En dicho artículo se identifican tres aportes rela-
cionados con el análisis y explicación de los factores que se asocian
con el logro de los estudiantes.
El primer aporte está referido al análisis comparativo de los resul-
tados del rendimiento entre países. Como señalan Ferrer y Arregui
(2003: 24), este análisis debe “conducir a preguntas clave sobre la
forma en que otros países logran mejores rendimientos estudiantiles
y sobre las condiciones bajo las cuales esos logros son posibles. Vale
recordar que una de las ventajas de las pruebas internacionales es
que pueden revelar información sobre los efectos diferenciales de
algunas variables sobre el logro de aprendizajes que no es posible
detectar en un estudio intranacional”. En efecto, la fuerza y la confi-
guración de los factores que se asocian al logro de los estudiantes no
se comporta de la misma forma en los distintos países.
El análisis de los factores asociados propiamente dichos puede
considerarse como un segundo aporte en tanto permite identificar
las variables específicas que están asociadas a los logros educativos
y a los contextos en los que dichas variables tienen los efectos más
significativos sobre el rendimiento en cada país. Así, por ejemplo, los
resultados de este estudio pueden dar cuenta de que en algunos paí-
ses la contribución de los recursos socioeconómicos en la educación
de los hijos no es tan importante como en otros.
El tercer aporte se refiere a la información complementaria que pue-
den brindar los estudios internacionales en relación con las evalua-
ciones nacionales en tanto permitan reforzar o discutir los ha-
llazgos que se encuentren en el contexto local. Al respecto, nos
interesa citar algunos ejemplos que muestran la información que
una evaluación como PISA puede brindar para ir acumulando un
mayor conocimiento sobre la realidad educativa.
En el estudio realizado por la UMC (2004a) sobre los factores asocia-
dos al rendimiento de los estudiantes peruanos evaluados en PISA en
comprensión lectora, se encontró que el 58% de la variabilidad del
desempeño de los estudiantes puede atribuirse a diferencias entre
escuelas, mientras el 42% restante a diferencias entre las caracterís-
ticas de los estudiantes al interior de la escuela. Es decir, el desempe-
ño en lectura de los estudiantes peruanos en PISA 2000+ estaría más
relacionado con aquellos aspectos propios de las escuelas a las que
asisten que a factores individuales o familiares de dichos estudian-
tes. Este hallazgo no deja de llamar la atención, pues en el estudio de
La información
complementaria que
pueden brindar los
estudios internacionales
en relación con las
evaluaciones nacionales
permitirá reforzar o
discutir los hallazgos
que se encuentren en el
contexto local.
01_28 PISA.indd 1601_28 PISA.indd 16 10/23/09 6:38:51 PM10/23/09 6:38:51 PM
17
Esta realidad evidencia
la necesidad de
establecer una política
que busque disminuir
la extraedad y, con
ello, incrementar la
probabilidad de que los
estudiantes culminen
sus estudios a tiempo.
factores asociados de la Evaluación Nacional 2004, se encontró que
más bien la mayor proporción de las diferencias en el rendimiento de
los estudiantes de quinto de secundaria en lectura se podría atribuir
a factores individuales (69%)23
. Esta evidencia, aunada a otras, in-
cluso llevaba a señalar que “mientras se avanza en el ciclo escolar las
diferencias atribuibles a los factores escolares tienden a disminuir en
tanto que las diferencias atribuibles a las características individuales
de los estudiantes se vuelven más importantes” (Miranda 2008: 18).
En todo caso, los resultados de PISA 2009 permitirán contar con
mayores elementos de juicio a este respecto.
En los análisis multivariados de los factores asociados al desempeño
de los estudiantes en lectura, matemática y ciencias realizados por la
UMC (2004a, 2004b), se ha encontrado de manera consistente que el
grado al que asiste el estudiante es el principal factor individual que
explica su logro académico en PISA. De esta manera, los estudiantes
en extraedad son quienes obtienen un desempeño más bajo en estas
áreas evaluadas. Esta realidad evidencia la necesidad de establecer
una política que busque disminuir la extraedad y, con ello, incre-
mentar la probabilidad de que los estudiantes culminen sus estudios
a tiempo.
Mejoramiento de herramientas de evaluación
Dado que en los últimos años se utilizan cada vez más los resulta-
dos que provienen de pruebas estandarizadas como indicadores de
calidad educativa, a pesar de los riesgos que ello involucra, resulta
fundamental no soslayar la importancia de mejorar continuamente
la calidad técnica de los instrumentos y de las metodologías usadas,
de manera que la información que se reporte sea lo más confiable
posible.
De hecho este fue uno de los objetivos cuando nuestro país decidió
participar en la evaluación PISA 2000+. En ese entonces se señaló
Importancia de PISA 2009
23 Es importante tener en cuenta, sin embargo, que mientras las evaluaciones
nacionales están centradas en la evaluación de un grado en particular, PISA
evalúa a una población etaria. Esta consideración debe estar teniendo algún
efecto en las estimaciones de las diferencias en el rendimiento atribuibles a
factores escolares e individuales. No obstante, los resultados de matemática en
PISA sí coinciden con los hallados en los estudios nacionales. Al respecto ver:
UMC 2004b.
“Mientras se avanza
en el ciclo escolar las
diferencias atribuibles
a los factores escolares
tienden a disminuir
en tanto que las
diferencias atribuibles
a las características
individuales de los
estudiantes se vuelven
más importantes”.
01_28 PISA.indd 1701_28 PISA.indd 17 10/23/09 6:38:51 PM10/23/09 6:38:51 PM
18 Serie: La educación del futuro
que el Perú podría aprender en muchos aspectos involucrados en el
quehacer evaluativo a gran escala; solo por citar algunos ejemplos:
la concepción de evaluación de la comprensión de textos, la inclu-
sión de diversos tipos de ítems, los planteamientos técnicos para la
calificación de las respuestas de los estudiantes a preguntas abiertas,
así como la utilización de métodos analíticos rigurosos para la inter-
pretación de la información. Sin olvidar que la “comparación de los
instrumentos que se utilizan para recoger información de factores
asociados puede permitirle al país incorporar inquietudes o propues-
tas que se van desarrollando en la investigación comparativa interna-
cional” (UMC 2002: 24).
Por esta razón, también consideramos que participar nuevamente en
PISA puede permitir seguir optimizando nuestro sistema de evalua-
ción en tanto dicho programa tiene una orientación clara al mejora-
miento continuo, sin perder de vista su compromiso de garantizar la
comparabilidad de los resultados a lo largo del tiempo.
Finalmente, esperamos que las ideas señaladas en el presente docu-
mento sirvan para contribuir a una mejor comprensión de los bene-
ficios que una evaluación como PISA puede aportar al país. Sin em-
bargo, esta participación solo tendrá sentido si la información que
brinda es analizada en su conjunto y es valorada en concordancia
con los propósitos que busca dicha evaluación, y, sobre todo, si es
utilizada de manera efectiva en los distintos niveles de decisión para
mejorar la calidad de los aprendizajes.
Bibliografía
BARBER, Michael y Mona MOURSHED
2008 “Cómo hicieron los sistemas educativos con mejor desempeño del mundo para
alcanzar sus objetivos”. Documentos PREAL. Santiago de Chile, número 41.
FERRER, Guillermo y Patricia ARREGUI
2003 “Las pruebas internacionales de aprendizaje en América Latina y su impacto en
la calidad de la educación: criterios para guiar futuras aplicaciones”. Documen-
tos PREAL. Santiago de Chile, número 26.
FORSTER, Margaret, G. MASTERS y K. ROWE
2002 “Measuring Learning Outcomes: Options and Challenges in Evaluation and
Performance Monitoring”. Material de enseñanza preparado para el Curso Op-
ciones Estratégicas para la Reforma Educativa del Instituto del Banco Mundial.
Consejo Australiano para la Investigación Educativa. Consulta: 2 de mayo del
2009.
Participar nuevamente
en PISA puede permitir
seguir optimizando
nuestro sistema de
evaluación en tanto
dicho programa tiene
una orientación clara al
mejoramiento continuo.
01_28 PISA.indd 1801_28 PISA.indd 18 10/23/09 6:38:52 PM10/23/09 6:38:52 PM
19
http://www.see.gob.do/sitesee/planificacion/documentos/Pagina%20OPE/Activi-
dades/Curso%20sobre%20Opciones%20Estrategicas%20para%20la%20Reform
a%20Educativa/presentations/Day3WednesdayApril25/ModuloIVunidadC.pdf>
KOVACS, Karen
2005 “Fortalezas y debilidades desde los datos duros”. Revista Mexicana de Investiga-
ción Educativa. México DF, volumen 10, número 24, pp. 267-275.
MIRANDA, Liliana
2008 “Factores asociados al rendimiento escolar y sus implicancias para la política
educativa del Perú”. En: BENAVIDES, Martín (editor). Análisis de programas,
procesos y resultados educativos en el Perú: contribuciones empíricas para el deba-
te. Lima, GRADE.
ORGANIZACIÓN PARA LA COOPERACIÓN Y EL DESARROLLO ECONÓMICO
(OCDE)
2003 Literacy Skills for the World of Tomorrow: Further Results from PISA 2000. París,
OECD.
2005 Informe PISA 2003. Aprender para el mundo del mañana. Madrid, OECD - Santi-
llana.
2006 Assessing Scientific, Reading and Mathematical Literacy: A Framework for PISA
2006. París, OECD.
2008a Reading Framework for PISA 2009 (Draft).
2008b PISA - The OECD Programme for International Student Assessment.
RAVELA, Pedro
2006 Fichas didácticas para comprender las evaluaciones educativas. Santiago de Chi-
le, PREAL.
RAVELA, Pedro y otros
2008 “Las evaluaciones educativas que America Latina necesita”. Documentos PREAL.
Santiago de Chile, número 40.
REIMERS, Fernando y Noel McGINN
1997 Informed Dialogue: Using Research to Shape Education Policy Around the World.
Nueva York, Praeger.
UNIDAD DE MEDICIÓN DE LA CALIDAD EDUCATIVA (UMC)
2002 “El Programa Internacional para la Evaluación de Estudiantes de la OCDE
(PISA) y la participación del Perú”. Boletín UMC. Lima, número 21.
2004a “Una aproximación a la alfabetización lectora de los estudiantes peruanos de 15
años. Resultados del Perú en la evaluación internacional PISA”. Documento de
trabajo No
6. Lima, UMC del Ministerio de Educación del Perú.
2004b “Una aproximación a la alfabetización matemática y científica de los estudiantes
peruanos de 15 años. Resultados del Perú en la evaluación internacional PISA”.
Documento de trabajo No
10. Lima, UMC del Ministerio de Educación del Perú.
2004c “La evaluación de la alfabetización lectora de PISA y el rendimiento de los estu-
diantes peruanos”. Documento de trabajo No
11. Lima, UMC del Ministerio de
Educación del Perú.
Importancia de PISA 2009
01_28 PISA.indd 1901_28 PISA.indd 19 10/23/09 6:38:52 PM10/23/09 6:38:52 PM
20 Serie: La educación del futuro
El texto que les presentamos a continuación es una trans-
cripción editada de las conferencias que Andreas Schleicher
diera el 20 de mayo del 2009 en Lima.
1. EL NUEVO GLOBAL TALENT POOL
EDUCACIONAL
Quiero comenzar mi presentación no mirando a PISA, sino viendo
en qué está el mundo: cómo el global talent pool1
está cambiando y
cómo ha mejorado la educación debido a estándares nacionales.
En el talent pool de los años sesenta, Estados Unidos ocupaba el pri-
mer lugar con calificaciones muy altas. En los años setenta, las cosas
empezaron a cambiar y algunos países, como Corea, empezaron a
progresar rápidamente durante las décadas siguientes. Se trata de un
proceso continuo, aunque desigual en los últimos treinta años. Algu-
nos países han mejorado tanto que el global talent pool ha cambiado.
Si Estados Unidos era el número 1, ahora es apenas el número 13,
no porque sus estándares hayan bajado, sino porque los estándares
en otros países han subido mucho más.
El mercado reclama nuevas competencias
No se trata de proveer al mercado de las calificaciones académicas y
profesionales tradicionales. En la medida en que el reto para el sis-
tema educativo es la calidad, la naturaleza de las habilidades de las
personas es importante para el desarrollo personal y la inserción en
el mundo del trabajo.
Lo que el Perú puede aprender
de los resultados comparados
de las pruebas PISA
El mercado reclama
nuevas competencias.
No se trata de
proveer al mercado
de las calificaciones
académicas y
profesionales
tradicionales.
1 Grupos de talentos globales de los egresados.
01_28 PISA.indd 2001_28 PISA.indd 20 10/23/09 6:38:53 PM10/23/09 6:38:53 PM
21
Las competencias “no
rutinarias analíticas”
están en crecimiento.
Se trata de la capacidad
para trabajar con la
mente, de manera
menos predecible
y extrapolando los
conocimientos y
aplicándolos a nuevas
situaciones.
El gráfico 1 permite ver lo que está pasando con las competencias. Las
“rutinarias manuales” son menos demandadas debido a la indus-
trialización, la digitalización y el outsourcing. Las competencias “no
rutinarias manuales” tienen una demanda estable y no son fáciles
de automatizar ni tercerizar.
Las competencias “rutinarias cognitivas” son las que tienen que ver
con la reproducción del contenido de un curso. En el gráfico se puede
apreciar que son las competencias que han mostrado una caída más
grande en el mercado. Las competencias “no rutinarias analíticas”
están en crecimiento. Se trata de la capacidad para trabajar con la
mente, de manera menos predecible y extrapolando los conocimien-
tos y aplicándolos a nuevas situaciones.
Hay un nuevo tipo de competencias que PISA todavía no puede me-
dir. Las “no rutinarias interactivas”, que no son transculturales y
que tienen una importancia creciente. Se refieren a la forma como se
interactúa con las personas en el trabajo y la vida diaria.
Gráfico 1: Cómo está cambiando
la demanda de competencias
PISA: Lo que el Perú puede aprender
01_28 PISA.indd 2101_28 PISA.indd 21 10/29/09 11:00:04 AM10/29/09 11:00:04 AM
22 Serie: La educación del futuro
2. EL DISEÑO DE PISA: EVALUAR
COMPETENCIAS PARA EL DESEMPEÑO
EN LA VIDA
PISA nos informa de los resultados que obtienen los siste-
mas educativos al adecuar los aprendizajes a las necesida-
des del mundo globalizado y mejorar la calidad educativa.
También nos facilita el análisis comparativo de los datos
que nos permitirán obtener conclusiones y tomar decisio-
nes para mejorar nuestro sistema educativo. En este marco
es importante preguntarnos si el enfoque de PISA abarca la
totalidad de la intención educativa, si tiene en cuenta “el
aprender a ser y a convivir” y no solo “el saber y el hacer”.
Cuando diseñamos PISA, sentimos que si nos centrábamos en lo que
se supone que los estudiantes han aprendido, estaríamos mirando al
pasado. Entonces pensamos en lo que se necesitaría saber para el fu-
turo, y descubrimos que era evaluar la capacidad de los estudiantes
para extrapolar lo que han aprendido y aplicar sus conocimientos y
habilidades en nuevos contextos.
Es una evaluación que se realiza cada tres años para examinar el
rendimiento de los estudiantes a los 15 años de edad. Las áreas clave
de la evaluación son la comprensión lectora, la matemática, las cien-
cias y las competencias transcurriculares. También se recoge infor-
mación sobre otros resultados educativos, tales como las actitudes
y estrategias de aprendizaje de los estudiantes; datos contextuales
vinculados a la realidad socioeconómica, a las escuelas, a los padres,
y a los sistemas educativos.
Gráfico 2: Decidir qué evaluar
Pensamos en lo que
se necesitaría saber
para el futuro, y
descubrimos que era
evaluar la capacidad
de los estudiantes para
extrapolar lo que han
aprendido y aplicar
sus conocimientos y
habilidades en nuevos
contextos.
Las áreas clave de
la evaluación son la
comprensión lectora, la
matemática, las ciencias
y las competencias
transcurriculares.
01_28 PISA.indd 2201_28 PISA.indd 22 10/23/09 6:38:54 PM10/23/09 6:38:54 PM
23
PISA no evalúa lo que los alumnos aprenden
en la escuela. ¿Por qué no evalúa el
currículo?
Muchas personas dicen que PISA examina a los estudiantes en cosas
que no han hecho antes o que no han estudiado en el colegio, y que
eso es injusto. Se olvidan que el día en que los estudiantes salgan
del colegio tendrán problemas que nunca han visto antes y deberán
enfrentarse a cosas nuevas.
El concepto de competencia en PISA
El estudiante puede saber muchas cosas, pero si no puede movilizar
el conocimiento en un contexto específico, si no puede combinar el
conocimiento con el compromiso y con un buen juicio, entonces el
conocimiento está muerto. Las competencias y el conocimiento no
están en un mundo exacto, se aplican en contextos personales, pú-
blicos o sociales.
Las competencias que evalúa PISA no se relacionan mucho con las
competencias de los currículos nacionales, no es su intención. PISA
no está diseñada para suplir una evaluación nacional.
Analizando y comparando resultados
Lo que se puede ver al analizar los resultados de la prueba2
es que los
países varían mucho en las diferentes capacidades. Lo interesante es
que no es determinante el criterio geopolítico. Entre los que tienen
resultados más altos están Nueva Zelanda, Finlandia y el Reino Uni-
do, también Australia, Japón, Canadá y Corea del Sur.
Las comparaciones internacionales les dan a los países una idea de
las fortalezas y debilidades relativas de lo que se está haciendo en
cada uno de ellos. Después de la comparación, cambiará la mirada
que dará a su propio currículo, a lo que están aprendiendo sus estu-
diantes y lo que hay en el entorno o en el contexto cultural.
PISA: Lo que el Perú puede aprender
2 La referencia es a la prueba del 2006.
El estudiante puede
saber muchas
cosas, pero si no
puede movilizar
el conocimiento
en un contexto
específico, entonces
el conocimiento está
muerto.
Las comparaciones
internacionales les
dan a los países una
idea de las fortalezas y
debilidades relativas de
lo que se está haciendo
en cada uno de ellos.
01_28 PISA.indd 2301_28 PISA.indd 23 10/23/09 6:38:55 PM10/23/09 6:38:55 PM
24 Serie: La educación del futuro
Los conocimientos
adquiridos a través de
las evaluaciones PISA
nos permiten decir que
el dinero es importante,
pero constituye solo el
28% de las diferencias
en desempeño.
3. LA INVERSIÓN EN EDUCACIÓN Y
OTRAS VARIABLES SOCIOECONÓMICAS
Los análisis de los resultados PISA proporcionan una serie
de datos que, al ser analizados, nos suministran informa-
ción importante para la elaboración de políticas educativas
que lleven a la mejora de la calidad con equidad.
La inversión en educación
Lo primero que la gente tiene en la mente cuando piensa en mejorar
la educación, o en las fórmulas de los países exitosos, es dinero y
recursos. Los conocimientos adquiridos a través de las evaluaciones
PISA nos permiten decir que el dinero es importante, pero cons-
tituye solo el 28% de las diferencias en desempeño. Hay muchos
países pobres a los que les va bien y muchos países ricos que les
va mal. En el gráfico siguiente se observan los recursos invertidos y
los resultados obtenidos. Aunque son solo datos de los países de la
OCDE, podemos extrapolar esta información al resto de los países.
Algunos países no están gastando mucho en educación, pero tie-
nen excelentes resultados: Finlandia y Corea del Sur, por ejemplo.
Pueden ver que otros países como Noruega y Estados Unidos tienen
fuertes inversiones y no logran resultados tan buenos. Los países to-
man diferentes opciones. En Corea se gastan muchos recursos en
pagar bien a los maestros, pues quieren tener a los mejores maestros.
Otro factor importante es el tiempo de instrucción, si tienes más días
de escuela, o días de escuela más largos, vas a gastar más. Corea no
Gráfico 3: Recursos invertidos
y resultados en evaluación
Corea no solo les paga
bien a sus profesores,
sino que tiene más
tiempo de enseñanza.
También les da más
tiempo para interactuar
entre ellos e invierte
en su desarrollo
profesional.
01_28 PISA.indd 2401_28 PISA.indd 24 10/23/09 6:38:55 PM10/23/09 6:38:55 PM
25
solo les paga bien a sus profesores, sino que tiene más tiempo de
enseñanza. También les da más tiempo para interactuar entre ellos e
invierte en su desarrollo profesional.
Diferencias socioeconómicas y estratificación
En muchos países existe un fuerte impacto de las condiciones so-
cioeconómicas en el rendimiento del alumno, pero en otros países
esta variable no es tan importante. Los resultados de PISA nos mues-
tran que muchos países tienen éxito en amortiguar esas condiciones
sociales, logrando minimizar su impacto. En el mundo hay muchas
discusiones sobre el tema de las diferencias socioeconómicas y su
relación con la calidad y equidad de la educación. En PISA hemos
podido apreciar que hay algunos países que logran resultados alen-
tadores y reducen la inequidad al mismo tiempo.
4. LA IMPORTANCIA DEL ALTO NIVEL DE
LOGROS Y DEL ACOMPAÑAMIENTO
PERSONALIZADO A LOS ESTUDIANTES
El alto nivel de logros y el acompañamiento personalizado,
factores fundamentales para la mejora de la calidad educa-
tiva, no se conseguirán si es que el sistema no garantiza la
autonomía de las instituciones educativas y la idoneidad de
los docentes.
Los sistemas con mejor desempeño son los que tienen altas expecta-
tivas de logros y un fuerte acompañamiento a los estudiantes. Cuan-
do hablamos de expectativas altas, nos referimos a las metas y a los
estándares, no a las notas. Hay países a los que les va bien en térmi-
nos de notas, pero no en logros de aprendizaje. Que las escuelas y los
docentes tengan alto nivel de responsabilidad por el desempeño de
sus estudiantes da muy buenos resultados.
La calidad de los docentes
La calidad de un sistema educativo no puede exceder la calidad de
sus maestros. Una de las características más importantes de los
sistemas educativos más exitosos es la calidad de sus maestros.
PISA: Lo que el Perú puede aprender
Los sistemas con mejor
desempeño son los que
tienen altas expectativas
de logros y un fuerte
acompañamiento a los
estudiantes.
01_28 PISA.indd 2501_28 PISA.indd 25 10/23/09 6:38:56 PM10/23/09 6:38:56 PM
26 Serie: La educación del futuro
La calidad de un sistema
educativo no puede
exceder la calidad de
sus maestros. Una de
las características más
importantes de los
sistemas educativos más
exitosos es la calidad de
sus maestros.
Es muy fácil hacer un
test como PISA. El
punto es cómo usar
la información para
mejorar la educación.
Es necesario buscar a los maestros entre las mejores personas del
país. En Finlandia, por ejemplo, todos quieren ser docentes, y no
por un tema de sueldos, si no porque es una profesión atractiva, con
futuro y prestigio social.
Los sistemas educativos tienen que volver a pensar el equilibrio en-
tre la formación inicial y la formación en servicio. Si no se cambia
la forma en que los profesores actualmente enseñan y aprenden, va
a ser muy difícil cambiar los resultados. Se requieren sistemas de
incentivos y, seguramente, también de sanciones para mejorar su
desempeño.
5. LAS PRUEBAS PISA EN EL PERÚ
Este año el Perú vuelve a las pruebas PISA, participaremos
después de haber estado ausentes en los años 2003 y 2006.
¿Qué haremos con los resultados? ¿Nos servirán para to-
mar decisiones?
Es muy fácil hacer un test como PISA. El punto es cómo usar la in-
formación para mejorar la educación. Cuando tengan en sus manos
los resultados de la aplicación de PISA, recordemos que la mejora de
la calidad depende fundamentalmente de dos factores: el primero es
el tipo de sistema, y el otro son los factores que operan en el aula.
Los otros factores son la infraestructura, el financiamiento de la edu-
cación, actores claves en la educación, el capital humano dado por
el nivel de calidad de los profesores, el contexto de cómo dividir las
Gráfico 4: Retos y apoyos
01_28 PISA.indd 2601_28 PISA.indd 26 10/23/09 6:38:56 PM10/23/09 6:38:56 PM
27
responsabilidades, el currículo y la evaluación. Todos estos factores
también influyen en los resultados.
En temas como descentralización quisiera tener un poco de precau-
ción. Tenemos ejemplos donde la descentralización de la educación
ha significado realmente descentralización de la burocracia. Incluso
hay muchos sistemas educativos que les va bien ahora que han cen-
tralizado algunos aspectos, tales como estándares y currículo.
PISA nos da información sobre lo que hacen los demás países, pero
no nos invita a “copiar y pegar” los sistemas educativos de otros paí-
ses. Lo que es recomendable hacer es ver, comparativamente, cuáles
son las políticas que están detrás del éxito y cómo se puede configurar
este tipo de políticas que les permitieron mejorar o crear un nuevo
sistema educativo. Las principales referencias comparativas deben
ser los países cercanos cultural, geográfica y socioeconómicamente.
PISA: Lo que el Perú puede aprender
PISA nos da información
sobre lo que hacen los
demás países, pero no
nos invita a “copiar
y pegar” los sistemas
educativos de otros
países.
Gráfico 5: Posicionando al Perú
01_28 PISA.indd 2701_28 PISA.indd 27 10/23/09 6:38:57 PM10/23/09 6:38:57 PM
© 2009, Santillana S.A.
Santillana S.A.
Av. Primavera 2160, Santiago de Surco, Lima 33 - Perú
Teléfono: 313-4000 / Fax: 313-4001
Coeditor: Consejo Nacional de Educación
Primera edición: octubre del 2009
Tiraje: 3000 ejemplares
Impreso en el Perú - Printed in Peru
Corporación Gráfica GRAMBS
Av. José Gálvez No
1216 Santa Beatriz, Lima 1 - Perú
ISBN 978-9972-37-446-3
Registro de Proyecto Editorial No
2150140009000818
Hecho el Depósito Legal en la Biblioteca Nacional del Perú No
2009-13505
DISTRIBUCIÓN GRATUITA
Todos los derechos reservados. Esta publicación no puede ser reproducida, ni en todo ni en parte,
ni registrada o transmitida por un sistema de recuperación de información, en ninguna forma
y por ningún medio, sea mecánico, fotoquímico, electrónico, magnético, electroóptico, por fotocopia,
o cualquier otro, sin el permiso previo de la Editorial.
01_28 PISA.indd 2801_28 PISA.indd 28 10/23/09 6:38:58 PM10/23/09 6:38:58 PM

Más contenido relacionado

La actualidad más candente

La actualidad más candente (15)

Estandares educacion implicancias aplicacion AMERICA LATINA
Estandares educacion  implicancias aplicacion AMERICA LATINAEstandares educacion  implicancias aplicacion AMERICA LATINA
Estandares educacion implicancias aplicacion AMERICA LATINA
 
Uso de resultado de evaluaciones
Uso de resultado de evaluacionesUso de resultado de evaluaciones
Uso de resultado de evaluaciones
 
Brayan
BrayanBrayan
Brayan
 
Rev81 art2
Rev81 art2Rev81 art2
Rev81 art2
 
Matematicas
MatematicasMatematicas
Matematicas
 
Documento sustentos pta (2013 01-11)
Documento sustentos pta (2013 01-11)Documento sustentos pta (2013 01-11)
Documento sustentos pta (2013 01-11)
 
Nacer díaz cuadro_actividad1.2.doc
Nacer díaz cuadro_actividad1.2.docNacer díaz cuadro_actividad1.2.doc
Nacer díaz cuadro_actividad1.2.doc
 
Aulas virtuales
Aulas virtualesAulas virtuales
Aulas virtuales
 
Avances y desafios en la evaluacion educativa
Avances y desafios en la evaluacion educativaAvances y desafios en la evaluacion educativa
Avances y desafios en la evaluacion educativa
 
Planea 4
Planea 4Planea 4
Planea 4
 
Estandares de aprendizaje
Estandares de aprendizajeEstandares de aprendizaje
Estandares de aprendizaje
 
Profesionalización y capacitación docente (Juan Carlos Tedesco)
Profesionalización y capacitación docente (Juan Carlos Tedesco)Profesionalización y capacitación docente (Juan Carlos Tedesco)
Profesionalización y capacitación docente (Juan Carlos Tedesco)
 
La educación superior en el siglo XXI ANUIES
 La educación superior en el siglo XXI ANUIES La educación superior en el siglo XXI ANUIES
La educación superior en el siglo XXI ANUIES
 
EXÁMENES PISA
EXÁMENES PISAEXÁMENES PISA
EXÁMENES PISA
 
b) PESEM 2016-2021
b) PESEM 2016-2021b) PESEM 2016-2021
b) PESEM 2016-2021
 

Similar a Pisa peru

Avances y-desafios-en-la-evaluacion-educativa
Avances y-desafios-en-la-evaluacion-educativaAvances y-desafios-en-la-evaluacion-educativa
Avances y-desafios-en-la-evaluacion-educativaCucoQuinteroquintero
 
Ensayo critico evaluacion del aprendizaje
Ensayo critico evaluacion del aprendizajeEnsayo critico evaluacion del aprendizaje
Ensayo critico evaluacion del aprendizajeluciavanegas3
 
Programa pisa de la ocde
Programa pisa de la ocdePrograma pisa de la ocde
Programa pisa de la ocdeEditorial MD
 
Evaluacion PISA
Evaluacion PISAEvaluacion PISA
Evaluacion PISAcamila
 
Políticas Publicas Sector Educación ccesa007
Políticas Publicas  Sector Educación  ccesa007Políticas Publicas  Sector Educación  ccesa007
Políticas Publicas Sector Educación ccesa007Demetrio Ccesa Rayme
 
Entregable2
Entregable2Entregable2
Entregable208021360
 
Estado de la educación en el Perú - Parte II
Estado de la educación en el Perú - Parte IIEstado de la educación en el Perú - Parte II
Estado de la educación en el Perú - Parte IILalo Vásquez Machicao
 
Sistemas de evaluacion
Sistemas de evaluacionSistemas de evaluacion
Sistemas de evaluacionLuis Perez
 
Los sistemas de medición y evaluación de la calidad de la educación
Los sistemas de medición y evaluación de la calidad de la educaciónLos sistemas de medición y evaluación de la calidad de la educación
Los sistemas de medición y evaluación de la calidad de la educaciónYahith Gomez
 
Análisis critico de evaluaciones muestrales
Análisis critico de evaluaciones muestralesAnálisis critico de evaluaciones muestrales
Análisis critico de evaluaciones muestralesjean Zapata Rojas
 
Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)
Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)
Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)Babinton Ripoll Montiel
 
EL DIRECTOR EN LA ESCUELA
EL DIRECTOR EN LA ESCUELA EL DIRECTOR EN LA ESCUELA
EL DIRECTOR EN LA ESCUELA Francisco Chavez
 
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...Teresa Clotilde Ojeda Sánchez
 
EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...
EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...
EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...hogar
 
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...Teresa Clotilde Ojeda Sánchez
 

Similar a Pisa peru (20)

Avances y-desafios-en-la-evaluacion-educativa
Avances y-desafios-en-la-evaluacion-educativaAvances y-desafios-en-la-evaluacion-educativa
Avances y-desafios-en-la-evaluacion-educativa
 
Ensayo critico evaluacion del aprendizaje
Ensayo critico evaluacion del aprendizajeEnsayo critico evaluacion del aprendizaje
Ensayo critico evaluacion del aprendizaje
 
Programa PISA de la OCDE
Programa PISA de la OCDEPrograma PISA de la OCDE
Programa PISA de la OCDE
 
Programa pisa de la ocde
Programa pisa de la ocdePrograma pisa de la ocde
Programa pisa de la ocde
 
Evaluacion PISA
Evaluacion PISAEvaluacion PISA
Evaluacion PISA
 
Pisa
PisaPisa
Pisa
 
Sobre la Reforma
Sobre la ReformaSobre la Reforma
Sobre la Reforma
 
Políticas Publicas Sector Educación ccesa007
Políticas Publicas  Sector Educación  ccesa007Políticas Publicas  Sector Educación  ccesa007
Políticas Publicas Sector Educación ccesa007
 
Entregable2
Entregable2Entregable2
Entregable2
 
Estado de la educación en el Perú - Parte II
Estado de la educación en el Perú - Parte IIEstado de la educación en el Perú - Parte II
Estado de la educación en el Perú - Parte II
 
Pisa
PisaPisa
Pisa
 
Sistemas de evaluacion
Sistemas de evaluacionSistemas de evaluacion
Sistemas de evaluacion
 
Los sistemas de medición y evaluación de la calidad de la educación
Los sistemas de medición y evaluación de la calidad de la educaciónLos sistemas de medición y evaluación de la calidad de la educación
Los sistemas de medición y evaluación de la calidad de la educación
 
Análisis critico de evaluaciones muestrales
Análisis critico de evaluaciones muestralesAnálisis critico de evaluaciones muestrales
Análisis critico de evaluaciones muestrales
 
Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)
Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)
Analizarel contextoparaobtenerelmaximobeneficiodela 3960091 (1)
 
EL DIRECTOR EN LA ESCUELA
EL DIRECTOR EN LA ESCUELA EL DIRECTOR EN LA ESCUELA
EL DIRECTOR EN LA ESCUELA
 
Rol director
Rol directorRol director
Rol director
 
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
 
EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...
EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...
EL ROL DEL DIRECTOR EN LA ESCUELA: EL LIDERAZGO PEDAGÓGICO Y SU INCIDENCIA SO...
 
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
El rol del director en la escuela: el liderazgo pedagógico y su incidencia so...
 

Último

RAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIA
RAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIARAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIA
RAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIACarlos Campaña Montenegro
 
Planificacion Anual 4to Grado Educacion Primaria 2024 Ccesa007.pdf
Planificacion Anual 4to Grado Educacion Primaria   2024   Ccesa007.pdfPlanificacion Anual 4to Grado Educacion Primaria   2024   Ccesa007.pdf
Planificacion Anual 4to Grado Educacion Primaria 2024 Ccesa007.pdfDemetrio Ccesa Rayme
 
Caja de herramientas de inteligencia artificial para la academia y la investi...
Caja de herramientas de inteligencia artificial para la academia y la investi...Caja de herramientas de inteligencia artificial para la academia y la investi...
Caja de herramientas de inteligencia artificial para la academia y la investi...Lourdes Feria
 
DE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.ppt
DE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.pptDE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.ppt
DE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.pptELENA GALLARDO PAÚLS
 
DECÁGOLO DEL GENERAL ELOY ALFARO DELGADO
DECÁGOLO DEL GENERAL ELOY ALFARO DELGADODECÁGOLO DEL GENERAL ELOY ALFARO DELGADO
DECÁGOLO DEL GENERAL ELOY ALFARO DELGADOJosé Luis Palma
 
TEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOS
TEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOSTEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOS
TEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOSjlorentemartos
 
Identificación de componentes Hardware del PC
Identificación de componentes Hardware del PCIdentificación de componentes Hardware del PC
Identificación de componentes Hardware del PCCesarFernandez937857
 
SELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdf
SELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdfSELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdf
SELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdfAngélica Soledad Vega Ramírez
 
Herramientas de Inteligencia Artificial.pdf
Herramientas de Inteligencia Artificial.pdfHerramientas de Inteligencia Artificial.pdf
Herramientas de Inteligencia Artificial.pdfMARIAPAULAMAHECHAMOR
 
La Función tecnológica del tutor.pptx
La  Función  tecnológica  del tutor.pptxLa  Función  tecnológica  del tutor.pptx
La Función tecnológica del tutor.pptxJunkotantik
 
GLOSAS Y PALABRAS ACTO 2 DE ABRIL 2024.docx
GLOSAS  Y PALABRAS ACTO 2 DE ABRIL 2024.docxGLOSAS  Y PALABRAS ACTO 2 DE ABRIL 2024.docx
GLOSAS Y PALABRAS ACTO 2 DE ABRIL 2024.docxAleParedes11
 
Planificacion Anual 2do Grado Educacion Primaria 2024 Ccesa007.pdf
Planificacion Anual 2do Grado Educacion Primaria   2024   Ccesa007.pdfPlanificacion Anual 2do Grado Educacion Primaria   2024   Ccesa007.pdf
Planificacion Anual 2do Grado Educacion Primaria 2024 Ccesa007.pdfDemetrio Ccesa Rayme
 
texto argumentativo, ejemplos y ejercicios prácticos
texto argumentativo, ejemplos y ejercicios prácticostexto argumentativo, ejemplos y ejercicios prácticos
texto argumentativo, ejemplos y ejercicios prácticosisabeltrejoros
 
RETO MES DE ABRIL .............................docx
RETO MES DE ABRIL .............................docxRETO MES DE ABRIL .............................docx
RETO MES DE ABRIL .............................docxAna Fernandez
 
Lecciones 04 Esc. Sabática. Defendamos la verdad
Lecciones 04 Esc. Sabática. Defendamos la verdadLecciones 04 Esc. Sabática. Defendamos la verdad
Lecciones 04 Esc. Sabática. Defendamos la verdadAlejandrino Halire Ccahuana
 

Último (20)

RAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIA
RAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIARAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIA
RAIZ CUADRADA Y CUBICA PARA NIÑOS DE PRIMARIA
 
Planificacion Anual 4to Grado Educacion Primaria 2024 Ccesa007.pdf
Planificacion Anual 4to Grado Educacion Primaria   2024   Ccesa007.pdfPlanificacion Anual 4to Grado Educacion Primaria   2024   Ccesa007.pdf
Planificacion Anual 4to Grado Educacion Primaria 2024 Ccesa007.pdf
 
Caja de herramientas de inteligencia artificial para la academia y la investi...
Caja de herramientas de inteligencia artificial para la academia y la investi...Caja de herramientas de inteligencia artificial para la academia y la investi...
Caja de herramientas de inteligencia artificial para la academia y la investi...
 
DE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.ppt
DE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.pptDE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.ppt
DE LAS OLIMPIADAS GRIEGAS A LAS DEL MUNDO MODERNO.ppt
 
Power Point: "Defendamos la verdad".pptx
Power Point: "Defendamos la verdad".pptxPower Point: "Defendamos la verdad".pptx
Power Point: "Defendamos la verdad".pptx
 
DECÁGOLO DEL GENERAL ELOY ALFARO DELGADO
DECÁGOLO DEL GENERAL ELOY ALFARO DELGADODECÁGOLO DEL GENERAL ELOY ALFARO DELGADO
DECÁGOLO DEL GENERAL ELOY ALFARO DELGADO
 
TEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOS
TEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOSTEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOS
TEMA 13 ESPAÑA EN DEMOCRACIA:DISTINTOS GOBIERNOS
 
Identificación de componentes Hardware del PC
Identificación de componentes Hardware del PCIdentificación de componentes Hardware del PC
Identificación de componentes Hardware del PC
 
La Trampa De La Felicidad. Russ-Harris.pdf
La Trampa De La Felicidad. Russ-Harris.pdfLa Trampa De La Felicidad. Russ-Harris.pdf
La Trampa De La Felicidad. Russ-Harris.pdf
 
Repaso Pruebas CRECE PR 2024. Ciencia General
Repaso Pruebas CRECE PR 2024. Ciencia GeneralRepaso Pruebas CRECE PR 2024. Ciencia General
Repaso Pruebas CRECE PR 2024. Ciencia General
 
SELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdf
SELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdfSELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdf
SELECCIÓN DE LA MUESTRA Y MUESTREO EN INVESTIGACIÓN CUALITATIVA.pdf
 
Herramientas de Inteligencia Artificial.pdf
Herramientas de Inteligencia Artificial.pdfHerramientas de Inteligencia Artificial.pdf
Herramientas de Inteligencia Artificial.pdf
 
La Función tecnológica del tutor.pptx
La  Función  tecnológica  del tutor.pptxLa  Función  tecnológica  del tutor.pptx
La Función tecnológica del tutor.pptx
 
GLOSAS Y PALABRAS ACTO 2 DE ABRIL 2024.docx
GLOSAS  Y PALABRAS ACTO 2 DE ABRIL 2024.docxGLOSAS  Y PALABRAS ACTO 2 DE ABRIL 2024.docx
GLOSAS Y PALABRAS ACTO 2 DE ABRIL 2024.docx
 
Planificacion Anual 2do Grado Educacion Primaria 2024 Ccesa007.pdf
Planificacion Anual 2do Grado Educacion Primaria   2024   Ccesa007.pdfPlanificacion Anual 2do Grado Educacion Primaria   2024   Ccesa007.pdf
Planificacion Anual 2do Grado Educacion Primaria 2024 Ccesa007.pdf
 
Defendamos la verdad. La defensa es importante.
Defendamos la verdad. La defensa es importante.Defendamos la verdad. La defensa es importante.
Defendamos la verdad. La defensa es importante.
 
texto argumentativo, ejemplos y ejercicios prácticos
texto argumentativo, ejemplos y ejercicios prácticostexto argumentativo, ejemplos y ejercicios prácticos
texto argumentativo, ejemplos y ejercicios prácticos
 
Sesión de clase: Defendamos la verdad.pdf
Sesión de clase: Defendamos la verdad.pdfSesión de clase: Defendamos la verdad.pdf
Sesión de clase: Defendamos la verdad.pdf
 
RETO MES DE ABRIL .............................docx
RETO MES DE ABRIL .............................docxRETO MES DE ABRIL .............................docx
RETO MES DE ABRIL .............................docx
 
Lecciones 04 Esc. Sabática. Defendamos la verdad
Lecciones 04 Esc. Sabática. Defendamos la verdadLecciones 04 Esc. Sabática. Defendamos la verdad
Lecciones 04 Esc. Sabática. Defendamos la verdad
 

Pisa peru

  • 1. Autores: Liliana Miranda Andreas Schleicher Coordinación editorial: Rosa María de los Heros Colaboración: Francisco Marcone Diseño y carátula: Rafael Moy Diagramación: Liliana Baluarte Corrección de estilo: Hugo Melo Fotografía de carátula: Cortesía Consejo Nacional de Educación SERIE:LAEDUCACIÓNDELFUTURO La educación peruana en el contexto de PISA 01_28 PISA.indd 101_28 PISA.indd 1 10/23/09 6:38:40 PM10/23/09 6:38:40 PM
  • 2. ÍNDICE PISA 2009: Su importancia para el Perú y su contribución a la mejora de las formas de monitorear y evaluar la educación peruana 3 Lo que el Perú puede aprender de los resultados comparados de las pruebas PISA 20 El Consejo Nacional de Educación (CNE) y el Grupo Santillana tienen el agrado de poner en sus manos el segundo fascículo de la serie: La educación del futuro. Con motivo de la aplicación de las pruebas del Programa Interna- cional para la Evaluación de Estudiantes (PISA), el CNE y la Fun- dación Santillana, con la colaboración de AprenDes/USAID, hicie- ron posible la presencia en Lima de Andreas Schleicher, Jefe de la División de Evaluación de la Organización para la Cooperación y Desarrollo Económico (OCDE) y responsable de las pruebas PISA. La medición de la calidad educativa es uno de los principales temas en la agenda educativa mundial en los últimos 20 años. Los técni- cos y los responsables de la educación de cada país han ido toman- do conciencia de la necesidad e importancia de evaluar los sistemas educativos y los niveles de aprendizaje de los estudiantes. La prueba PISA, la más conocida internacionalmente, está siendo aplicada el 2009 a adolescentes de más de 60 países. Esta es la segunda vez en la que participa el Perú, y el área principal de la evaluación es la comprensión lectora, tal como ocurrió en el 2000 y 2001. Los artículos seleccionados para esta edición nos ayudarán a co- nocer de qué manera los resultados de las pruebas PISA pueden ayudar a la educación en nuestro país. Las opiniones expresadas en este texto son responsabilidad de los autores y no comprometen al Consejo Nacional de Educación. Xxx Xxx 01_28 PISA.indd 201_28 PISA.indd 2 10/23/09 6:38:43 PM10/23/09 6:38:43 PM
  • 3. 3 En las dos últimas décadas, el número de países que par- ticipa en evaluaciones internacionales de logro educativo para obtener información sobre el diseño y mejora de sus políticas educativas ha ido aumentando significativamente. Sin embargo, esta participación es uno de los temas más controvertidos en el campo educativo2 , en tanto que el valor y validez de este tipo de evaluaciones es aún materia de in- tensas discusiones en los medios académicos (Ferrer y Arre- gui 2003). No obstante, a pesar de estos cuestionamientos, consideramos que la participación en los estudios internacionales de logros académicos serios y rigurosos puede jugar un rol crucial en el mejoramiento de los sistemas educativos y en las prácticas de enseñanza-aprendizaje si esas evaluaciones son entendidas como una oportunidad para ob- tener información que pueda proveer elementos de juicio a quienes toman decisiones. Aun cuando Reimers y McGinn (1997) ya nos han alertado que la relación entre información y toma de decisión dista de ser inmediata, los análisis y resultados que provienen de las compa- raciones internacionales pueden ayudar a fundamentar ciertas opcio- nes de política durante el proceso de debate y negociación de esta. PISA 2009: Su importancia para el Perú y su contribución a la mejora de las formas de monitorear y evaluar la educación peruana La participación en los estudios internacionales de logros académicos serios y rigurosos puede jugar un rol crucial en el mejoramiento de los sistemas educativos y en las prácticas de enseñanza-aprendizaje. Importancia de PISA 2009 Liliana Miranda M.1 1 Jefa de la Unidad de Medición de la Calidad Educativa del Ministerio de Edu- cación. Coordinadora Nacional del Programa Internacional para la Evaluación de Estudiantes (PISA). La autora agradece las sugerencias y comentarios de Alfredo Altamirano y An- drés Burga. 2 Esta controversia se acentúa en el caso de los países que cuentan con pobla- ciones lingüística y culturalmente diversas, en tanto entran a tallar adicional- mente cuestiones relativas a la pertinencia cultural de los instrumentos utiliza- dos para estos países. 01_28 PISA.indd 301_28 PISA.indd 3 10/23/09 6:38:43 PM10/23/09 6:38:43 PM
  • 4. 4 Serie: La educación del futuro Si bien es comprensible que la participación en evaluaciones interna- cionales genere expectativas de los distintos actores involucrados en el quehacer educativo, es importante recordar que las evaluaciones –sean de carácter nacional o internacional–, al igual que cualquier estudio de investigación, no pueden responder a múltiples propósi- tos. Una sola evaluación no puede atender a todas las demandas de información. El objetivo y el uso de los resultados definen en gran medida el diseño y las exigencias metodológicas y técnicas que cada evaluación requiere (Ravela y otros 2008). Un buen sistema de eva- luación debe definir claramente las preguntas que busca responder y los usos que se pretende dar a sus resultados, y por lo tanto, el valor de la evaluación debe ser juzgado en dichos términos3 . En este sentido, un sistema de evaluación debe buscar ofrecer infor- mación complementaria a través de los distintos estudios que lleve a cabo –que pueden responder a distintos propósitos– de acuerdo con lo que se espera de él. De allí que consideramos fundamental evaluar cuidadosamente la participación en estudios internaciona- les, de manera que estos aporten información relevante y adicional a la acopiada a través de evaluaciones nacionales. El presente artículo busca aportar a la reflexión y discusión sobre los beneficios que conlleva la participación del Perú en PISA desde la con- vicción de que puede contribuir al mejoramiento de nuestro sistema educativo. Esto es, si esta participación es comprendida y valorada en términos de los propósitos que ella busca, y sus resultados son usados desde una visión de responsabilidad compartida en relación con la educación, con una orientación fuerte para apoyar a los actores educativos en sus tareas –especialmente a los directores y docentes– y una manifiesta voluntad política en los distintos niveles de decisión de encarar acciones dirigidas a resolver los problemas y deficiencias que la evaluación ponga de manifiesto (Ravela y otros 2008). Evaluaciones del rendimiento estudiantil A mediados de la década de 1990, en nuestro país, al igual que en la mayoría de los países de la región, se inició el desarrollo del sistema de evaluación del rendimiento estudiantil. Desde entonces, el Minis- Un buen sistema de evaluación debe definir claramente las preguntas que busca responder y los usos que se pretende dar a sus resultados. 3 Es importante tener en cuenta que esto reduce las tensiones y dilemas que enfrentan los sistemas de evaluación, pero no los desaparece del todo. Un sistema de evaluación debe buscar ofrecer información complementaria a través de los distintos estudios que lleve a cabo. 01_28 PISA.indd 401_28 PISA.indd 4 10/23/09 6:38:44 PM10/23/09 6:38:44 PM
  • 5. 5 terio de Educación, a través de la Unidad de Medición de la Calidad Educativa (UMC), ha llevado a cabo diversas evaluaciones naciona- les e internacionales. En el transcurso de estos años, los propósitos y características del sistema de evaluación se han ido redefiniendo, atendiendo no solo a los cambios del propio sistema educativo y a las demandas de los diferentes actores que intervienen en él, sino también al proceso de descentralización que se viene desarrollando en el país4 . Actualmente, el sistema de evaluación está conformado por un con- junto de evaluaciones de carácter muestral y censal que busca proveer de información pertinente a la sociedad en su conjunto, y a quienes toman decisiones, acerca del nivel de logro de nuestros estudiantes en capacidades y habilidades fundamentales, así como de los facto- res escolares y extraescolares que se asocian a dichos logros. En este sentido, no solo se ha aportado con información sobre el resultado de los estudiantes que asisten al nivel primario y secundario en com- petencias que tradicionalmente son evaluadas como la comprensión lectora y matemática, sino también se ha brindado información so- bre el nivel de logro de los estudiantes en capacidades más complejas de evaluar, tales como producción de textos escritos –en castellano y en lenguas nativas–, resolución de problemas matemáticos usando material concreto, formación ciudadana5 , etc. Cada evaluación ha supuesto un aprendizaje que ha permitido enri- quecer y mejorar el diseño y elaboración no solo de los instrumentos que buscan evaluar el rendimiento estudiantil y estudiar los facto- res asociados a este, sino también de metodologías más complejas y exactas. Entre estas se puede citar el tránsito que ha supuesto pasar de pruebas cuya interpretación de resultados está referido a la nor- ma (que permiten solamente ordenar y comparar a un estudiante Cada evaluación ha supuesto un aprendizaje que ha permitido enriquecer y mejorar el diseño y elaboración de los instrumentos que buscan evaluar el rendimiento estudiantil. Importancia de PISA 2009 4 Dicho proceso no ha estado exento de tensiones, en tanto –como se ha seña- lado antes– no siempre es posible que los sistemas de evaluación respondan a los diversos intereses y demandas de los actores involucrados en el quehacer educativo. Sin embargo, la discusión sobre este tema excede a los propósitos del presente artículo. 5 Adicionalmente, el año pasado la UMC ha emprendido el desafío de llevar a cabo la primera evaluación a niños de 5 años de educación inicial, lo que per- mitirá obtener información sobre algunos desempeños alcanzados en las áreas evaluadas del Diseño Curricular Nacional: Lógico Matemática, Comunicación Integral y Personal Social; así como de los factores del contexto familiar y edu- cativo a los que están asociados dichos desempeños. 01_28 PISA.indd 501_28 PISA.indd 5 10/23/09 6:38:45 PM10/23/09 6:38:45 PM
  • 6. 6 Serie: La educación del futuro con su grupo de pares) a pruebas cuya interpretación de resultados está referida a criterios (que además de ordenar y comparar grupos de estudiantes, permiten estimar cuántos alcanzan el criterio o es- tándar establecido, y sobre todo permiten describir qué es lo que los estudiantes saben y son capaces de hacer). También podemos desta- car el uso de métodos como el Bookmark sobre puntos de corte, para establecer los límites entre los niveles de desempeño. Igualmente se ha introducido el uso de los Modelos Jerárquicos Lineales (HLM6 ), que permiten analizar la relación entre la medida en una prueba de logro (criterio) y un conjunto de variables asociadas al rendimien- to académico (predictores). La ventaja de este tipo de modelos es que consideran la estructura jerárquica de los datos, pues hay varia- bles que corresponden al nivel de escuela (p. ej.: el clima escolar) y otras que pertenecen al nivel individual (p. ej.: la autoeficacia del estudiante), lo que permite tener una estimación más precisa de los errores estándar del coeficiente que asocia cada predictor con el criterio. Además, se están utilizando modelos de análisis factorial para obte- ner evidencias de validez referidas a la estructura de los constructos evaluados. Y, finalmente, podemos mencionar el uso de métodos de remuestreo (p. ej.: el Jacknife) para estimar el porcentaje de los erro- res estándar de los estudiantes en cada nivel de desempeño. El Perú en las evaluaciones internacionales Las evaluaciones internacionales sobre educación constituyen es- fuerzos multinacionales para obtener información confiable y com- parable sobre el nivel de logro de aprendizaje y de algunos otros indi- cadores educativos relevantes, con el fin de que puedan ser utilizados como insumo en el diseño y mejoramiento de políticas educativas (UMC 2002). Dichas evaluaciones están dirigidas a diversas pobla- ciones en grados o grupos etarios seleccionados y adoptan distin- tas características. Generalmente son coordinadas por organismos y agencias intergubernamentales o privadas; en los cuales el grado de participación y representación de los países participantes tiende a ser variable (Ferrer y Arregui 2003). 6 Por sus siglas en inglés: Hierarchical Linear Model. Las evaluaciones internacionales sobre educación constituyen esfuerzos para obtener información confiable y comparable, con el fin de que puedan ser utilizados como insumo en el diseño y mejoramiento de políticas educativas. 01_28 PISA.indd 601_28 PISA.indd 6 10/23/09 6:38:45 PM10/23/09 6:38:45 PM
  • 7. 7 El Perú ha participado en dos programas internacionales de evaluación de estudiantes. El primero, de carácter regional, es el Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE). Actualmente existen diversos programas internacionales de evalua- ción educativa. Entre los principales se puede citar a aquellos que promueve la Asociación Internacional para la Evaluación del Logro Educativo (IEA7 ) –Estudio Internacional de Educación Cívica y de Ciudadanía (ICCS), Estudio Internacional de Progreso en Compren- sión Lectora (PIRLS) y Estudio Internacional de Tendencias en Ma- temática y Ciencias (TIMSS)–; la Organización para la Cooperación y el Desarrollo Económico (OCDE) –Programa Internacional de Evaluación de Estudiantes (PISA)–; el Instituto de Estadística de la UNESCO –el Programa de Medición y Seguimiento de la Alfabetiza- ción (LAMP8 )–; el Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) y el Consorcio de África del Sur para la Evaluación de la Calidad Educacional (SACMEQ9 ). El Perú ha participado en dos programas internacionales de eva- luación de estudiantes. El primero, de carácter regional, es el LLECE, que está conformado por todas las Unidades de Evaluación de los países de la región, y cuya coordinación técnica está a car- go de la Oficina Regional de Educación para América Latina y el Caribe (OREALC) de la UNESCO. Este programa sustenta su mar- co evaluativo en una matriz curricular común a los países partici- pantes, a través del cual se han evaluado capacidades referidas a las áreas de comunicación y matemática, y recientemente al área de ciencias. El LLECE, en los años 1997 y 2006, ha llevado a cabo dos proce- sos de evaluación dirigidos a los estudiantes de educación primaria. Nuestro país ha participado en ambos. Actualmente, este programa se encuentra diseñando los lineamientos y requerimientos técnicos necesarios para garantizar la comparabilidad de sus resultados en el tiempo10 , así como para establecer una periodicidad regular entre sus evaluaciones. Importancia de PISA 2009 7 Por sus siglas en inglés: Association for the Evaluation of Educational Achie- vement. 8 Se ha mantenido las siglas de los nombres de las evaluaciones en inglés, pues son más conocidas por ellas. 9 Por sus siglas en inglés: Southern Africa Consortium for Monitoring Educa- tional Quality. 10 Los resultados de las dos evaluaciones que se han llevado a cabo no son comparables entre sí. 01_28 PISA.indd 701_28 PISA.indd 7 10/23/09 6:38:46 PM10/23/09 6:38:46 PM
  • 8. 8 Serie: La educación del futuro El segundo programa internacional de evaluación de estudiantes en el que ha participado el Perú es PISA, que agrupa actualmente a más de 60 países11 , y que es promovido por la Organización para la Cooperación y el Desarrollo Económico (OCDE), a través de un con- Participación del Perú en evaluaciones internacionales Programa de Evaluación Interpretación de resultados2 Población evaluada Áreas evaluadas Cobertura NIVEL LATINOAMERICANO – LLECE – UNESCO Primer Estudio Regional Comparativo y Explicativo (PERCE) 1997 Normas 3o y 4o grados de primaria Comunicación y Matemática Muestra inferencial: Megaciudad / Urbano / Rural Segundo Estudio Regional Comparativo y Explicativo (SERCE) 2006 Criterios 3o y 6o grados de primaria Comprensión de textos, Producción de textos, Matemática, Ciencias Muestra inferencial: Nacional / Urbano / Rural NIVEL MUNDIAL – PISA – OCDE Ciclo 2000+1 Criterios 15 años en secundaria3 Comprensión de textos4 , Matemática y Ciencias Muestra inferencial: Nacional Ciclo 2009 Criterios 15 años en secundaria3 Comprensión de textos4 , Matemática y Ciencias Muestra inferencial: Nacional 1 En el Perú la evaluación se realizó el 2001, en un proceso denominado PISA+ (PISA PLUS). 2 Referido a las normas: en este caso se interpretaron los resultados en función de un pro- medio. Se hace con el fin de comparar poblaciones entre sí. Por ejemplo: se dice que el rendimiento promedio de los estudiantes urbanos es mayor que el de los rurales. Referido a los criterios: se interpretan los resultados considerando un criterio o estándar de logro. Por ejemplo: se dice que el 30% de los estudiantes urbanos logra el nivel de logro esperado para el grado. 3 O su equivalente en otras modalidades educativas como la Educación Básica Alternativa. 4 Énfasis de la evaluación, lo que implica que aplican una mayor cantidad de ítems y, por lo tanto, hay una mayor riqueza en la explicación y el análisis de los resultados; además, que la medición de los factores asociados se encaminan al área enfatizada. 11 En un inicio PISA estuvo pensado para ser aplicado en los países perte- necientes a la OCDE; sin embargo, desde la primera aplicación, varios países que no eran miembros de esta organización mostraron su interés en participar. Estos fueron aceptados bajo la figura de “países socios en PISA”. Desde enton- ces, PISA se ha constituido en el estudio internacional que agrupa a la mayor cantidad de países en el mundo. 01_28 PISA.indd 801_28 PISA.indd 8 10/23/09 6:38:46 PM10/23/09 6:38:46 PM
  • 9. 9 Una de las características esenciales de PISA es su regularidad, es decir, se trata de un programa diseñado en tres ciclos evaluativos de tres años cada uno, con la finalidad de hacer un seguimiento al progreso educativo de los países participantes. Importancia de PISA 2009 sorcio de instituciones especializadas en la evaluación e investiga- ción educativa. Este programa evalúa en los estudiantes de 15 años –independientemente de la modalidad, grado o ciclo que estén cur- sando–, capacidades relacionadas con la comprensión lectora, mate- mática y ciencia. PISA se sustenta en un enfoque abierto de la evaluación, es decir, no se basa en los marcos curriculares nacionales. De allí que PISA no esté diseñado para evaluar el nivel de aprendizaje de los contenidos específicos establecidos en los currículos ni aporta información so- bre el grado en que este se está implementando. Los instrumentos que utiliza PISA se “diseñan a partir de un conjunto de estándares de contenido y desempeño, elaborados por un grupo de expertos y especialistas en diferentes áreas de conocimiento que se consideran imprescindibles para la adecuada inserción de los jóvenes en la so- ciedad y en el mundo laboral de hoy” (Ferrer y Arregui 2003: 17). Dado que el presente artículo se centra en este programa, en el si- guiente acápite detallaremos sus principales características12 , aun- que sin ser exhaustivos, con el único propósito de que se pueda comprender y ponderar las ventajas que conlleva la participación del Perú en él. El Programa Internacional para la Evaluación de Estudiantes (PISA) PISA se concibe como un programa que se caracteriza principalmen- te por tres aspectos: i) establecer un marco conceptual comprensivo y riguroso para evaluar lectura, matemática y ciencia; ii) explorar habilidades y características de los estudiantes que van más allá de los contenidos propiamente escolares; y iii) analizar las característi- cas de los sistemas, escuelas y estudiantes que se asocian a los resul- tados escolares (OCDE 2008). Una de las características esenciales de PISA es su regularidad, es de- cir, se trata de un programa diseñado en tres ciclos evaluativos de tres años cada uno, con la finalidad de hacer un seguimiento al progreso educativo de los países participantes (UMC 2002). En cada ciclo se 12 El lector interesado en profundizar en las características de PISA pue- de revisar las distintas publicaciones que hay al respecto en su página web: http://www.pisa.oecd.org Los instrumentos que utiliza PISA se diseñan a partir de un conjunto de estándares de contenido y desempeño que se consideran imprescindibles para la adecuada inserción de los jóvenes en la sociedad y en el mundo laboral de hoy. 01_28 PISA.indd 901_28 PISA.indd 9 10/23/09 6:38:47 PM10/23/09 6:38:47 PM
  • 10. 10 Serie: La educación del futuro estudia en profundidad una de las áreas evaluadas, que se traduce en la aplicación de un mayor número de ítems del área privilegiada en relación con las otras dos, lo que permite reportar los resultados de dicha área en términos de subescalas13 y de niveles de competencia. Nuestro país participó en el primer ciclo de evaluación en el año 2001, y se ha vuelto a reintegrar para el ciclo 200914 . En ambos casos el énfasis de la evaluación ha estado centrado en la lectura. Quizá una de las características más importantes de PISA sea “el innovador concepto de competencia (literacy), que [introduce] y que se refiere a la capacidad de los alumnos de aplicar sus conocimien- tos y habilidades en áreas académicas fundamentales y de analizar, razonar y comunicar eficazmente cuando plantean, resuelven e in- terpretan problemas relacionados con distintas situaciones” (OCDE 2005: 20). Esta noción de competencia supone abandonar la visión dicotómi- ca que ha imperado en el ámbito educativo, y al hablar de “niveles de competencia” se asume la idea de que las personas desarrollan de manera progresiva sus conocimientos, destrezas y habilidades en distintos contextos a lo largo de la vida. En tal sentido, PISA eva- lúa los conocimientos y habilidades de los estudiantes como un contínuum. Dicho enfoque, entonces, no permite responder pregun- tas de si los estudiantes saben o no leer, sino que aporta información sobre el tipo de habilidades y destrezas que ponen en juego los estu- diantes al leer y el grado en que las han adquirido. En tal sentido, un elemento relevante de PISA 2009 es la introduc- ción de un conjunto de ítems de menor dificultad que permitirá des- cribir lo que saben, comprenden y pueden hacer los estudiantes de países que mostraron un bajo nivel de desempeño en lectura. Como es conocido, en el ciclo 2000 una proporción importante de estudian- tes de los países participantes –pero en particular en los países que no pertenecían a la OCDE15 – se ubicó en el grupo por debajo del pri- mer nivel de competencia establecido en lectura, lo que no permitía describir los conocimientos y habilidades que estaban asociados 13 Por ejemplo, para el caso de lectura, las subescalas establecidas son: i) recu- peración de información, ii) interpretación de textos y iii) reflexión y evalua- ción. 14 Es decir, no participó en el 2003 ni en el 2006, que tuvieron como énfasis la evaluación de competencias matemáticas y científicas, respectivamente. 15 En el caso del Perú, de los cinco niveles de competencia considerados, el 54% de los estudiantes se ubicó por debajo del nivel 1. Dicho enfoque aporta información sobre el tipo de habilidades y destrezas que ponen en juego los estudiantes al leer y el grado en que las han adquirido. Esta noción de competencia supone abandonar la visión dicotómica que ha imperado en el ámbito educativo. 01_28 PISA.indd 1001_28 PISA.indd 10 10/23/09 6:38:48 PM10/23/09 6:38:48 PM
  • 11. 11 Adicionalmente, PISA estudia en cada ciclo evaluativo otras habilidades y características de los estudiantes de 15 años, tales como sus actitudes hacia la lectura, la matemática y la ciencia. Importancia de PISA 2009 a dicho desempeño. Una razón adicional para incluir este tipo de ítems –más fáciles– es que la experiencia de los estudiantes con me- nor nivel de desempeño sea más satisfactoria16 . Un aspecto importante de PISA es que se aplican diferentes cuader- nillos a los estudiantes evaluados. Cada cuadernillo está organizado por bloques de ítems pertenecientes a las tres áreas evaluadas, que, a su vez, tienen ítems únicos e ítems en común con los otros cuader- nillos. Los bloques están distribuidos en los cuadernillos en distinto orden, de manera que no siempre queden al inicio o al final en todos los cuadernillos en los que aparecen. Este diseño, llamado Bloques Incompletos Balanceados, permite, por un lado, que los estudiantes se enfrenten a un número razonable de preguntas que sirvan para medir su desempeño de manera adecuada, evitando el factor can- sancio, y por otro lado, que se logre evaluar todo el espectro de cono- cimientos, capacidades y habilidades que se especifican en el marco conceptual de la evaluación. No obstante, es preciso tener en cuenta que este diseño, además de otras consideraciones técnicas17 , tiene al- gunas implicancias, como el hecho de que no permite reportar resul- tados a nivel individual; es decir, PISA no está diseñada para obtener resultados a nivel de escuela o de estudiante evaluado. Adicionalmente a la evaluación de las áreas de lectura, matemática y ciencias, PISA estudia en cada ciclo evaluativo otras habilidades y características de los estudiantes de 15 años, tales como sus actitu- des hacia la lectura, la matemática y la ciencia18 , sus concepciones sobre sí mismos, las estrategias que siguen en su proceso de aprendi- zaje, su sentido de pertenencia con la escuela, entre otros. Con el fin de recoger información sobre el contexto en que se des- envuelven los estudiantes evaluados y de estimar el aporte de los factores que se asocian a sus resultados, PISA utiliza un conjunto Los Bloques Incompletos Balanceados permiten evaluar todo el espectro de conocimientos, capacidades y habilidades que se especifican en el marco conceptual de la evaluación. 16 Es importante destacar la conformación del Grupo Iberoamericano de PISA, que está integrado por Argentina, Brasil, Chile, Colombia, España, México, Pa- namá, Perú, Portugal y Uruguay, cuyo propósito es fomentar la colaboración entre los países de Iberoamérica que participan en PISA. Este grupo elaboró un conjunto de ítems que fueron seleccionados por PISA, y que se monitorearon en el ciclo 2009. 17 Entre otros, se puede señalar el carácter muestral de la evaluación, el hecho de evaluar a un máximo de 35 estudiantes por escuela. 18 Por ejemplo, en el 2006 la actitud de los estudiantes hacia la ciencia fue es- tudiada a través de un conjunto de preguntas que buscaban indagar sobre i) el interés en la ciencia, ii) la aceptación del pensamiento científico como vía de conocimiento y iii) la responsabilidad hacia el uso de los recursos y el medio ambiente. 01_28 PISA.indd 1101_28 PISA.indd 11 10/23/09 6:38:48 PM10/23/09 6:38:48 PM
  • 12. 12 Serie: La educación del futuro de cuestionarios dirigidos a los estudiantes y a los directivos de las instituciones educativas de los países participantes. A través de estos instrumentos busca obtener información sobre las condiciones eco- nómicas, sociales, culturales y familiares de los estudiantes, además de las características antes señaladas, así como acerca de la calidad de los recursos financieros, materiales, humanos de las escuelas, las características institucionales, las prácticas directivas, entre otros. Aportes de PISA para el monitoreo y evaluación del sistema educativo peruano A pesar de que, como se ha señalado al inicio de este artículo, la participación en evaluaciones internacionales no está exenta de con- troversias, consideramos que estas pueden cumplir un rol importan- te en el mejoramiento del sistema educativo y del proceso de ense- ñanza-aprendizaje. En dicho sentido se manifiestan Ferrer y Arregui (2003: 13), luego de analizar los argumentos a favor y en contra de dicha participación, al señalar que “El balance entre las ventajas y limitaciones que presentan las pruebas internacionales pareciera in- dicar que la participación en estos proyectos puede ser valiosa para los países, incluso para los países en desarrollo, siempre y cuando se tomen ciertas previsiones con respecto a las características técnicas de las pruebas y a las condiciones políticas e institucionales para su aplicación, incluyendo mecanismos para la correcta interpretación y difusión de los resultados”. En las siguientes líneas daremos cuenta de los aportes de PISA para el monitoreo y evaluación del sistema educativo peruano, entendiendo dicho programa en su integralidad, y no solo en cuanto a la informa- ción que brinda en términos de resultados de las pruebas de rendi- miento. Es importante precisar que en este recuento se ha privilegiado aquellos aportes que puede brindar la participación en PISA, teniendo en cuenta las particularidades y desafíos que tiene nuestro país. Monitoreo del logro académico en el tiempo Considerando que uno de los objetivos del sistema educativo pe- ruano es “Formar personas capaces de lograr su realización ética, intelectual, artística, cultural, afectiva, física, espiritual y religiosa La participación en estos proyectos puede ser valiosa para los países, incluso para los países en desarrollo, siempre y cuando se tomen ciertas previsiones con respecto a las características técnicas de las pruebas y a las condiciones políticas e institucionales para su aplicación. 01_28 PISA.indd 1201_28 PISA.indd 12 10/23/09 6:38:48 PM10/23/09 6:38:48 PM
  • 13. 13 […], así como el desarrollo de sus capacidades y habilidades para vincular su vida con el mundo del trabajo y para afrontar los ince- santes cambios en la sociedad y el conocimiento”19 , las decisiones de política educativa debieran ser valoradas por la medida en que se estén cumpliendo estos objetivos. Por esta razón, como señala Fors- ter (2002), las mediciones de los resultados del aprendizaje tienen un significado especial como indicadores de calidad en la educación, en tanto constituyen una base relevante con el fin de señalar metas para el mejoramiento y para el monitoreo del progreso de los objetivos educativos. En tal sentido, la participación en evaluaciones internacionales nos permite “obtener información objetiva sobre el logro académico de los estudiantes en relación con estándares internacionales de conte- nido, que impacte la opinión pública y facilite una toma de decisio- nes mejor informada para el mejoramiento del sistema educativo” (Ferrer y Arregui 2003: 20). En el caso particular de PISA, la participación de nuestro país en el ciclo 2009 no solo nos permitirá poder evidenciar los resultados obtenidos por los estudiantes peruanos en comparación con aquellos logrados por los estudiantes del resto de países participantes, sino que también –y consideramos que esto es lo más relevante– nos per- mitirá conocer en qué medida ha variado la proporción de estudian- tes ubicados en cada uno de los niveles de desempeño de la escala de comprensión lectora, y en el promedio de la escala de alfabetización matemática y científica, entre los casi 8 años que median entre las dos aplicaciones de la prueba PISA en nuestro país. Esta informa- ción, sumada a otras, proporcionará un insumo fundamental para hacer una evaluación objetiva de las políticas educativas aplicadas, y del funcionamiento del sistema durante este periodo. Orientación para la mejora de políticas educativas y pedagógicas La participación en PISA podría favorecer la reflexión sobre los con- tenidos curriculares contemplados en nuestro Diseño Curricular Na- cional (DCN). Establecer la relación entre aquello que propone el Importancia de PISA 2009 19 Artículo 9 de la Ley General de Educación 28044. 28 de julio del 2003. Las decisiones de política educativa debieran ser valoradas por la medida en que se estén cumpliendo estos objetivos. Esta información, sumada a otras, proporcionará un insumo fundamental para hacer una evaluación objetiva de las políticas educativas aplicadas, y del funcionamiento del sistema durante este periodo. 01_28 PISA.indd 1301_28 PISA.indd 13 10/23/09 6:38:49 PM10/23/09 6:38:49 PM
  • 14. 14 Serie: La educación del futuro currículo peruano para las diversas modalidades educativas20 y las competencias para la vida adulta en que se basa la evaluación PISA resultaría enriquecedor para el primero. Ello no implica asumir una suerte de disyuntiva entre ambos, como algunos plantean, puesto que el currículo nacional es el referente normativo a partir del cual los docentes debieran enseñar, y lo que se espera que los estudian- tes aprendan en cada grado, ciclo o nivel, mientras que PISA evalúa algunas competencias y capacidades requeridas para que cualquier joven cercano a incorporarse a la vida adulta se desempeñe exitosa- mente de acuerdo con las demandas de una sociedad global que le exige seguir aprendiendo21 (UMC 2002). De otro lado, la aplicación de las pruebas PISA con la incorporación de ítems de menor nivel de dificultad permitirá contar con una des- cripción más detallada sobre los procesos cognitivos implicados en las actividades que los estudiantes con menor nivel de habilidad han podido resolver. Dichas descripciones –sumadas a las referidas a los ítems de mayor dificultad– aportarán mayor evidencia empírica para la tarea que el Ministerio está próximo a emprender en la construc- ción de estándares de desempeño. Esto es particularmente relevante en el caso de la comprensión lectora para el nivel secundario o su equivalente, pues no resulta una tarea fácil establecer la gradualidad de contenidos para cada grado o ciclo escolar. Asimismo, PISA podría enriquecer la elaboración de textos escolares, no solo incorporando distintos tipos de textos, sino también textos que combinen formatos continuos y discontinuos y que propicien una lectura intertextual22 . Un sistema de evaluación como PISA también puede desempeñar un papel importante para comunicar expectativas de aprendizaje al in- terior de las escuelas. Como señala Forster y otros (2002: 15), dichas evaluaciones “pueden ser un método efectivo de concentrar la aten- ción de los alumnos en los resultados de aprendizaje que se valoran, 20 Resulta importante recordar que PISA no se circunscribe a evaluar solo a los estudiantes de Educación Básica Regular, sino que también incluye a estudian- tes de otras modalidades. 21 En todo caso, quizá las competencias evaluadas por PISA podrían cristalizar algunos de los objetivos que debiera proponerse en el currículo para cuando los estudiantes culminen la secundaria. 22 Una experiencia interesante a este respecto la constituyen los módulos y las pruebas elaboradas para la Movilización Nacional por la Comprensión Lectora que actualmente viene implementando el Ministerio de Educación. Dichas evaluaciones “pueden ser un método efectivo de concentrar la atención de los alumnos en los resultados de aprendizaje que se valoran, promoviendo razonamientos y reflexiones de mayor nivel de complejidad [...] y estimulando a los estudiantes a alcanzar niveles de logro aun mayores”. 01_28 PISA.indd 1401_28 PISA.indd 14 10/23/09 6:38:49 PM10/23/09 6:38:49 PM
  • 15. 15Importancia de PISA 2009 promoviendo razonamientos y reflexiones de mayor nivel de com- plejidad [...] y estimulando a los estudiantes a alcanzar niveles de logro aun mayores”. En tal sentido, se podría pensar en proveer a los docentes reportes que contengan los resultados del logro estudian- til desagregados por subescalas, para que puedan conocer en qué contenidos y capacidades tienen más dificultades los estudiantes; del mismo modo se podrían elaborar materiales que les permitan visua- lizar y comprender los procesos involucrados en actividades con di- ferente tipo de demanda cognitiva. De otro lado, también podría considerarse la posibilidad de mode- lar las prácticas evaluativas de los docentes para aproximarlos –por ejemplo, en el caso de la comprensión lectora– a indagar por proce- sos lectores mediante preguntas cuyas formulaciones no son únicas, sino que varían de acuerdo con las características de contenido y forma de los textos, o según los planteamientos para la calificación de preguntas de respuesta abierta (UMC 2002). Finalmente, todo esto también será de ayuda para los programas de capacitación docente, los cuales deberán ayudar al docente a am- pliar sus concepciones acerca de la lectura y los criterios que utiliza en la selección de textos y preguntas adecuados para desarrollar la comprensión lectora de los estudiantes. Identificación y comprensión de los factores asociados El enfoque comprensivo de la evaluación PISA permite dar cuenta no solo del rendimiento de los estudiantes en las áreas estudiadas, sino que también atiende a las condiciones y factores del entorno familiar y escolar que influyen en dicho rendimiento, pues lo que los estudiantes reciben en su hogar y en la escuela puede estimular o li- mitar el desarrollo de sus habilidades. Los resultados de este tipo de análisis pueden dar lugar a amplios debates en torno a políticas no solo educativas, sino también intersectoriales. De hecho una infor- mación importante que proveen los resultados de PISA está referida a evaluar en qué medida los sistemas educativos están garantizando una distribución equitativa de las oportunidades de aprendizaje. En relación con este tema conviene recordar lo señalado por la UMC (2002) a propósito de la participación del Perú por primera vez en la Los programas de capacitación deberán ayudar al docente a ampliar sus concepciones acerca de la lectura y sus criterios para la selección de textos y preguntas adecuados para desarrollar la comprensión lectora de los estudiantes. De hecho una información importante que proveen los resultados de PISA está referida a evaluar en qué medida los sistemas educativos están garantizando una distribución equitativa de las oportunidades de aprendizaje. 01_28 PISA.indd 1501_28 PISA.indd 15 10/23/09 6:38:50 PM10/23/09 6:38:50 PM
  • 16. 16 Serie: La educación del futuro evaluación PISA. En dicho artículo se identifican tres aportes rela- cionados con el análisis y explicación de los factores que se asocian con el logro de los estudiantes. El primer aporte está referido al análisis comparativo de los resul- tados del rendimiento entre países. Como señalan Ferrer y Arregui (2003: 24), este análisis debe “conducir a preguntas clave sobre la forma en que otros países logran mejores rendimientos estudiantiles y sobre las condiciones bajo las cuales esos logros son posibles. Vale recordar que una de las ventajas de las pruebas internacionales es que pueden revelar información sobre los efectos diferenciales de algunas variables sobre el logro de aprendizajes que no es posible detectar en un estudio intranacional”. En efecto, la fuerza y la confi- guración de los factores que se asocian al logro de los estudiantes no se comporta de la misma forma en los distintos países. El análisis de los factores asociados propiamente dichos puede considerarse como un segundo aporte en tanto permite identificar las variables específicas que están asociadas a los logros educativos y a los contextos en los que dichas variables tienen los efectos más significativos sobre el rendimiento en cada país. Así, por ejemplo, los resultados de este estudio pueden dar cuenta de que en algunos paí- ses la contribución de los recursos socioeconómicos en la educación de los hijos no es tan importante como en otros. El tercer aporte se refiere a la información complementaria que pue- den brindar los estudios internacionales en relación con las evalua- ciones nacionales en tanto permitan reforzar o discutir los ha- llazgos que se encuentren en el contexto local. Al respecto, nos interesa citar algunos ejemplos que muestran la información que una evaluación como PISA puede brindar para ir acumulando un mayor conocimiento sobre la realidad educativa. En el estudio realizado por la UMC (2004a) sobre los factores asocia- dos al rendimiento de los estudiantes peruanos evaluados en PISA en comprensión lectora, se encontró que el 58% de la variabilidad del desempeño de los estudiantes puede atribuirse a diferencias entre escuelas, mientras el 42% restante a diferencias entre las caracterís- ticas de los estudiantes al interior de la escuela. Es decir, el desempe- ño en lectura de los estudiantes peruanos en PISA 2000+ estaría más relacionado con aquellos aspectos propios de las escuelas a las que asisten que a factores individuales o familiares de dichos estudian- tes. Este hallazgo no deja de llamar la atención, pues en el estudio de La información complementaria que pueden brindar los estudios internacionales en relación con las evaluaciones nacionales permitirá reforzar o discutir los hallazgos que se encuentren en el contexto local. 01_28 PISA.indd 1601_28 PISA.indd 16 10/23/09 6:38:51 PM10/23/09 6:38:51 PM
  • 17. 17 Esta realidad evidencia la necesidad de establecer una política que busque disminuir la extraedad y, con ello, incrementar la probabilidad de que los estudiantes culminen sus estudios a tiempo. factores asociados de la Evaluación Nacional 2004, se encontró que más bien la mayor proporción de las diferencias en el rendimiento de los estudiantes de quinto de secundaria en lectura se podría atribuir a factores individuales (69%)23 . Esta evidencia, aunada a otras, in- cluso llevaba a señalar que “mientras se avanza en el ciclo escolar las diferencias atribuibles a los factores escolares tienden a disminuir en tanto que las diferencias atribuibles a las características individuales de los estudiantes se vuelven más importantes” (Miranda 2008: 18). En todo caso, los resultados de PISA 2009 permitirán contar con mayores elementos de juicio a este respecto. En los análisis multivariados de los factores asociados al desempeño de los estudiantes en lectura, matemática y ciencias realizados por la UMC (2004a, 2004b), se ha encontrado de manera consistente que el grado al que asiste el estudiante es el principal factor individual que explica su logro académico en PISA. De esta manera, los estudiantes en extraedad son quienes obtienen un desempeño más bajo en estas áreas evaluadas. Esta realidad evidencia la necesidad de establecer una política que busque disminuir la extraedad y, con ello, incre- mentar la probabilidad de que los estudiantes culminen sus estudios a tiempo. Mejoramiento de herramientas de evaluación Dado que en los últimos años se utilizan cada vez más los resulta- dos que provienen de pruebas estandarizadas como indicadores de calidad educativa, a pesar de los riesgos que ello involucra, resulta fundamental no soslayar la importancia de mejorar continuamente la calidad técnica de los instrumentos y de las metodologías usadas, de manera que la información que se reporte sea lo más confiable posible. De hecho este fue uno de los objetivos cuando nuestro país decidió participar en la evaluación PISA 2000+. En ese entonces se señaló Importancia de PISA 2009 23 Es importante tener en cuenta, sin embargo, que mientras las evaluaciones nacionales están centradas en la evaluación de un grado en particular, PISA evalúa a una población etaria. Esta consideración debe estar teniendo algún efecto en las estimaciones de las diferencias en el rendimiento atribuibles a factores escolares e individuales. No obstante, los resultados de matemática en PISA sí coinciden con los hallados en los estudios nacionales. Al respecto ver: UMC 2004b. “Mientras se avanza en el ciclo escolar las diferencias atribuibles a los factores escolares tienden a disminuir en tanto que las diferencias atribuibles a las características individuales de los estudiantes se vuelven más importantes”. 01_28 PISA.indd 1701_28 PISA.indd 17 10/23/09 6:38:51 PM10/23/09 6:38:51 PM
  • 18. 18 Serie: La educación del futuro que el Perú podría aprender en muchos aspectos involucrados en el quehacer evaluativo a gran escala; solo por citar algunos ejemplos: la concepción de evaluación de la comprensión de textos, la inclu- sión de diversos tipos de ítems, los planteamientos técnicos para la calificación de las respuestas de los estudiantes a preguntas abiertas, así como la utilización de métodos analíticos rigurosos para la inter- pretación de la información. Sin olvidar que la “comparación de los instrumentos que se utilizan para recoger información de factores asociados puede permitirle al país incorporar inquietudes o propues- tas que se van desarrollando en la investigación comparativa interna- cional” (UMC 2002: 24). Por esta razón, también consideramos que participar nuevamente en PISA puede permitir seguir optimizando nuestro sistema de evalua- ción en tanto dicho programa tiene una orientación clara al mejora- miento continuo, sin perder de vista su compromiso de garantizar la comparabilidad de los resultados a lo largo del tiempo. Finalmente, esperamos que las ideas señaladas en el presente docu- mento sirvan para contribuir a una mejor comprensión de los bene- ficios que una evaluación como PISA puede aportar al país. Sin em- bargo, esta participación solo tendrá sentido si la información que brinda es analizada en su conjunto y es valorada en concordancia con los propósitos que busca dicha evaluación, y, sobre todo, si es utilizada de manera efectiva en los distintos niveles de decisión para mejorar la calidad de los aprendizajes. Bibliografía BARBER, Michael y Mona MOURSHED 2008 “Cómo hicieron los sistemas educativos con mejor desempeño del mundo para alcanzar sus objetivos”. Documentos PREAL. Santiago de Chile, número 41. FERRER, Guillermo y Patricia ARREGUI 2003 “Las pruebas internacionales de aprendizaje en América Latina y su impacto en la calidad de la educación: criterios para guiar futuras aplicaciones”. Documen- tos PREAL. Santiago de Chile, número 26. FORSTER, Margaret, G. MASTERS y K. ROWE 2002 “Measuring Learning Outcomes: Options and Challenges in Evaluation and Performance Monitoring”. Material de enseñanza preparado para el Curso Op- ciones Estratégicas para la Reforma Educativa del Instituto del Banco Mundial. Consejo Australiano para la Investigación Educativa. Consulta: 2 de mayo del 2009. Participar nuevamente en PISA puede permitir seguir optimizando nuestro sistema de evaluación en tanto dicho programa tiene una orientación clara al mejoramiento continuo. 01_28 PISA.indd 1801_28 PISA.indd 18 10/23/09 6:38:52 PM10/23/09 6:38:52 PM
  • 19. 19 http://www.see.gob.do/sitesee/planificacion/documentos/Pagina%20OPE/Activi- dades/Curso%20sobre%20Opciones%20Estrategicas%20para%20la%20Reform a%20Educativa/presentations/Day3WednesdayApril25/ModuloIVunidadC.pdf> KOVACS, Karen 2005 “Fortalezas y debilidades desde los datos duros”. Revista Mexicana de Investiga- ción Educativa. México DF, volumen 10, número 24, pp. 267-275. MIRANDA, Liliana 2008 “Factores asociados al rendimiento escolar y sus implicancias para la política educativa del Perú”. En: BENAVIDES, Martín (editor). Análisis de programas, procesos y resultados educativos en el Perú: contribuciones empíricas para el deba- te. Lima, GRADE. ORGANIZACIÓN PARA LA COOPERACIÓN Y EL DESARROLLO ECONÓMICO (OCDE) 2003 Literacy Skills for the World of Tomorrow: Further Results from PISA 2000. París, OECD. 2005 Informe PISA 2003. Aprender para el mundo del mañana. Madrid, OECD - Santi- llana. 2006 Assessing Scientific, Reading and Mathematical Literacy: A Framework for PISA 2006. París, OECD. 2008a Reading Framework for PISA 2009 (Draft). 2008b PISA - The OECD Programme for International Student Assessment. RAVELA, Pedro 2006 Fichas didácticas para comprender las evaluaciones educativas. Santiago de Chi- le, PREAL. RAVELA, Pedro y otros 2008 “Las evaluaciones educativas que America Latina necesita”. Documentos PREAL. Santiago de Chile, número 40. REIMERS, Fernando y Noel McGINN 1997 Informed Dialogue: Using Research to Shape Education Policy Around the World. Nueva York, Praeger. UNIDAD DE MEDICIÓN DE LA CALIDAD EDUCATIVA (UMC) 2002 “El Programa Internacional para la Evaluación de Estudiantes de la OCDE (PISA) y la participación del Perú”. Boletín UMC. Lima, número 21. 2004a “Una aproximación a la alfabetización lectora de los estudiantes peruanos de 15 años. Resultados del Perú en la evaluación internacional PISA”. Documento de trabajo No 6. Lima, UMC del Ministerio de Educación del Perú. 2004b “Una aproximación a la alfabetización matemática y científica de los estudiantes peruanos de 15 años. Resultados del Perú en la evaluación internacional PISA”. Documento de trabajo No 10. Lima, UMC del Ministerio de Educación del Perú. 2004c “La evaluación de la alfabetización lectora de PISA y el rendimiento de los estu- diantes peruanos”. Documento de trabajo No 11. Lima, UMC del Ministerio de Educación del Perú. Importancia de PISA 2009 01_28 PISA.indd 1901_28 PISA.indd 19 10/23/09 6:38:52 PM10/23/09 6:38:52 PM
  • 20. 20 Serie: La educación del futuro El texto que les presentamos a continuación es una trans- cripción editada de las conferencias que Andreas Schleicher diera el 20 de mayo del 2009 en Lima. 1. EL NUEVO GLOBAL TALENT POOL EDUCACIONAL Quiero comenzar mi presentación no mirando a PISA, sino viendo en qué está el mundo: cómo el global talent pool1 está cambiando y cómo ha mejorado la educación debido a estándares nacionales. En el talent pool de los años sesenta, Estados Unidos ocupaba el pri- mer lugar con calificaciones muy altas. En los años setenta, las cosas empezaron a cambiar y algunos países, como Corea, empezaron a progresar rápidamente durante las décadas siguientes. Se trata de un proceso continuo, aunque desigual en los últimos treinta años. Algu- nos países han mejorado tanto que el global talent pool ha cambiado. Si Estados Unidos era el número 1, ahora es apenas el número 13, no porque sus estándares hayan bajado, sino porque los estándares en otros países han subido mucho más. El mercado reclama nuevas competencias No se trata de proveer al mercado de las calificaciones académicas y profesionales tradicionales. En la medida en que el reto para el sis- tema educativo es la calidad, la naturaleza de las habilidades de las personas es importante para el desarrollo personal y la inserción en el mundo del trabajo. Lo que el Perú puede aprender de los resultados comparados de las pruebas PISA El mercado reclama nuevas competencias. No se trata de proveer al mercado de las calificaciones académicas y profesionales tradicionales. 1 Grupos de talentos globales de los egresados. 01_28 PISA.indd 2001_28 PISA.indd 20 10/23/09 6:38:53 PM10/23/09 6:38:53 PM
  • 21. 21 Las competencias “no rutinarias analíticas” están en crecimiento. Se trata de la capacidad para trabajar con la mente, de manera menos predecible y extrapolando los conocimientos y aplicándolos a nuevas situaciones. El gráfico 1 permite ver lo que está pasando con las competencias. Las “rutinarias manuales” son menos demandadas debido a la indus- trialización, la digitalización y el outsourcing. Las competencias “no rutinarias manuales” tienen una demanda estable y no son fáciles de automatizar ni tercerizar. Las competencias “rutinarias cognitivas” son las que tienen que ver con la reproducción del contenido de un curso. En el gráfico se puede apreciar que son las competencias que han mostrado una caída más grande en el mercado. Las competencias “no rutinarias analíticas” están en crecimiento. Se trata de la capacidad para trabajar con la mente, de manera menos predecible y extrapolando los conocimien- tos y aplicándolos a nuevas situaciones. Hay un nuevo tipo de competencias que PISA todavía no puede me- dir. Las “no rutinarias interactivas”, que no son transculturales y que tienen una importancia creciente. Se refieren a la forma como se interactúa con las personas en el trabajo y la vida diaria. Gráfico 1: Cómo está cambiando la demanda de competencias PISA: Lo que el Perú puede aprender 01_28 PISA.indd 2101_28 PISA.indd 21 10/29/09 11:00:04 AM10/29/09 11:00:04 AM
  • 22. 22 Serie: La educación del futuro 2. EL DISEÑO DE PISA: EVALUAR COMPETENCIAS PARA EL DESEMPEÑO EN LA VIDA PISA nos informa de los resultados que obtienen los siste- mas educativos al adecuar los aprendizajes a las necesida- des del mundo globalizado y mejorar la calidad educativa. También nos facilita el análisis comparativo de los datos que nos permitirán obtener conclusiones y tomar decisio- nes para mejorar nuestro sistema educativo. En este marco es importante preguntarnos si el enfoque de PISA abarca la totalidad de la intención educativa, si tiene en cuenta “el aprender a ser y a convivir” y no solo “el saber y el hacer”. Cuando diseñamos PISA, sentimos que si nos centrábamos en lo que se supone que los estudiantes han aprendido, estaríamos mirando al pasado. Entonces pensamos en lo que se necesitaría saber para el fu- turo, y descubrimos que era evaluar la capacidad de los estudiantes para extrapolar lo que han aprendido y aplicar sus conocimientos y habilidades en nuevos contextos. Es una evaluación que se realiza cada tres años para examinar el rendimiento de los estudiantes a los 15 años de edad. Las áreas clave de la evaluación son la comprensión lectora, la matemática, las cien- cias y las competencias transcurriculares. También se recoge infor- mación sobre otros resultados educativos, tales como las actitudes y estrategias de aprendizaje de los estudiantes; datos contextuales vinculados a la realidad socioeconómica, a las escuelas, a los padres, y a los sistemas educativos. Gráfico 2: Decidir qué evaluar Pensamos en lo que se necesitaría saber para el futuro, y descubrimos que era evaluar la capacidad de los estudiantes para extrapolar lo que han aprendido y aplicar sus conocimientos y habilidades en nuevos contextos. Las áreas clave de la evaluación son la comprensión lectora, la matemática, las ciencias y las competencias transcurriculares. 01_28 PISA.indd 2201_28 PISA.indd 22 10/23/09 6:38:54 PM10/23/09 6:38:54 PM
  • 23. 23 PISA no evalúa lo que los alumnos aprenden en la escuela. ¿Por qué no evalúa el currículo? Muchas personas dicen que PISA examina a los estudiantes en cosas que no han hecho antes o que no han estudiado en el colegio, y que eso es injusto. Se olvidan que el día en que los estudiantes salgan del colegio tendrán problemas que nunca han visto antes y deberán enfrentarse a cosas nuevas. El concepto de competencia en PISA El estudiante puede saber muchas cosas, pero si no puede movilizar el conocimiento en un contexto específico, si no puede combinar el conocimiento con el compromiso y con un buen juicio, entonces el conocimiento está muerto. Las competencias y el conocimiento no están en un mundo exacto, se aplican en contextos personales, pú- blicos o sociales. Las competencias que evalúa PISA no se relacionan mucho con las competencias de los currículos nacionales, no es su intención. PISA no está diseñada para suplir una evaluación nacional. Analizando y comparando resultados Lo que se puede ver al analizar los resultados de la prueba2 es que los países varían mucho en las diferentes capacidades. Lo interesante es que no es determinante el criterio geopolítico. Entre los que tienen resultados más altos están Nueva Zelanda, Finlandia y el Reino Uni- do, también Australia, Japón, Canadá y Corea del Sur. Las comparaciones internacionales les dan a los países una idea de las fortalezas y debilidades relativas de lo que se está haciendo en cada uno de ellos. Después de la comparación, cambiará la mirada que dará a su propio currículo, a lo que están aprendiendo sus estu- diantes y lo que hay en el entorno o en el contexto cultural. PISA: Lo que el Perú puede aprender 2 La referencia es a la prueba del 2006. El estudiante puede saber muchas cosas, pero si no puede movilizar el conocimiento en un contexto específico, entonces el conocimiento está muerto. Las comparaciones internacionales les dan a los países una idea de las fortalezas y debilidades relativas de lo que se está haciendo en cada uno de ellos. 01_28 PISA.indd 2301_28 PISA.indd 23 10/23/09 6:38:55 PM10/23/09 6:38:55 PM
  • 24. 24 Serie: La educación del futuro Los conocimientos adquiridos a través de las evaluaciones PISA nos permiten decir que el dinero es importante, pero constituye solo el 28% de las diferencias en desempeño. 3. LA INVERSIÓN EN EDUCACIÓN Y OTRAS VARIABLES SOCIOECONÓMICAS Los análisis de los resultados PISA proporcionan una serie de datos que, al ser analizados, nos suministran informa- ción importante para la elaboración de políticas educativas que lleven a la mejora de la calidad con equidad. La inversión en educación Lo primero que la gente tiene en la mente cuando piensa en mejorar la educación, o en las fórmulas de los países exitosos, es dinero y recursos. Los conocimientos adquiridos a través de las evaluaciones PISA nos permiten decir que el dinero es importante, pero cons- tituye solo el 28% de las diferencias en desempeño. Hay muchos países pobres a los que les va bien y muchos países ricos que les va mal. En el gráfico siguiente se observan los recursos invertidos y los resultados obtenidos. Aunque son solo datos de los países de la OCDE, podemos extrapolar esta información al resto de los países. Algunos países no están gastando mucho en educación, pero tie- nen excelentes resultados: Finlandia y Corea del Sur, por ejemplo. Pueden ver que otros países como Noruega y Estados Unidos tienen fuertes inversiones y no logran resultados tan buenos. Los países to- man diferentes opciones. En Corea se gastan muchos recursos en pagar bien a los maestros, pues quieren tener a los mejores maestros. Otro factor importante es el tiempo de instrucción, si tienes más días de escuela, o días de escuela más largos, vas a gastar más. Corea no Gráfico 3: Recursos invertidos y resultados en evaluación Corea no solo les paga bien a sus profesores, sino que tiene más tiempo de enseñanza. También les da más tiempo para interactuar entre ellos e invierte en su desarrollo profesional. 01_28 PISA.indd 2401_28 PISA.indd 24 10/23/09 6:38:55 PM10/23/09 6:38:55 PM
  • 25. 25 solo les paga bien a sus profesores, sino que tiene más tiempo de enseñanza. También les da más tiempo para interactuar entre ellos e invierte en su desarrollo profesional. Diferencias socioeconómicas y estratificación En muchos países existe un fuerte impacto de las condiciones so- cioeconómicas en el rendimiento del alumno, pero en otros países esta variable no es tan importante. Los resultados de PISA nos mues- tran que muchos países tienen éxito en amortiguar esas condiciones sociales, logrando minimizar su impacto. En el mundo hay muchas discusiones sobre el tema de las diferencias socioeconómicas y su relación con la calidad y equidad de la educación. En PISA hemos podido apreciar que hay algunos países que logran resultados alen- tadores y reducen la inequidad al mismo tiempo. 4. LA IMPORTANCIA DEL ALTO NIVEL DE LOGROS Y DEL ACOMPAÑAMIENTO PERSONALIZADO A LOS ESTUDIANTES El alto nivel de logros y el acompañamiento personalizado, factores fundamentales para la mejora de la calidad educa- tiva, no se conseguirán si es que el sistema no garantiza la autonomía de las instituciones educativas y la idoneidad de los docentes. Los sistemas con mejor desempeño son los que tienen altas expecta- tivas de logros y un fuerte acompañamiento a los estudiantes. Cuan- do hablamos de expectativas altas, nos referimos a las metas y a los estándares, no a las notas. Hay países a los que les va bien en térmi- nos de notas, pero no en logros de aprendizaje. Que las escuelas y los docentes tengan alto nivel de responsabilidad por el desempeño de sus estudiantes da muy buenos resultados. La calidad de los docentes La calidad de un sistema educativo no puede exceder la calidad de sus maestros. Una de las características más importantes de los sistemas educativos más exitosos es la calidad de sus maestros. PISA: Lo que el Perú puede aprender Los sistemas con mejor desempeño son los que tienen altas expectativas de logros y un fuerte acompañamiento a los estudiantes. 01_28 PISA.indd 2501_28 PISA.indd 25 10/23/09 6:38:56 PM10/23/09 6:38:56 PM
  • 26. 26 Serie: La educación del futuro La calidad de un sistema educativo no puede exceder la calidad de sus maestros. Una de las características más importantes de los sistemas educativos más exitosos es la calidad de sus maestros. Es muy fácil hacer un test como PISA. El punto es cómo usar la información para mejorar la educación. Es necesario buscar a los maestros entre las mejores personas del país. En Finlandia, por ejemplo, todos quieren ser docentes, y no por un tema de sueldos, si no porque es una profesión atractiva, con futuro y prestigio social. Los sistemas educativos tienen que volver a pensar el equilibrio en- tre la formación inicial y la formación en servicio. Si no se cambia la forma en que los profesores actualmente enseñan y aprenden, va a ser muy difícil cambiar los resultados. Se requieren sistemas de incentivos y, seguramente, también de sanciones para mejorar su desempeño. 5. LAS PRUEBAS PISA EN EL PERÚ Este año el Perú vuelve a las pruebas PISA, participaremos después de haber estado ausentes en los años 2003 y 2006. ¿Qué haremos con los resultados? ¿Nos servirán para to- mar decisiones? Es muy fácil hacer un test como PISA. El punto es cómo usar la in- formación para mejorar la educación. Cuando tengan en sus manos los resultados de la aplicación de PISA, recordemos que la mejora de la calidad depende fundamentalmente de dos factores: el primero es el tipo de sistema, y el otro son los factores que operan en el aula. Los otros factores son la infraestructura, el financiamiento de la edu- cación, actores claves en la educación, el capital humano dado por el nivel de calidad de los profesores, el contexto de cómo dividir las Gráfico 4: Retos y apoyos 01_28 PISA.indd 2601_28 PISA.indd 26 10/23/09 6:38:56 PM10/23/09 6:38:56 PM
  • 27. 27 responsabilidades, el currículo y la evaluación. Todos estos factores también influyen en los resultados. En temas como descentralización quisiera tener un poco de precau- ción. Tenemos ejemplos donde la descentralización de la educación ha significado realmente descentralización de la burocracia. Incluso hay muchos sistemas educativos que les va bien ahora que han cen- tralizado algunos aspectos, tales como estándares y currículo. PISA nos da información sobre lo que hacen los demás países, pero no nos invita a “copiar y pegar” los sistemas educativos de otros paí- ses. Lo que es recomendable hacer es ver, comparativamente, cuáles son las políticas que están detrás del éxito y cómo se puede configurar este tipo de políticas que les permitieron mejorar o crear un nuevo sistema educativo. Las principales referencias comparativas deben ser los países cercanos cultural, geográfica y socioeconómicamente. PISA: Lo que el Perú puede aprender PISA nos da información sobre lo que hacen los demás países, pero no nos invita a “copiar y pegar” los sistemas educativos de otros países. Gráfico 5: Posicionando al Perú 01_28 PISA.indd 2701_28 PISA.indd 27 10/23/09 6:38:57 PM10/23/09 6:38:57 PM
  • 28. © 2009, Santillana S.A. Santillana S.A. Av. Primavera 2160, Santiago de Surco, Lima 33 - Perú Teléfono: 313-4000 / Fax: 313-4001 Coeditor: Consejo Nacional de Educación Primera edición: octubre del 2009 Tiraje: 3000 ejemplares Impreso en el Perú - Printed in Peru Corporación Gráfica GRAMBS Av. José Gálvez No 1216 Santa Beatriz, Lima 1 - Perú ISBN 978-9972-37-446-3 Registro de Proyecto Editorial No 2150140009000818 Hecho el Depósito Legal en la Biblioteca Nacional del Perú No 2009-13505 DISTRIBUCIÓN GRATUITA Todos los derechos reservados. Esta publicación no puede ser reproducida, ni en todo ni en parte, ni registrada o transmitida por un sistema de recuperación de información, en ninguna forma y por ningún medio, sea mecánico, fotoquímico, electrónico, magnético, electroóptico, por fotocopia, o cualquier otro, sin el permiso previo de la Editorial. 01_28 PISA.indd 2801_28 PISA.indd 28 10/23/09 6:38:58 PM10/23/09 6:38:58 PM