MAO.  ARACELI  NUÑEZ  THIERRY <ul><li>Elaboración de reactivos de opción múltiple para pruebas objetivas: CENEVAL, PISA, E...
Elaboración de reactivos de opción múltiple para pruebas objetivas:  CENEVAL, PISA, EXCALE, ENLACE
Concepto de evaluación Evaluación educativa Evaluación del aprendizaje Evaluación del desempeño Tipología de la evaluación...
Evaluación <ul><li>Proceso de indagación dirigido a recolectar información cuantitativa y cualitativa con el propósito de ...
Evaluación <ul><li>La emisión de juicios de valor y mérito a partir de un proceso de descripción, análisis e interpretació...
Evaluación <ul><li>La meta principal de la evaluación consiste en obtener información relacionada con el atributo o domini...
Evaluación Educativa <ul><li>Es una actividad continua e integrada que tiene por objetivo proporcionar la mayor cantidad d...
Evaluación Educativa <ul><li>Debe ser funcional, sistemática, continua, integral, orientadora y cooperativa. </li></ul><ul...
Evaluación Educativa <ul><li>Integral,  considera aspectos cognoscitivos, psicomotores y afectivos </li></ul><ul><li>  </l...
La evaluación educativa brinda información que permite: <ul><li>conocer la calidad del proceso educativo, </li></ul><ul><l...
Evaluación del aprendizaje <ul><li>Es el conjunto de operaciones que tiene por objeto determinar o valorar los logros alca...
Evaluación del aprendizaje <ul><li>Es un proceso sistemático mediante el cual se recoge información acerca del aprendizaje...
La evaluación del aprendizaje muestra <ul><li>La eficacia y las limitaciones del sistema educativo </li></ul><ul><li>El gr...
Evaluación del desempeño <ul><li>Proceso sistemático de obtención de datos válidos y confiables que permite emitir un juic...
Tipología de la evaluación <ul><li>Por su funcionalidad </li></ul><ul><li>Sumativa </li></ul><ul><li>Formativa </li></ul><...
Tipología de la evaluación <ul><li>Por su normotipo </li></ul><ul><li>Nomotética   </li></ul><ul><ul><li>Normativa </li></...
Esta clasificación depende de varios factores y deben responder a las siguientes preguntas: <ul><li>¿Qué se evalúa? – Cont...
La evaluación por su función se puede clasificar en: <ul><li>Diagnóstica.  Aporta información acerca del aprendizaje que p...
La evaluación formativa puede ayudar a <ul><li>Motivar al estudiante. </li></ul><ul><li>Diagnosticar y remediar las dificu...
Un criterio . Los resultados s e  interpreta en función de un parámetro previamente establecido. En términos de la interpr...
La norma . Los resultados se interpretan con base en la comparación del rendimiento individual con el grupo evaluado. En t...
Características de una buena evaluación <ul><li>El currículum prescrito  (planes y programas) </li></ul><ul><li>El currícu...
Medición <ul><li>Es asignar números a las características o atributos de objetos, personas o procesos medidos, de acuerdo ...
Características de los instrumentos de medición <ul><li>Validez.  Es la congruencia que existe entre lo que se planeó medi...
Validez de contenido <ul><li>Es el grado en que la muestra de reactivos es representativa de los rasgos que pretende medir...
Validez predictiva <ul><li>Indica la efectividad de la prueba para predecir algún resultado futuro. </li></ul>
Validez concurrente <ul><li>Se obtiene al correlacionarse estadísticamente con otra prueba que mida el mismo rasgo. </li><...
La prueba pierde validez cuando: <ul><li>Cuando están fuera de la comprensión del grupo, porque: </li></ul><ul><li>Contien...
Estándares de calidad <ul><li>Estándar de utilidad,  implica que el instrumento es de provecho y beneficia al proceso de e...
Pruebas estandarizadas y no estandarizadas Rasgos o aspectos clave de las pruebas objetivas Pruebas objetivas: CENEVAL, PI...
Pruebas no estandarizadas <ul><li>Se elaboran para utilizarlas en un salón con un solo grupo de alumnos </li></ul><ul><li>...
Pruebas estandarizadas  <ul><li>Son las que administran, califican e interpretan del mismo modo en todos los casos, sin qu...
Pruebas estandarizadas <ul><li>Están destinadas a varios grupos en condiciones  idénticas de aplicación, calificación e in...
Rasgos de las pruebas objetivas <ul><li>Propósito general </li></ul><ul><li>Propósito especifico </li></ul><ul><li>Dominio...
Propósito general <ul><li>Evaluar personas </li></ul><ul><li>Evaluar programas educativos </li></ul><ul><li>Evaluar centro...
Propósito específico <ul><li>Responden a lo que se quiere hacer con la evaluación </li></ul><ul><li>¿Se busca un diagnósti...
Dominio explorado <ul><li>Alineadas al currículo </li></ul><ul><li>Conocimientos o habilidades genéricas </li></ul><ul><li...
Cobertura del dominio <ul><li>Homogéneo todos los sustentantes deben responder a las mismas preguntas  </li></ul><ul><li>M...
Referencia para reportar los resultados <ul><li>Por norma ordena a los sustentantes según el desempeño de la prueba. La re...
Tipos de población <ul><li>Los instrumentos de evaluación pueden estar planeados para conocer el comportamiento de ciertos...
Cobertura de la población <ul><li>Censo ENLACE </li></ul><ul><li>Muestra PISA </li></ul><ul><li>De acuerdo a la demanda EX...
Tipos de reactivos <ul><li>Opción múltiple </li></ul><ul><li>Respuesta construida </li></ul><ul><li>Portafolio de evidenci...
Control de la población <ul><li>Alto </li></ul><ul><li>Bajo </li></ul>
Impacto sobre los sustentantes <ul><li>Alto </li></ul><ul><li>Bajo </li></ul>
Periodicidad <ul><li>Anual </li></ul><ul><li>Cada dos, tres o cuatro años </li></ul><ul><li>Cuando se requieren datos </li...
P ruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE AÑO INSTRUMENTO O PROGRAMA DESCRIPCIÓN 1984 SIN Programa para evaluar a ...
Pruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE AÑO INSTRUMENTO O PROGRAMA DESCRIPCIÓN 1995 TIMSS Tercer estudio internac...
Centro Nacional de Evaluación de la Educación Superior. CENEVAL Servicios de evaluación a disposición de las instituciones...
CENEVAL  <ul><li>Objetivos </li></ul><ul><li>Elaboración y aplicación de instrumentos de medición de conocimientos y habil...
Ingreso Superior Media superior Posgrado EXANI-I EXANI-II EXANI-III Exámenes Ceneval Egreso Licenciatura T. S. universitar...
Instrumentos de Evaluación EXANI I, II y III <ul><li>Funciones: </li></ul><ul><li>La  de selección  son herramientas que m...
Exámenes Generales para el Egreso de las Licenciaturas (EGEL) <ul><li>Contribuir a la mejora de la educación superior. Los...
Exámenes Generales para el Egreso de las Licenciaturas (EGEL) <ul><li>Exámenes de acreditación </li></ul><ul><li>Identific...
OCDE  PISA Programme for International Student Assessment  Programa Internacional de Evaluación de Estudiantes,  http://ww...
Programme for International Student Assessment  PISA <ul><li>Programa Internacional de Evaluación de Estudiantes,  </li></...
¿Qué evalúa PISA? <ul><li>La evaluación cubre las áreas de lectura, matemáticas y ciencias. Esta prueba mide competencias ...
¿Qué evalúa PISA? <ul><li>Es importante mencionar que, en PISA no se evalúa el aprendizaje de los conocimientos establecid...
Competencias <ul><li>La evaluación de PISA se centra en tres áreas que tradicionalmente se han considerado claves para el ...
Competencia lectora <ul><li>Es la capacidad para comprender, emplear información y reflexionar a partir de textos escritos...
Competencia en ciencias <ul><li>Se entiende como la capacidad de emplear el conocimiento científico para identificar pregu...
Competencia matemática <ul><li>Se refiere a la capacidad para analizar, razonar y comunicar eficazmente cuando se enuncian...
Dimensiones de competencia lectora DIMENSIONES  ASPECTOS Procesos Son las tareas o actividades que se deben demostrar en f...
Dimensiones de competencia matemática <ul><li>Procesos </li></ul><ul><li>Contenido </li></ul><ul><li>Contexto </li></ul>
Dimensiones de competencia matemática DIMENSIONES  ASPECTOS Procesos Son las capacidades de los estudiantes que deben acti...
Dimensiones de competencia matemática DIMENSIONES  ASPECTOS Contenido Cantidad  Este tema se centra en la importancia de l...
Dimensiones de competencia matemática DIMENSIONES  ASPECTOS Contexto o situación Son los ámbitos en que se sitúan los prob...
Dimensiones de competencia en ciencias Nivel Tarea Máximo Los estudiantes son capaces de crear o utilizar modelos conceptu...
EXCALE Exámenes de la Calidad y el Logro Educativo http://enlace.sep.gob.mx
¿Qué son los EXCALE? <ul><li>Son pruebas externas, de gran escala y de bajo impacto. </li></ul><ul><li>• Externas, porque ...
¿Qué son los EXCALE? <ul><li>De  gran escala, porque deben ser igualmente confiables y válidas para  representar los nivel...
¿Para qué sirven los EXCALE? <ul><li>• Conocer los niveles de logro educativo que alcanzan los estudiantes tanto a nivel n...
¿Para qué sirven los EXCALE? <ul><li>Conocer los contenidos curriculares a nivel nacional y por entidad federativa que dom...
Objetivos <ul><li>Conocer los niveles de logro educativo que alcanzan los estudiantes del Sistema Educativo Nacional (SEN)...
Objetivos <ul><li>Conocer la distancia entre los aprendizajes de los estudiantes, en las asignaturas evaluadas.    </li></...
Objetivos <ul><li>Identificar los factores de contexto correspondientes al estudiante y a la escuela que se asocian al apr...
Características <ul><li>Proporciona información valida y confiable del desempeño del sistema educativo nacional en su conj...
Características <ul><li>Instacia que lo promueven :  Instituto Nacional para la Evaluación de la Educación (INEE). </li></...
Características <ul><li>Población: Estudiantes de los grados terminales de cada ciclo escolar y que representen momentos d...
ENLACE Evaluación Nacional del Logro Académico en Centros Escolares http://enlace.sep.gob.mx
¿Qué es ENLACE? <ul><li>Es una prueba que tiene como principal objetivo proporcionar información respecto del nivel de dom...
ENLACE <ul><li>Permite retroalimentar a padres de familia, estudiantes, docentes, directivos y autoridades educativas con ...
ENLACE <ul><li>Es un examen que compara a cada estudiante con la totalidad de los demás estudiantes de su grado sin preten...
Características <ul><li>Es una prueba objetiva y  estandarizada , de aplicación masiva y controlada. </li></ul><ul><li>Emp...
Propósitos de ENLACE  <ul><li>Generar una sola escala de carácter nacional que proporcione información comparable del logr...
¿Qué evalúa? <ul><li>Conocimientos y habilidades definidos en los planes y programas oficiales de estudio de educación bás...
INSTACIA(S) QUE LO PROMUEVEN:  Secretaría de Educación Pública (SEP), a través de la  Dirección General de Evaluación de P...
Rasgo ENLACE EXANI Propósito general Evaluar sujetos Evaluar sujetos Propósito especifico Diagnóstico Admisión Dominio exp...
Rasgo EXCALE PISA Propósito general Evaluar al sistema educativo Evaluar al sistema educativo Propósito especifico Diagnós...
Proceso de construcción de una prueba objetiva <ul><li>Metodología CENEVAL </li></ul>
¿Por qué CENEVAL? <ul><li>Proceso de construcción de la prueba ENLACE 2010  </li></ul><ul><li>1) diseño </li></ul><ul><li>...
¿Por qué CENEVAL? <ul><li>Proceso de diseño, construcción, aplicación y validación de los EXCALE </li></ul><ul><li>Planeac...
¿Por qué CENEVAL? <ul><li>El proyecto PISA esta basado en:  </li></ul><ul><li>International Association for the Evaluation...
Metodología a CENEVAL <ul><li>Apegado a estándares de calidad internacional </li></ul><ul><li>International Association fo...
Metodología a CENEVAL <ul><li>Diseño </li></ul><ul><li>Construcción </li></ul><ul><li>Verificación </li></ul><ul><li>Ensam...
Diseño <ul><li>Se definen los  elementos que constituyen el marco de referencia en los que se fundamentará todo el proceso...
Construcción <ul><li>En esta fase se lleva a cabo la materialización del objeto de medición –definido en el perfil referen...
Verificación <ul><li>El objetivo de esta fase es verificar la calidad de los reactivos que se elaboran para los exámenes. ...
Ensamble <ul><li>En esta fase se integran las versiones operativas del examen y se supervisa la calidad de los cuadernillo...
Aplicación <ul><li>Esta fase tiene como objetivo disponer de los procedimientos adecuados para que los sustentantes respon...
Calificación <ul><li>Se procesa la información </li></ul><ul><li>21. Lectura y corrección </li></ul><ul><li>22. Calificaci...
Reportes <ul><li>Se comunica los resultados de la evaluación </li></ul><ul><li>24. Reportes a sustentantes </li></ul><ul><...
Mantenimiento <ul><li>El objetivo de esta fase es mantener actualizado el contenido del instrumento y de todos los insumos...
Próxima SlideShare
Cargando en…5
×

Sesion 1 curso de verano

2.704 visualizaciones

Publicado el

Evaluación, evaluación educativa, evaluación de desempeño, evaluación del aprendizaje, medición

Publicado en: Educación
0 comentarios
7 recomendaciones
Estadísticas
Notas
  • Sé el primero en comentar

Sin descargas
Visualizaciones
Visualizaciones totales
2.704
En SlideShare
0
De insertados
0
Número de insertados
42
Acciones
Compartido
0
Descargas
111
Comentarios
0
Recomendaciones
7
Insertados 0
No insertados

No hay notas en la diapositiva.
  • Enlace evalúa personas mientras que PISA evalúa a los sistemas educativos
  • Enlace es una prueba que proporciona un diagnóstico de cada estudiante; EXANI ayuda a las instituciones a tomar decisiones de admisión
  • La prueba PISA explora habilidades genéricas ya que no está asociada a ningún currículo nacional. Las pruebas EXCALE utilizadas en la educación básica nacional están ligadas al currículo, ya que evalúan el nivel de cumplimiento de éste en cada uno de los grados explorados
  • CENEVAL se califica por norma las instituciones determinan el punto de corte el cual esta delimitado por los cupos de las propias instituciones. La prueba PISA reporta las proporciones de sujetos que caen en cada nivel de dominio se califica por criterio.
  • Sesion 1 curso de verano

    1. 1. MAO. ARACELI NUÑEZ THIERRY <ul><li>Elaboración de reactivos de opción múltiple para pruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE </li></ul>
    2. 2. Elaboración de reactivos de opción múltiple para pruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE
    3. 3. Concepto de evaluación Evaluación educativa Evaluación del aprendizaje Evaluación del desempeño Tipología de la evaluación Características de una buena evaluación Medición Características de los instrumentos de medición <ul><li>Aspectos teóricos básicos de la evaluación educativa </li></ul>
    4. 4. Evaluación <ul><li>Proceso de indagación dirigido a recolectar información cuantitativa y cualitativa con el propósito de obtener conclusiones sobre el valor, mérito, importancia o calidad de un programa, producto, persona, política, propuesta o plan. </li></ul>
    5. 5. Evaluación <ul><li>La emisión de juicios de valor y mérito a partir de un proceso de descripción, análisis e interpretación de información relevante. </li></ul><ul><li>Es la acción sistemática que recaba información objetiva y útil para la toma de decisiones racionales </li></ul>
    6. 6. Evaluación <ul><li>La meta principal de la evaluación consiste en obtener información relacionada con el atributo o dominio a evaluar para contrastarla contra criterios y estándares previamente fijados para determinar su valor </li></ul>
    7. 7. Evaluación Educativa <ul><li>Es una actividad continua e integrada que tiene por objetivo proporcionar la mayor cantidad de información para valorarla y tomar decisiones pertinentes respecto al objeto o sujeto de evaluación . </li></ul>
    8. 8. Evaluación Educativa <ul><li>Debe ser funcional, sistemática, continua, integral, orientadora y cooperativa. </li></ul><ul><li>Funcional, en tanto que se realiza para alcanzar o cumplir con ciertos propósitos, se evalúa para tener información relevante, enjuiciarla y tomar decisiones. </li></ul><ul><li>  </li></ul><ul><li>Sistemática, requiere de cierta organización, control, regulación y evidencias de los pasos metodológicos necesarios para realizarla. </li></ul><ul><li>  </li></ul><ul><li>Continua, No solamente se realiza al final de un ciclo escolar o unidad temática, sino como una actividad en diferentes momentos y con diferentes propósitos. </li></ul><ul><li>  </li></ul>
    9. 9. Evaluación Educativa <ul><li>Integral, considera aspectos cognoscitivos, psicomotores y afectivos </li></ul><ul><li>  </li></ul><ul><li>Orientadora, que sirva para mejorar, reorientar, remediar la practica educativa; solo se puede mejorar aquello que se evalúa. </li></ul><ul><li>  </li></ul><ul><li>Cooperativa, es un proceso socializado desde su concepción, sus fases y procedimientos. </li></ul><ul><li>  </li></ul>
    10. 10. La evaluación educativa brinda información que permite: <ul><li>conocer la calidad del proceso educativo, </li></ul><ul><li>fundamentar la toma de decisiones educativas, </li></ul><ul><li>mejorar la planeación del proceso educativo, </li></ul><ul><li>decidir sobre la certificación de sujetos, </li></ul><ul><li>determinar la acreditación de programas. </li></ul>
    11. 11. Evaluación del aprendizaje <ul><li>Es el conjunto de operaciones que tiene por objeto determinar o valorar los logros alcanzados por los alumnos en el proceso enseñanza-aprendizaje con respecto a los objetivos planteados en los programas de estudio. </li></ul>
    12. 12. Evaluación del aprendizaje <ul><li>Es un proceso sistemático mediante el cual se recoge información acerca del aprendizaje del alumno y que permite evaluar ese aprendizaje y detectar elementos para formular un juicio acerca del nivel alcanzado, de la calidad del aprendizaje logrado y de lo que el alumno es capaz de hacer con ese aprendizaje </li></ul>
    13. 13. La evaluación del aprendizaje muestra <ul><li>La eficacia y las limitaciones del sistema educativo </li></ul><ul><li>El grado en que los alumnos logran productos de aprendizaje </li></ul><ul><li>La eficacia de la acción docente </li></ul>
    14. 14. Evaluación del desempeño <ul><li>Proceso sistemático de obtención de datos válidos y confiables que permite emitir un juicio de valor acerca del nivel de logro alcanzado por un individuo en un examen, en relación a los conocimientos, habilidades y competencias previamente establecidos. </li></ul><ul><li>Algunos ejemplos de evaluación del desempeño que se realizan en México son: </li></ul><ul><li>EXANI </li></ul><ul><li>EGEL </li></ul><ul><li>Enlace </li></ul><ul><li>PISA </li></ul><ul><li>Excale </li></ul>
    15. 15. Tipología de la evaluación <ul><li>Por su funcionalidad </li></ul><ul><li>Sumativa </li></ul><ul><li>Formativa </li></ul><ul><li>Por su temporalidad </li></ul><ul><li>Inicial </li></ul><ul><li>Procesual </li></ul><ul><li>Final </li></ul><ul><li>  </li></ul>
    16. 16. Tipología de la evaluación <ul><li>Por su normotipo </li></ul><ul><li>Nomotética </li></ul><ul><ul><li>Normativa </li></ul></ul><ul><ul><li>Criterial </li></ul></ul><ul><li>Por sus agentes </li></ul><ul><li>Autoevaluación </li></ul><ul><li>Coevaluación </li></ul><ul><li>Heteroevaluación </li></ul><ul><li>  </li></ul>
    17. 17. Esta clasificación depende de varios factores y deben responder a las siguientes preguntas: <ul><li>¿Qué se evalúa? – Contenidos curriculares </li></ul><ul><li>¿Para qué evalúa? – Propósitos </li></ul><ul><li>¿Cómo se evalúa? – Técnicas e instrumentos de proyección e interpretación </li></ul><ul><li>¿Cuándo se evalúa? – Período de aplicación </li></ul>
    18. 18. La evaluación por su función se puede clasificar en: <ul><li>Diagnóstica. Aporta información acerca del aprendizaje que poseen los sustentantes al inicio de un curso, programa o proceso de capacitación. Permite analizar los conocimientos previos del alumno para enfrentar una nueva situación de aprendizaje </li></ul><ul><li>Formativa. Verifica la manera en que se lleva a cabo el proceso y se realiza periódicamente con el objeto de retroalimentarlo y reconducirlo. </li></ul><ul><li>Sumativa. Obtiene información acerca de la integración del aprendizaje al término del proceso al que el sustentante se vio expuesto y permite emitir juicios de acreditación. </li></ul>
    19. 19. La evaluación formativa puede ayudar a <ul><li>Motivar al estudiante. </li></ul><ul><li>Diagnosticar y remediar las dificultades en el proceso de aprendizaje. </li></ul><ul><li>Promover la autoevaluación. </li></ul><ul><li>Clasificar los objetivos de aprendizaje. </li></ul>
    20. 20. Un criterio . Los resultados s e interpreta en función de un parámetro previamente establecido. En términos de la interpretación de sus resultados, la evaluación se realiza con base en: 100 Punto de corte Juicio de expertos INSUFICIENTE SUFICIENTE 0
    21. 21. La norma . Los resultados se interpretan con base en la comparación del rendimiento individual con el grupo evaluado. En términos de la interpretación de sus resultados, la evaluación se realiza con base en:
    22. 22. Características de una buena evaluación <ul><li>El currículum prescrito (planes y programas) </li></ul><ul><li>El currículum implementado (programas efectivamente desarrollados en el aula) </li></ul><ul><li>El currículum logrado (rendimiento del alumno) </li></ul>
    23. 23. Medición <ul><li>Es asignar números a las características o atributos de objetos, personas o procesos medidos, de acuerdo con reglas, parámetros o criterios establecidos. </li></ul><ul><li>En el ámbito educativo, el proceso de medición es fundamentalmente descriptivo puesto que indica, mediante una representación numérica, en qué medida un sujeto posee conocimientos y habilidades. </li></ul>
    24. 24. Características de los instrumentos de medición <ul><li>Validez. Es la congruencia que existe entre lo que se planeó medir y lo que se mide. </li></ul><ul><li>Confiabilidad. Sus resultados son estables y consistentes, para emitir un juicio. </li></ul><ul><li>Objetividad. Los resultados del instrumento son independientes de quien aplica y califica. </li></ul>
    25. 25. Validez de contenido <ul><li>Es el grado en que la muestra de reactivos es representativa de los rasgos que pretende medir. </li></ul><ul><li>Esta relacionada con la planeación del instrumento. </li></ul>
    26. 26. Validez predictiva <ul><li>Indica la efectividad de la prueba para predecir algún resultado futuro. </li></ul>
    27. 27. Validez concurrente <ul><li>Se obtiene al correlacionarse estadísticamente con otra prueba que mida el mismo rasgo. </li></ul>
    28. 28. La prueba pierde validez cuando: <ul><li>Cuando están fuera de la comprensión del grupo, porque: </li></ul><ul><li>Contienen asuntos elevados. </li></ul><ul><li>Incluyen dibujos y esquemas complicados. </li></ul><ul><li>Se emplea un lenguaje con términos difíciles. </li></ul><ul><li>Su contenido plantea la resolución de problemas largos y de difícil lectura. </li></ul><ul><li>Cuando piden muchos datos de carácter memorístico (ejemplo: reproducción exacta de datos y un exceso de fórmulas) </li></ul><ul><li>Cuando se altera el estado emocional de los alumnos, como sucede al aplicar una prueba en presencia de personas extrañas (exámenes públicos) </li></ul>
    29. 29. Estándares de calidad <ul><li>Estándar de utilidad, implica que el instrumento es de provecho y beneficia al proceso de enseñanza aprendizaje. Que al estudiante le sirve para conocer su rendimiento, sus debilidades y fortaleza. </li></ul><ul><li>Estándar de exactitud, implica que el instrumento requiere seguir una metodología, procedimientos y tareas. </li></ul><ul><li>Estándares de equidad, ofrecen al estudiante condiciones de equidad al ser evaluados. </li></ul><ul><li>Estándares de factibilidad, implica que el instrumento es viable y ejecutable dadas las particulares de tiempo, espacio, recursos </li></ul>
    30. 30. Pruebas estandarizadas y no estandarizadas Rasgos o aspectos clave de las pruebas objetivas Pruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE Proceso de construcción de una prueba objetiva. <ul><li>Las pruebas como instrumentos de evaluación </li></ul>
    31. 31. Pruebas no estandarizadas <ul><li>Se elaboran para utilizarlas en un salón con un solo grupo de alumnos </li></ul><ul><li>Reflejan el área de preferencia del profesor </li></ul><ul><li>El docente no tiene la intención de comparar el avance educativo del grupo con otro </li></ul>
    32. 32. Pruebas estandarizadas <ul><li>Son las que administran, califican e interpretan del mismo modo en todos los casos, sin que importe dónde ni cuándo se apliquen </li></ul>
    33. 33. Pruebas estandarizadas <ul><li>Están destinadas a varios grupos en condiciones idénticas de aplicación, calificación e interpretación. </li></ul><ul><li>Se elabora para hacer comparaciones objetivas entre alumnos de diversos grupos, escuelas, estados, países. </li></ul><ul><li>Pocas evaluaciones hechas por el docente son estandarizadas </li></ul>
    34. 34. Rasgos de las pruebas objetivas <ul><li>Propósito general </li></ul><ul><li>Propósito especifico </li></ul><ul><li>Dominio explorado </li></ul><ul><li>Cobertura del dominio </li></ul><ul><li>Referencia para reportar los resultados </li></ul><ul><li>Tipos de población </li></ul><ul><li>Cobertura de la población </li></ul><ul><li>Tipos de reactivos </li></ul><ul><li>Control de la aplicación </li></ul><ul><li>Impacto sobre los sustentantes </li></ul><ul><li>Periodicidad </li></ul>
    35. 35. Propósito general <ul><li>Evaluar personas </li></ul><ul><li>Evaluar programas educativos </li></ul><ul><li>Evaluar centro escolares </li></ul><ul><li>Evaluar sistemas educativos </li></ul>
    36. 36. Propósito específico <ul><li>Responden a lo que se quiere hacer con la evaluación </li></ul><ul><li>¿Se busca un diagnóstico? </li></ul><ul><li>¿Se pretende clasificar? Admisión a un centro escolar </li></ul><ul><li>¿Certificar un centro escolar? </li></ul><ul><li>Clasificación de centros </li></ul><ul><li>Rendición de cuentas </li></ul>
    37. 37. Dominio explorado <ul><li>Alineadas al currículo </li></ul><ul><li>Conocimientos o habilidades genéricas </li></ul><ul><li>Habilidades específicas de un puesto o profesión </li></ul>
    38. 38. Cobertura del dominio <ul><li>Homogéneo todos los sustentantes deben responder a las mismas preguntas </li></ul><ul><li>Modular </li></ul>
    39. 39. Referencia para reportar los resultados <ul><li>Por norma ordena a los sustentantes según el desempeño de la prueba. La referencia fundamental es el grupo que ha presentado la prueba. </li></ul><ul><li>Por criterio se determina una o varias calificaciones de corte y establece de esta manera ciertos niveles de dominio o desempeño </li></ul>
    40. 40. Tipos de población <ul><li>Los instrumentos de evaluación pueden estar planeados para conocer el comportamiento de ciertos grados. </li></ul><ul><li>Ciertos grados ENLACE, EXCALE </li></ul><ul><li>Cierta edad PISA </li></ul><ul><li>Todos los aspirantes EXANI </li></ul><ul><li>Otro criterio </li></ul>
    41. 41. Cobertura de la población <ul><li>Censo ENLACE </li></ul><ul><li>Muestra PISA </li></ul><ul><li>De acuerdo a la demanda EXANI </li></ul>
    42. 42. Tipos de reactivos <ul><li>Opción múltiple </li></ul><ul><li>Respuesta construida </li></ul><ul><li>Portafolio de evidencias </li></ul><ul><li>Examen oral </li></ul>
    43. 43. Control de la población <ul><li>Alto </li></ul><ul><li>Bajo </li></ul>
    44. 44. Impacto sobre los sustentantes <ul><li>Alto </li></ul><ul><li>Bajo </li></ul>
    45. 45. Periodicidad <ul><li>Anual </li></ul><ul><li>Cada dos, tres o cuatro años </li></ul><ul><li>Cuando se requieren datos </li></ul><ul><li>Sin periodicidad definida </li></ul><ul><li>  </li></ul>
    46. 46. P ruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE AÑO INSTRUMENTO O PROGRAMA DESCRIPCIÓN 1984 SIN Programa para evaluar a docentes/investigadores y otorgarles apoyos económicos 1989 Conaeva Comisión para evaluar a las IES. En los hechos ya no opera 1989 IDANIS Instrumento de evaluación al término de la educación primaria 1991 CIEES Comités de pares académicos que evalúan programas de licenciatura 1994 EXANI Instrumento para ayudar a tomar las decisiones de admisión a la educación media y superior 1994 EGEL Instrumento que proporciona información sobre los egresados de 34 carreras
    47. 47. Pruebas objetivas: CENEVAL, PISA, EXCALE, ENLACE AÑO INSTRUMENTO O PROGRAMA DESCRIPCIÓN 1995 TIMSS Tercer estudio internacional de matemáticas y ciencias (IEA). México participó pero retiró los resultados del reporte final 1997 LLECE Prueba ligada al currículo para tercero y sexto grados de educación básica. Desarrollada por UNESCO para los países latinoamericanos. México ha participado desde el principio 1998 Estándares nacionales Primer esfuerzo por evaluar la educación básica nacional. En su lugar opera ahora la prueba Excale 1998 PISA Prueba internacional para evaluar las competencias básicas para la vida y el trabajo de los jóvenes de 15 años 2000 Copaes Comisión para acreditar a los órganos certificadores de programas académicos 2003 Excale Instrumento desarrollado por el INEE y destinado a evaluar al sistema educativo nacional 2006 Enlace Instrumento que proporciona información a estudiantes, docentes y padres de familia acerca del nivel de cada alumno de educación básica
    48. 48. Centro Nacional de Evaluación de la Educación Superior. CENEVAL Servicios de evaluación a disposición de las instituciones de educación superior. www.ceneval.edu.mx
    49. 49. CENEVAL <ul><li>Objetivos </li></ul><ul><li>Elaboración y aplicación de instrumentos de medición de conocimientos y habilidades. </li></ul><ul><li>Difusión de los resultados que arrojan las pruebas. </li></ul><ul><li>Promoción de la cultura de la evaluación. </li></ul><ul><li>Diseño de estrategias de evaluación. </li></ul>
    50. 50. Ingreso Superior Media superior Posgrado EXANI-I EXANI-II EXANI-III Exámenes Ceneval Egreso Licenciatura T. S. universitario EGEL EGETSU Acreditación Superior Básica Media superior Exasec Exaba (Acuerdo 286) Exali Diagnóstico Superior Media superior Conalep Exil Certificación Laboral Función pública Profesional ECEP
    51. 51. Instrumentos de Evaluación EXANI I, II y III <ul><li>Funciones: </li></ul><ul><li>La de selección son herramientas que miden la aptitud académica. Son útiles para proveer información relativa a la medida en que los sustentantes han desarrollado las habilidades intelectuales básicas indispensables para cursar los estudios posteriores. </li></ul><ul><li>b) La de diagnóstico indica el nivel de adquisición de un conjunto de conocimientos disciplinarios durante la educación del nivel que evalúa, los cuales son requisito previo para la integración de los nuevos contenidos en los estudios posteriores. </li></ul>
    52. 52. Exámenes Generales para el Egreso de las Licenciaturas (EGEL) <ul><li>Contribuir a la mejora de la educación superior. Los resultados pueden orientar a las IES para introducir mejoras a los programas y servicios. </li></ul><ul><li>Aportar elementos de juicio para la titulación. </li></ul>
    53. 53. Exámenes Generales para el Egreso de las Licenciaturas (EGEL) <ul><li>Exámenes de acreditación </li></ul><ul><li>Identifican si los sustentantes adquirieron los conocimientos y las habilidades que son equivalentes a los estudios que se proporcionan en un nivel escolar (por ejemplo, los exámenes de acreditación de la secundaria, el bachillerato o licenciatura. </li></ul><ul><li>Estos exámenes se aplican en momentos no ligados a procesos de instrucción. </li></ul><ul><li>Generalmente, los sustentantes son los que deciden tomar una prueba para mostrar que son aptos, por lo que no se aplican en determinados momentos del proceso educativo. </li></ul><ul><li>El Ceneval participa con la SEP en los procesos de acreditación de la secundaria, el bachillerato y de algunas licenciaturas (exámenes de los acuerdos 286 y 357). </li></ul>
    54. 54. OCDE PISA Programme for International Student Assessment Programa Internacional de Evaluación de Estudiantes, http://www.oecd.org http://www.pisa.oecd.org
    55. 55. Programme for International Student Assessment PISA <ul><li>Programa Internacional de Evaluación de Estudiantes, </li></ul><ul><li>OBJETIVO(S): Medir que tan bien estén preparados los jóvenes actualmente para enfrentar los retos del mundo moderno. </li></ul><ul><li>INSTACIA(S) QUE LO PROMUEVEN: </li></ul><ul><li>Organización para la  Cooperación y Desarrollo Económicos (OCDE) </li></ul><ul><li>Instituto Nacional para la Evaluación de la Educación (INEE) </li></ul><ul><li>POBLACIÓN: Jóvenes que están acabando el período de escolarización obligatoria (15 años) o se encuentran en el momento de ingresar a la educación post-secundaria o incorporarse a la vida laboral. </li></ul><ul><li>APLICACIÓN: Se lleva a cabo cada tres años con énfasis en diferentes dominios o áreas de evaluación. </li></ul>
    56. 56. ¿Qué evalúa PISA? <ul><li>La evaluación cubre las áreas de lectura, matemáticas y ciencias. Esta prueba mide competencias y habilidades para analizar y resolver problemas, manejar información y enfrentar situaciones relacionadas con cada una de estas áreas. </li></ul>
    57. 57. ¿Qué evalúa PISA? <ul><li>Es importante mencionar que, en PISA no se evalúa el aprendizaje de los conocimientos establecidos en los programas de las escuelas, ni tampoco está diseñada para evaluar el desempeño de los docentes, ni de los programas vigentes. </li></ul><ul><li>PISA no es un reporte del sistema educativo mexicano sino más bien un reporte de la manera de cómo el país, en su conjunto (sistema educativo, idiosincrasia, tradiciones, medios de comunicación, familia), educa a sus jóvenes </li></ul>
    58. 58. Competencias <ul><li>La evaluación de PISA se centra en tres áreas que tradicionalmente se han considerado claves para el aprendizaje en todos los sistemas educativos: Ciencias, Lectura y Matemáticas. </li></ul>
    59. 59. Competencia lectora <ul><li>Es la capacidad para comprender, emplear información y reflexionar a partir de textos escritos, con el fin de lograr las metas individuales, desarrollar el conocimiento y el potencial personal, y participar eficazmente en la sociedad. La lectura, desde la perspectiva de PISA, es vista como un proceso “activo” que implica no sólo la capacidad para comprender un texto sino la de reflexionar sobre el mismo a partir de las ideas y experiencias propias (INEE, 2005) </li></ul>
    60. 60. Competencia en ciencias <ul><li>Se entiende como la capacidad de emplear el conocimiento científico para identificar preguntas y extraer conclusiones basadas en hechos o evidencias con el fin de comprender y poder tomar decisiones sobre el mundo natural y los cambios realizados en él mediante la actividad humana (INEE; 2005) </li></ul>
    61. 61. Competencia matemática <ul><li>Se refiere a la capacidad para analizar, razonar y comunicar eficazmente cuando se enuncian, formulan y resuelven problemas matemáticos. La competencia matemática no se limita al conocimiento de la terminología, datos y procedimientos matemáticos, aunque lógicamente se incluyen, tampoco a las destrezas para realizar ciertas operaciones y cumplir con ciertos métodos. La competencia matemática implica la combinación de estos elementos para satisfacer las necesidades de la vida del individuo como ciudadano constructivo, comprometido y reflexivo (INEE; 2005) </li></ul>
    62. 62. Dimensiones de competencia lectora DIMENSIONES ASPECTOS Procesos Son las tareas o actividades que se deben demostrar en función de los tipos de tarea que los estudiantes encontrarán en la vida real. Nota : En lectura, con base en los procesos se organizan subescalas. Se espera que los estudiantes demuestren su capacidad para la: • Recuperación de información específica, • Interpretación de textos, y • Reflexión y evaluación de éstos. Contenido Es el tipo de texto que se incluye en la medición de lectura. Hay distintas formas en que el material escrito aparece y en cómo debe ser entendido (muchas y variadas, tales como prosa narrativa o presentación gráfica). PISA introduce textos continuos y discontinuos. Los textos continuos normalmente están organizados en oraciones y párrafos. También se distingue entre diferentes formas de prosa, como descripción, narración, exposición, argumentación y prescripción. Los textos discontinuos presentan la información de forma diferente en función de su estructura, por ejemplo: impresos, avisos y anuncios, convocatorias, listas, gráficos, formularios, diagramas o tablas. Contexto o situación Es una clasificación general de los textos basada en el motivo o propósito de su empleo o uso en la medición de la lectura. Se identifican cuatro situaciones: La situación está definida por el uso al que está destinado el texto. Por ejemplo, una novela, una carta, o una biografía se escriben para uso privado ; los anuncios o documentos oficiales, para uso público ; un manual o informe, para uso laboral ; y un libro de texto o una hoja de ejercicios para uso educativo .
    63. 63. Dimensiones de competencia matemática <ul><li>Procesos </li></ul><ul><li>Contenido </li></ul><ul><li>Contexto </li></ul>
    64. 64. Dimensiones de competencia matemática DIMENSIONES ASPECTOS Procesos Son las capacidades de los estudiantes que deben activarse para analizar, razonar y comunicar ideas de manera efectiva mediante el planteamiento, la formulación y la resolución de problemas matemáticos. Reproducción de cálculos simples o definiciones del tipo más familiar. Conexión. Requiere la reunión de ideas y procedimientos matemáticos para resolver problemas Reflexión . En este proceso se espera que el estudiante sepa lo que es una demostración matemática y sus diferencias con otros tipos de razonamiento
    65. 65. Dimensiones de competencia matemática DIMENSIONES ASPECTOS Contenido Cantidad Este tema se centra en la importancia de la cuantificación para entender y organizar el mundo. Espacio y forma Se relaciona con los fenómenos espaciales y geométricos. Cambio y relaciones Involucra las manifestaciones matemáticas del cambio. Este contenido se relaciona con el Álgebra   Probabilidad
    66. 66. Dimensiones de competencia matemática DIMENSIONES ASPECTOS Contexto o situación Son los ámbitos en que se sitúan los problemas de matemáticas. Las situaciones incluyen la vida personal, la vida escolar, en el trabajo y los deportes, en la comunidad local y en la sociedad. <ul><li>Situación personal . </li></ul><ul><li>Está relacionada con las actividades diarias de los estudiantes. </li></ul><ul><li>• Situación educativa o laboral. Referida a la escuela o al entorno de trabajo. </li></ul><ul><li>• Situación pública . </li></ul><ul><li>Se refiere a la comunidad local </li></ul><ul><li>• Situación científica . </li></ul><ul><li>Es más abstracta y puede implicar la comprensión de un proceso tecnológico, una interpretación teórica o un problema específicamente matemático. </li></ul>
    67. 67. Dimensiones de competencia en ciencias Nivel Tarea Máximo Los estudiantes son capaces de crear o utilizar modelos conceptuales sencillos para realizar predicciones o proporcionar explicaciones; analizar investigaciones científicas relacionadas con, por ejemplo, el diseño experimental o la identificación de una idea puesta a prueba; relacionar los datos como evidencia para evaluar puntos de vista alternativos o perspectivas diferentes; comunicar argumentos o descripciones científicas en detalle y con precisión. Medio Los estudiantes son capaces de utilizar conceptos científi cos para realizar predicciones o proporcionar explicaciones, reconocer preguntas que pueden ser contestadas mediante la investigación científica o identificar detalles de lo que ocurre en una investigación científi ca y seleccionar información relevante de datos o cadenas de razonamientos al elaborar o evaluar conclusiones. Mínimo Los estudiantes son capaces de recordar conocimiento factual científico de tipo sencillo (es decir, nombres, hechos, terminología, reglas simples) y de utilizar el conocimiento científico común al elaborar o evaluar conclusiones.
    68. 68. EXCALE Exámenes de la Calidad y el Logro Educativo http://enlace.sep.gob.mx
    69. 69. ¿Qué son los EXCALE? <ul><li>Son pruebas externas, de gran escala y de bajo impacto. </li></ul><ul><li>• Externas, porque las diseña, desarrolla y aplica una institución (INEE) cuya misión no es impartir la enseñanza, sino velar por su calidad a través de la evaluación del Sistema Educativo Nacional, acerca de los alumnos, maestros o escuelas </li></ul>
    70. 70. ¿Qué son los EXCALE? <ul><li>De gran escala, porque deben ser igualmente confiables y válidas para representar los niveles de logro educativo de los estudiantes de toda la nación, de todas sus entidades federativas y de las diversas condiciones educativas, culturales y económicas de los estudiantes </li></ul><ul><li>• De bajo impacto, porque los resultados no se utilizan para tomar decisiones </li></ul>
    71. 71. ¿Para qué sirven los EXCALE? <ul><li>• Conocer los niveles de logro educativo que alcanzan los estudiantes tanto a nivel nacional como por estrato o modalidad y entidad federativa. </li></ul><ul><li>• Establecer las brechas y las diferencias en el aprendizaje que alcanzan lo estudiantes según el estrato o modalidad de escuelas a las que asisten, la entidad federativa en la que estudian, su sexo y edad. </li></ul>
    72. 72. ¿Para qué sirven los EXCALE? <ul><li>Conocer los contenidos curriculares a nivel nacional y por entidad federativa que dominan los estudiantes de los grados y asignaturas evaluadas, así como identificar los conocimientos y habilidades que no adquieren. Es por ello que se dice que los EXCALE son pruebas criteriales porque se diseñan para conocer con precisión el grado de dominio que el estudiante tiene sobre un conjunto de contenidos específicos. </li></ul>
    73. 73. Objetivos <ul><li>Conocer los niveles de logro educativo que alcanzan los estudiantes del Sistema Educativo Nacional (SEN).   </li></ul><ul><li>Establecer las brechas y las diferencias entre distintos grupos de estudiantes según el estrato o modalidad de escuelas a las que asisten, la entidad federativa en la que estudian, su sexo y  edad.   </li></ul>
    74. 74. Objetivos <ul><li>Conocer la distancia entre los aprendizajes de los estudiantes, en las asignaturas evaluadas.   </li></ul><ul><li>Proporcionar un conocimiento del rendimiento escolar que logran los estudiantes de cada grado evaluado en las asignaturas básicas del currículum nacional. </li></ul>
    75. 75. Objetivos <ul><li>Identificar los factores de contexto correspondientes al estudiante y a la escuela que se asocian al aprendizaje y que pueden contribuir a explicar las diferencias en el logro educativo de los distintos centros escolares. </li></ul>
    76. 76. Características <ul><li>Proporciona información valida y confiable del desempeño del sistema educativo nacional en su conjunto </li></ul><ul><li>Mide el desempeño de los sistemas y subsistemas educativos </li></ul>
    77. 77. Características <ul><li>Instacia que lo promueven : Instituto Nacional para la Evaluación de la Educación (INEE). </li></ul><ul><li>Aplicación: Considera un esquema de evaluación cíclico de  cada cuatro años, sin embargo se ha aplicado anualmente a partir de 2006, en grados terminales: 3º de Preescolar, 3º de Primaria, 6º  de Primaria y 3º de Secundaria. </li></ul>
    78. 78. Características <ul><li>Población: Estudiantes de los grados terminales de cada ciclo escolar y que representen momentos de inflexión en el desarrollo del aprendizaje del sistema educativo mexicano: tercer grado de preescolar, tercer grado de primaria, sexto grado de primaria, tercer grado de secundaria y tercer grado de bachillerato. </li></ul>
    79. 79. ENLACE Evaluación Nacional del Logro Académico en Centros Escolares http://enlace.sep.gob.mx
    80. 80. ¿Qué es ENLACE? <ul><li>Es una prueba que tiene como principal objetivo proporcionar información respecto del nivel de dominio de los estudiantes sobre los contenidos de las asignaturas de Español, Matemáticas y Ciencias. Se aplica cada año a todos los alumnos de 3º a 6º grados de primaria, de 3º de secundaria y de 3er año de educación media superior </li></ul>
    81. 81. ENLACE <ul><li>Permite retroalimentar a padres de familia, estudiantes, docentes, directivos y autoridades educativas con información para mejorar la calidad de la educación, promoviendo la transparencia y rendición de cuentas </li></ul>
    82. 82. ENLACE <ul><li>Es un examen que compara a cada estudiante con la totalidad de los demás estudiantes de su grado sin pretender “aprobar” o “reprobar” a nadie. Por ello, la prueba se diseña para que el promedio de todos los sustentantes de cada grado y asignatura sea de 500 puntos </li></ul>
    83. 83. Características <ul><li>Es una prueba objetiva y estandarizada , de aplicación masiva y controlada. </li></ul><ul><li>Emplea una metodología de calificación precisa, que proporciona referencias de comparación nacional. </li></ul><ul><li>Ofrece un diagnóstico de los estudiantes a nivel individual. </li></ul><ul><li>Es una prueba centrada en el conocimiento; evalúa el resultado del trabajo escolar contenido en los planes y programas oficiales. </li></ul><ul><li>Tiene bajo control sobre su administración y eso la hace vulnerable </li></ul>
    84. 84. Propósitos de ENLACE <ul><li>Generar una sola escala de carácter nacional que proporcione información comparable del logro académico de los estudiantes que permita: </li></ul><ul><li>Estimular la participación de los padres de familia en la tarea educativa. </li></ul><ul><li>Proporcionar elementos para facilitar la planeación de la enseñanza en el aula. </li></ul><ul><li>Atender requerimientos específicos de capacitación a docentes y directivos. </li></ul><ul><li>Sustentar procesos efectivos y pertinentes de planeación educativa y política públicas. </li></ul><ul><li>Atender criterios de transparencia y rendición de cuentas. </li></ul>
    85. 85. ¿Qué evalúa? <ul><li>Conocimientos y habilidades definidos en los planes y programas oficiales de estudio de educación básica, en las asignaturas de Matemáticas y Español . </li></ul>
    86. 86. INSTACIA(S) QUE LO PROMUEVEN: Secretaría de Educación Pública (SEP), a través de la  Dirección General de Evaluación de Políticas (DGEP). <ul><li>POBLACIÓN: Alumnos de 3° a 6° grado de educación primaria y 3° de secundaria en todas las escuelas públicas y privadas, urbanas y rurales del país; incluyendo las que atienden a la población en desventaja: educación comunitaria y cursos comunitarios, en las asignaturas de español y Matemáticas. En 2008 se aplicará también a estudiantes de 3º de bachillerato. </li></ul>
    87. 87. Rasgo ENLACE EXANI Propósito general Evaluar sujetos Evaluar sujetos Propósito especifico Diagnóstico Admisión Dominio explorado Competencias disciplinares Habilidades genéricas Cobertura del dominio Restringido Restringido Referencia para reportar los resultados Criterial Normativa Tipos de población Cada uno de los grados de primaria y secundaria y a quienes cursan el último grado de EMS Aspirantes Cobertura de la población Censo De acuerdo a la demanda Tipos de reactivos Opción múltiple Opción múltiple Control de la aplicación Bajo Alto Impacto sobre los sustentantes Bajo Alto Periodicidad Anual Cada admisión a una IEM Observaciones • Único instrumento nacional que ofrece un diagnóstico de todos los estudiantes • Tiene cobertura del dominio restringido. No se debe utilizar para evaluar al sistema educativo • Su aplicación masiva y su bajo control lo hacen vulnerable • No es una herramienta para certificar sujetos ni planteles • Instrumento predictivo de uso libre • Tiene un alto control de sus aplicaciones • Posee un dominio homogéneo lo cual garantiza equidad • Es de tipo normativo, no tiene calificación de corte • No es una muestra propiamente dicha
    88. 88. Rasgo EXCALE PISA Propósito general Evaluar al sistema educativo Evaluar al sistema educativo Propósito especifico Diagnóstico Diagnóstico Dominio explorado Alineada al currículo Habilidades para la vida Cobertura del dominio Amplio Amplio Referencia para reportar los resultados Criterial Criterial Tipos de población Ciertos grados escolares Sujetos de 15 años Cobertura de la población Muestra Muestra Tipos de reactivos Respuesta construida Respuesta construida Control de la aplicación Alto Alto Impacto sobre los sustentantes Bajo Bajo Periodicidad Cada cuatro años Cada tres años Observaciones • Es el instrumento por excelencia para evaluar al sistema educativo • Tiene gran cobertura del dominio • Evalúa niveles cognitivos más elevados • No da información de los sujetos • Es un buen resumen de cómo el país educa a sus ciudadanos • Permite comparaciones nacionales e internacionales • No es currículo
    89. 89. Proceso de construcción de una prueba objetiva <ul><li>Metodología CENEVAL </li></ul>
    90. 90. ¿Por qué CENEVAL? <ul><li>Proceso de construcción de la prueba ENLACE 2010 </li></ul><ul><li>1) diseño </li></ul><ul><li>2) construcción </li></ul><ul><li>3) verificación </li></ul><ul><li>4) ensamble </li></ul><ul><li>5) aplicación </li></ul><ul><li>6) calificación </li></ul><ul><li>7) reportes. </li></ul><ul><li>Las cuatro primeras siguieron la metodología del Ceneval y </li></ul><ul><li>cumplen con estándares de calidad internacionales; las tres </li></ul><ul><li>últimas estuvieron a cargo de la DGEP-SEP. </li></ul>
    91. 91. ¿Por qué CENEVAL? <ul><li>Proceso de diseño, construcción, aplicación y validación de los EXCALE </li></ul><ul><li>Planeación general </li></ul><ul><li>Estructuración de los Excale </li></ul><ul><li>Construcción de reactivos de los Excale </li></ul><ul><li>IV. Conformación de los Excale </li></ul><ul><li>V. Aplicación de los Excale </li></ul><ul><li>VI. Análisis e interpretación de resultados de los Excale </li></ul><ul><li>VII. Validación de los Excale </li></ul>
    92. 92. ¿Por qué CENEVAL? <ul><li>El proyecto PISA esta basado en: </li></ul><ul><li>International Association for the Evaluation of Educational Achievement (IEA, Asociación Internacional para la Evaluación del Rendimiento Académico) </li></ul><ul><li>Education Testing Service’s International Assessment of Educational Progress (IAEP, Asociación Internacional para la Evaluación del Progreso Educativo del ETS, Servicio de Evaluación Educativa) </li></ul>
    93. 93. Metodología a CENEVAL <ul><li>Apegado a estándares de calidad internacional </li></ul><ul><li>International Association for the Evaluation of Educational Achievement. </li></ul><ul><li>American Psychological Association </li></ul><ul><li>Educational Testing Service </li></ul><ul><li>The Joint Comitte on Standars for Educational Evaluation </li></ul>
    94. 94. Metodología a CENEVAL <ul><li>Diseño </li></ul><ul><li>Construcción </li></ul><ul><li>Verificación </li></ul><ul><li>Ensamble </li></ul><ul><li>Aplicación </li></ul><ul><li>Calificaciones </li></ul><ul><li>Reportes </li></ul><ul><li>Mantenimiento </li></ul>
    95. 95. Diseño <ul><li>Se definen los elementos que constituyen el marco de referencia en los que se fundamentará todo el proceso, como el perfil referencial y la estructura del instrumento de evaluación </li></ul><ul><li>1. Proyecto de evaluación </li></ul><ul><li>2. Diseño de la evaluación </li></ul><ul><li>3. Delimitación del contenido </li></ul>
    96. 96. Construcción <ul><li>En esta fase se lleva a cabo la materialización del objeto de medición –definido en el perfil referencial y en la estructura del examen– en los reactivos que conformarán el instrumento de evaluación. </li></ul><ul><li>4. Especificaciones de reactivos </li></ul><ul><li>5. Elaboración de reactivos </li></ul>
    97. 97. Verificación <ul><li>El objetivo de esta fase es verificar la calidad de los reactivos que se elaboran para los exámenes. </li></ul><ul><li>Revisión cualitativa </li></ul><ul><li>6. Revisión técnica de los reactivos </li></ul><ul><li>7. Validación externa de reactivos </li></ul><ul><li>8. Revisión de estilo </li></ul><ul><li>Revisión cuantitativa </li></ul><ul><li>9. Piloteo de reactivos </li></ul><ul><li>10. Calibración de reactivos </li></ul>
    98. 98. Ensamble <ul><li>En esta fase se integran las versiones operativas del examen y se supervisa la calidad de los cuadernillos de examen. </li></ul><ul><li>11. Integración de versiones operativas </li></ul><ul><li>12. Revisión editorial </li></ul><ul><li>13. Impresión del instrumento </li></ul>
    99. 99. Aplicación <ul><li>Esta fase tiene como objetivo disponer de los procedimientos adecuados para que los sustentantes respondan el instrumento de evaluación bajo condiciones controladas, estandarizadas, óptimas y equitativas. </li></ul><ul><li>14. Plan de aplicación </li></ul><ul><li>15. Registro de sustentantes </li></ul><ul><li>16. Capacitación </li></ul><ul><li>17. Almacenamiento y distribución </li></ul><ul><li>18. Aplicación del instrumento impreso (opcional) </li></ul><ul><li>19. Aplicación en línea (opcional) </li></ul><ul><li>20. Recepción y clasificación </li></ul>
    100. 100. Calificación <ul><li>Se procesa la información </li></ul><ul><li>21. Lectura y corrección </li></ul><ul><li>22. Calificación de sustentantes </li></ul><ul><li>23. Definición de niveles de desempeño y puntos de corte (exámenes criteriales) </li></ul>
    101. 101. Reportes <ul><li>Se comunica los resultados de la evaluación </li></ul><ul><li>24. Reportes a sustentantes </li></ul><ul><li>25. Reportes institucionales </li></ul>
    102. 102. Mantenimiento <ul><li>El objetivo de esta fase es mantener actualizado el contenido del instrumento y de todos los insumos relacionados, como el perfil referencial, la estructura del examen, los reactivos y sus parámetros estadísticos. </li></ul><ul><li>26. Consolidación de la información </li></ul><ul><li>27. Actualización de contenidos </li></ul><ul><li>28. Actualización de parámetros </li></ul>

    ×