Las Preguntas Educativas entran a las Aulas CIAESA Ccesa007.pdf
Marco de Referencia para la Cultura de la Calidad Educación - Marcceses v1.3.9f
1. COEPES/Puebla
MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD
Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
Prólogo
E
ste documento ha sido elaborado por el Grupo de Trabajo
(GT), integrado por el ÍnterComités1 de la Comisión Estatal
para la Planeación de la Educación Superior (COEPES), del
Estado de Puebla. Por sus propósitos amplios, el Marco de
Referencia para la Cultura de Calidad y Evaluación del
Sistema Educativo Estatal, es un instrumento necesario
para coordinar las metas y acciones impulsadas por las IES y el Sistema
Escolar, para lograr las finalidades establecidas en el Artículo Tercero
Constitucional, la Ley General de Educación y el Acuerdo 279, que regulan el
servicio educativo, a favor de la educación integrada de discentes plenos en el
desarrollo de las Capacidades Intelectuales Superiores (CIS), en la realización
creativa de prácticas profesionales, así como en actividades de investigación
científica, social, humanista, artística, técnica y tecnológica.
Los motivos e intereses académicos enunciados, son de importancia
estratégica clave para el desarrollo de los programas académicos, de las
instituciones educativas públicas y privadas –IES, y del Sistema Educativo
Estatal. En los hechos, los representantes de las IES integrantes de los
Comités y del ÍnterComités, así lo entendimos, dedicando el tiempo y
recursos necesarios propios para conceptuar e instrumentar el MARCO DE
REFERENCIA PARA LA CULTURA DE CALIDAD Y EVALUACIÓN DEL
SISTEMA DE EDUCACIÓN SUPERIOR, presentado hoy a la comunidad, para
su conocimiento, análisis crítico, sugerencias en su caso, así como para su
aplicación.
Convencidos de que la educación es un bien cultural legado de la
humanidad, al servicio del desarrollo de las cualidades humanas y medios
1 ÍnterComités: órgano de dirección provisional de los seis comités que integran a la COEPES. Para
realizar sus tareas el ÍnterComités crea Grupos de Trabajo (GT), que es el caso del conformado para
concebir y diseñar el Marco de Referencia para la Cultura de Calidad y Evaluación del Sistema de
Educación Superior del Estado de Puebla.
2. para la convivencia de la sociedad, orientamos el diseño del MARCO DE
REFERENCIA PARA LA CULTURA DE CALIDAD Y EVALUACIÓN DEL
SISTEMA DE EDUCACIÓN SUPERIOR, con intenciones, principios, procesos
y procedimientos técnicos racionales, sensibles y democráticos, entendiéndola
como sistema dinámico complejo de pensamiento, vida y trabajo. De allí que,
entre otras características, una importante es que el MARCO DE
REFERENCIA PARA LA CULTURA DE CALIDAD Y EVALUACIÓN DEL
SISTEMA DE EDUCACIÓN SUPERIOR, como modelo de desarrollo social,
surge de la realidad escolar. Es, en síntesis, un instrumento ideado por
académicos y funcionarios de las IES, participantes en el ÍnterComités, con
habilidades en docencia, investigación, organización y dirección de
Instituciones de Educación Superior; garantiza su nivel académico e
instrumental, la participación en su diseño y desarrollo, de los Maestros:
Carlos Castro, Marco Antonio Ramírez, Sergio Raúl Ortíz, Oscar Puig
Hernández, Jaime Bonilla, Luis Gerardo Ugalde, Rafael Fuentes, Adonai
González, Luis Torreblanca, y Alejandro Solís. Indudablemente, todos
aportaron cúmulos de experiencia, acopiada durante años de labores en la
vida escolar.
Sin embargo, convencidos de que en ciencias sociales no hay esquemas
cerrados, sino guías inteligentes, abiertas, para dirigir objetivos y procesos
complejos hacia resultados esperados, es deseo de los autores, concitar la
participación de la comunidad de IES del Estado para que opinen sobre él y
sugieran variaciones para su mejora. Sin dudas, el MARCO DE REFERENCIA
PARA LA CULTURA DE CALIDAD Y EVALUACIÓN DEL SISTEMA DE
EDUCACIÓN SUPERIOR, resulta ser un instrumento idóneo para planear,
programar, administrar, dirigir, realizar y evaluar los procesos académicos y
administrativos implicados en la actividad escolar.
El análisis crítico, redundará en la existencia de un instrumento más
representativo y democrático; es deseable que las IES realicen actividades de
estudio para la mejor comprensión y asimilación del presente documento. Los
beneficios de su aplicación a corto, mediano y largo plazo, permitirán dirigir
con mayor certeza las acciones de las IES, de los organismos rectores del
◙ 2 ◙
3. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
Estado, así como del conjunto del Sistema Educativo. En paralelo, aparte de
la fortaleza interna de los caminos de cada institución con rumbo a la Cultura
de Calidad y Evaluación, el MARCO DE REFERENCIA PARA LA CULTURA
DE CALIDAD Y EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR,
representa la oportunidad de la comunidad educativa del Estado de Puebla,
para asistir al ámbito de la nación con una posición paradigmática, opinión,
propuestas metodológicas y operativas propias, sobre la política educativa, de
administración de calidad y evaluación, y cómo concretarlas.
Aún más, el MARCO DE REFERENCIA PARA LA CULTURA DE
CALIDAD Y EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR, es
un instrumento de mediación que, al potenciar la Cultura de Calidad,
coadyuva al establecimiento de condiciones de equidad con los consejos y
agencias de evaluación externa, pues recuperando y revalorando las propias
acciones como principios del desarrollo de las entidades, entre ellas la
autoevaluación y el trabajo colegiado, concita invertir recursos económicos y
materiales al proceso propio. La cohesión de las unidades académicas, así
lograda, además de facilitar las condiciones subjetivas y objetivas de la
evaluación externa, la dignifica; haciéndola más accesible para el conjunto del
Sistema Escolar.
De acuerdo con la Autoridad educativa estatal y el propio Inter
Comités, se convino en la importancia de editar e imprimir el MARCO DE
REFERENCIA PARA LA CULTURA DE CALIDAD Y EVALUACIÓN DEL
SISTEMA DE EDUCACIÓN SUPERIOR, y difundirlo ampliamente en toda la
comunidad educativa, convocándola para que envíen observaciones,
comentarios y recomendaciones; poniéndolo a disposición de los organismos
pares, de los investigadores y de todos los interesados.
Hacia el crecimiento con calidad del servicio educativo, el marco de
referencia propone dar razones trascendentes para sustentar las metodologías
y procedimientos de trabajo empleados por cada entidad. Entre otras
proposiciones, el MARCO DE REFERENCIA PARA LA CULTURA DE
CALIDAD Y EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR, parte
de reconocer como elemento regulador del desarrollo las variaciones
3
4. regionales de la realidad nacional, en la que se desenvuelven las Instituciones
Educativas (IE).
Los conceptos de regionalización y regulación remiten a
consideraciones económicas, políticas, antropológicas, ideológicas, culturales,
sensibles. No solamente a lo geográfico, formal. El desarrollo desigual y
combinado de la patria, es una secuela del sistema, que la democracia
verdadera no omite en su diagnóstico sobre las causas profundas de las
desigualdades. Al contrario, se propone corregirla con planes de desarrollo y
programas de Cultura de Calidad, trascendiendo soluciones ateridas a
intereses ocasionales de mercado, régimen o propaganda.
Sirva el MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD
Y EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR, producto de la
inteligencia, experiencia y conocimientos prácticos de la comunidad de
Instituciones Educativas del Estado, como su nombre lo registra, de marco de
referencia para dirigir acciones así apropiadas, mancomunadas; sirva para
concentrar resultados de la vida cotidiana educativa, traduciéndolos a datos
cualicuantitativos que nos permitan a todos, planear y programar actividades
orientadas hacia el desarrollo, organizados en cuerpos colegiados y realizando
acciones interinstitucionales, entre pares.
Al hacerlo, se estará logrando otro de los propósitos del Ínter
Comités: apropiárnoslo, concretando, aún más, la iniciativa cultural de
ser patrimonio de la COEPES.
◙ 4 ◙
5. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
Presentación
ara concretar la acción estratégicatáctica del Programa Prioritario
P
del Gobierno de Nueva Generación, que señala la necesidad de
reactivar la Comisión Estatal para la Planeación de la Educación
Superior (COEPES)2, de tal manera que retome su papel, como el
espacio donde convergen todas las Instituciones de Educación
Superior –IES, y en la que se planean acciones en un marco de
trabajo conjunto, la COEPES reinicia actividades, en marzo del
2006.
En junio de ese año, los seis Comités que la integran, con
representantes de IES públicas y privadas, presentaron a la sociedad un
programa de actividades académicas, de investigación y administrativas,
planeadas para desarrollar la Cultura de la Calidad en el servicio escolar, a fin
de darle certeza al Estado sobre los atributos del servicio educativo y sus
egresados.
De manera coincidente, se señaló la importancia de elaborar un modelo
para organizar el servicio, evaluando la situación real del Sistema Estatal de
Educación Superior (SEES), útil para alinear las metas y acciones propuestas
de acuerdo a los propósitos del Artículo Tercero Constitucional y de la Ley
General de Educación, así como al deseo manifiesto de impulsar el desarrollo
de las capacidades intelectuales superiores de la sociedad, idóneas para
alcanzar la democracia participativa.
En ese sentido, un Modelo de Desarrollo Educativo y Evaluación, debe
contener características apropiadas, pues, indudablemente, educar para
potenciar el desarrollo con identidad cultural democrática, es sinónimo de
educación para la vida, aprendiendo a aprender; es equivalente de aprender a
ser, de aprender a hacer con el deseo de aprender a crear en ambientes
caracterizados por la complejidad y dinamismo propios de toda entidad
humana, orientada por propósitos trascendentes, como son el bien espiritual
y humano: la visión filosófica del Sistema Educativo y de las partes que lo
2 Programa Integral de Desarrollo, 20052011, COPLADEP, 5ª acción del Programa Prioritario para el
Sistema Estatal de Planeación Educativa, pág. 78.
5
6. integran, es clave para el desarrollo de objetivos, procesos e instrumentos de
la cotidianeidad escolar.
El Plan Nacional de Desarrollo, el Programa Estatal de Desarrollo, el
Programa Sectorial de Educación, Cultura y Deporte 20052011, el Programa
Institucional Educativo, la Visión 2020 de la Asociación Nacional de
Universidades e Instituciones de Educación Superior (ANUIES), así como los
propósitos de la propia Comisión Estatal para la Planeación de la Educación
Superior (COEPES), colman de políticas alcanzables el marco de referencia
que orienta prospectivamente la misión del Sistema Estatal de Educación
Superior (SEES) hacia el desarrollo de la democracia participativa, no sólo
como una táctica política, sino como un modo de vida y trabajo.
En un importante documento de reciente creación, el Instituto Nacional
de Evaluación Educativa (INEE), recuerda que, formalmente, el PNE 2001
2006 establece la creación de un sistema de indicadores que
…integre los resultados del aprendizaje de los alumnos con los de la
gestión de escuelas, subsistemas y el sistema educativo mismo, de
manera que haya disponibilidad permanente de información relevante
para la toma de decisiones en los diferentes niveles de gestión (PNE,
SEP, 2001). El mismo PNE señala al INEE y a la SEP como los
encargados de la formulación de este sistema de indicadores.3
A sí mismo, con el ánimo de procurar la formación educativa y cultural
integrada al conjunto de la sociedad, se coincide en que el instrumento de
mejora y evaluación requerido debe ser incluyente del desarrollo estatal en
todos los ámbitos y niveles: cultural, social, político, ideológico, económico y
productivo, a modo de concretar las políticas estatales de cobertura con
equidad, administración eficiente y calidad, trazadas por el Estado Mexicano
para enfrentar los retos de la globalización.
Como grupo colegiado, al construir el modelo para impulsar y evaluar
la Educación Superior, se ha avanzado desde ideas previas para la realización
3 INEE, Plan de Desarrollo del Sistema Nacional de Indicadores Educativos de México, 20072014,
INEE/SEP, pág. 3.
◙ 6 ◙
7. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
de un cuestionario simple, hacia la comprensión cada vez más compleja, de
las implicaciones de la actividad conjunta del Sistema, las Instituciones
Educativas (IE), los programas académicos, y los procesos de aprendizaje
enseñanza, al existir correspondencia directa e indirecta entre el todo y las
partes. De manera aleatoria, coincidimos con el INEE, cuando afirma:
Tres factores presionan a los países hacia la construcción de sistemas
de indicadores para dar respuesta a imperativos actuales, más allá de
solo requerir indicadores aislados. En primer lugar, la complejidad y
riqueza de los objetivos educativos va más allá de alcanzar la cobertura
universal de la educación obligatoria o de aumentar el logro educativo
de la mayoría de los alumnos, especialmente cuando dicha cobertura
es prácticamente universal —o lo es muy cercanamente — en muchos
países y se reconoce que la educación persigue formar en los individuos
no sólo habilidades cognoscitivas sino también destrezas y actitudes
para insertarse adecuadamente en una sociedad más globalizada,
democrática y expuesta al cambio tecnológico. En segundo lugar,
existen progresos en la comprensión del papel de la escuela y del
contexto social en la conformación de los resultados educativos, lo cual
obliga a considerar dentro de un mismo esquema analítico indicadores
de ambos dominios. En tercer lugar está la demanda social por
información y rendición de cuentas acerca de la educación, mismas
que pueden ser satisfechas parcialmente por los sistemas de
indicadores (Tiana, 1996; SEP, 1996; SEP, 1999; Teddlie, 2000; SEP,
2001; Congreso de la Unión, 2002).4
A l elaborar el instrumento para planear el desarrollo de la Educación Estatal,
se coincide en la importancia de sumar esfuerzos, voluntades y percepciones
hacia el logro del objetivo, de manera que se aproveche efectivamente para el
propósito: ser marco de referencia y modelo que sirva para diseñar planes y
programas de trabajo de los seis Comités de la COEPES del Estado de Puebla,
cumpliendo efectivamente con la comisión encomendada por la comunidad de
IES y las Autoridades.
4 INEE, obra citada, pág. 3.
7
8. En esta confrontación de ideas y propuestas entre iguales de los
miembros del Grupo de Trabajo (GT) encargado para la elaboración del
modelo, se coincide en los siguientes principios:
· Principio de intersubjetividad. Representan a la complejidad
escolar, la diversidad de dimensiones incidentes en la formación, capacitación
y calificación de los dicentes, así como de todos los sujetos que intervienen en
procesos académicos, imposibles de cuantificar en su totalidad. Siendo,
además, irrelevante el número como único patrón de medida del
comportamiento humano en sociedad, impele a diseñar instrumentos de
intervención dinámicos sensibles, que no omitan ni devalúen las dimensiones
subjetivas del ser, sino al contrario: reconociendo que lo objetivo tiene razón
de ser, como inicio, resultado, apoyo y extensión de las capacidades
humanas, en constante desarrollo.
· Principio de democracia escolar. Como expresión ética de la
democracia social participativa, impele a examinar la vinculación entre los
propósitos de los programas académicos y la sociedad donde se imparten, en
su caso, para reconocer en la filosofía y política educativa de los promotores,
el sino que distingue a su visión y misión institucional.
· Principio de reciprocidad. El programa de Cultura de Calidad
incluye el Modelo de Evaluación, como parte de la administración del ente. La
gestión, planeación y análisis de objetivos, procesos y resultados, garantiza la
mejora permanente. Es equitativo evaluar una realidad determinada, con
principios, metodologías e instrumentos afines a su modelo de desarrollo.
· Principio de congruencia del sistema. El modelo debe servir para
impulsar y evaluar al Sistema de Educación Superior, así como a las IES en lo
particular, a los programas académicos y, en especial, los procesos de
aprendizajeenseñanza.
· Principio de modelo social crítico. El Modelo de Totalidad, deriva
de la necesidad conceptual y metodológica de atender las condiciones de los
procesos de aprendizajeenseñanza, donde se realiza la función educativa y, a
la vez, de relacionar las condiciones históricas y sociales del contexto para el
cual se educa a los dicentes.
◙ 8 ◙
9. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
· Principio de diferencia en el método. Dada la diversidad de
enfoques teóricos de las IES, el uso de instrumentos de intervención para
planear y evaluar, debe ser ponderado y diseñado con una metodología
alternativa al enfoque de investigación funcionalista, tanto como al enfoque de
la investigación de caso.
· Principio de producción de conocimiento y/o reproducción de
prácticas profesionales. En general, las propuestas de Educación Superior,
tienen alguno, algunos o todos los siguientes propósitos en cualquiera de las
áreas del conocimiento, naturales, exactas, sociales, humanísticas y
artísticas, de capacitar, instruir y formar profesionistas y profesionales, que:
o Se incorporen al mercado de trabajo;
o Desarrollen sus propias empresas y generen empleos;
o Desarrollen el conocimiento humano en los ámbitos y perspectivas
culturales, multi, inter y transculturales: disciplinares, multi, inter y
transdisciplinares.
· Principio de unidad diferenciada de funciones académicas y
administrativas. Para lograr sus propósitos, las IES despliegan recursos
diversos en las variables académica y administrativa; la primera , de carácter
intelectual o conceptual, asociada a los contenidos del programa, así como a la
creatividad. La segunda , de cualidades formales, organizativas,
estructurantes, directivas, necesarias para el control de los objetivos, de los
procesos y de los resultados: una sin la otra, no tiene sentido; una,
subsumida por la otra, es aberrante.
· Principio de administración analógica de la entidad educativa.
En tanto bien social o público, legado de la humanidad, el conocimiento se
cultiva formalmente en las IES, siendo deseable hacerlo en ambientes regidos
por el diálogo entre iguales (docentes/administradores/dirigentes), así como
entre diferentes, en procesos equitativos de maduración incluyente
(dicentes/docentes, administradores/dirigentes).
· Principio de administración dialógica. En cada variable escolar se
dan diferentes actividades o funciones mancomunadas a las características de
cada dimensión, unificadas entre sí por la finalidad establecida:
9
10. o Las variables de la dimensión académica, están coligadas al para qué, por
qué y en dónde se da el hecho educativo de la experiencia académica.
o Las funciones de la dimensión administrativa, se concretan en la
planeación, dirección, supervisión y evaluación de las finalidades
establecidas, los procesos realizados y el control escolar de los resultados.
· En su carácter de bien social, o público, la gestión institucional se
expresa en las funciones académicas:
o Fundamentos teóricofilosóficos de la institución, o marco de referencia;
o Planes y programas de estudio;
o Actividades de investigación;
o Vinculaciones del programa con la comunidad.
· Para lograr lo anterior, las actividades administrativas se expresan,
en:
o Políticas de contratación del personal;
o Perfiles de ingreso, egreso y desempeño (de proceso y terminal) con
seguimiento de egresados;
o Organización y control escolar;
o Reglamentos internos y reguladores de la actividad;
o Infraestructura;
o Seguridad;
o Gestión escolar.
Colegiadas, las funciones enlistadas, se sintetizan en la evolución y
estructura del Sistema Educativo.
· Principio de proceso continuado de Cultura de Calidad. Advertida
la ineficiencia de las evaluaciones, por sí mismas, la administración
analógica/dialógica de las dimensiones escolares mediante una Cultura de
Calidad, asegura la planeación y programación colegiada de los atributos de
los procesos, hacia el logro de los objetivos fundamentales establecidos por la
entidad. Lograr consolidar el hábito autónomo de las comunidades de las IES
◙ 10 ◙
11. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
por el desarrollo constante, concitado y apoyado por la autoridad consciente,
es la mejor manera de garantizar procesos de transformación progresiva,
paulatina, mejorando continuamente los perfiles de egreso conveniente de los
alumnos, así como de la sociedad.
Cultura de Calidad
P or lo señalado, coincidimos con las propuestas de la ANUIES, los CIEES5, el
COPAES6, el PROCE XXI7 y del INEE, sobre las políticas de calidad y
evaluación, al promover la mejora continua de las IES asegurando la calidad
en todos los procesos educativos, administrativos y de gestión, perfeccionado
a la par las prácticas de autoevaluación y evaluación externa.
Sinónimo de autocrítica, la autoevaluación concita la capacidad de
análisis de las comunidades escolares, así como la toma de conciencia de la
importancia sobre la propia conducción de las actividades, como ejemplo de
gestación institucional y personal. De manera lateral, es deseable la relativa
independencia, o autonomía de las partes sobre el sistema, para potenciar las
posibilidades de la creatividad en todos los órdenes. Sin ella, todo plan de
crecimiento limita sus logros a la repetición mecánica o circular de lo
existente, destinando a la humanidad al estancamiento intelectual, social,
cultural.
La otra de las bondades de la Cultura de Calidad, como resultado e
impulso de la dirección interna de los procesos, es la asistencia a experiencias
de evaluación externa, una vez madurado el proceso y para obtener fe de un
tercero reconocido por el Estado; más no como elemento clave o condicionante
de los logros, sino como una actividad comparativa, entre pares, para auditar
a favor de la sociedad las cualidades del sistema escolar, de las IES, de los
programas académicos y de los procesos de aprendizaje enseñanza. Esta
información ampliamente difundida, da elementos de juicio a padres de
familia, dicentes, docentes, directivos y funcionarios, para la toma de
decisiones.
5 Comités InterInstitucionales de Evaluación Educativa.
6 Consejo para la Acreditación de la Educación Superior, A. C.
7 Programa de Cultura de Calidad, Siglo XXI.
11
12. Calidad Educativa
Hay consenso sobre la idea de partir de la definición del concepto de calidad,
para incursionar en procesos de calidad, pues se consideran múltiples
dimensiones en su constructo:
· Formación de profesionistas y profesionales de las distintas áreas del
conocimiento, para la vida y el trabajo a favor de una sociedad
democrática, entendida no sólo como actividad política, sino como
paradigma sociohistórico.
· Coordinación y congruencia entre procesos, resultados y demandas
sociales;
· Relevancia de las tareas emprendidas;
· Equidad y transparencia;
· Eficiencia en los procesos;
· Eficacia en los resultados de corto, mediano y largo plazo.
P ara la UNESCO, citado por la ANUIES8, calidad
…es la adecuación del ser y quehacer de la educación […] a su deber
ser, reconociendo la pluridimensionalidad del concepto, incluyente de
todas las funciones y actividades de una institución, en su conexión
con las particularidades del contexto regional, nacional e internacional.
De manera coincidente, el Centro Interuniversitario de Desarrollo de Chile
(CINDA), considera a la calidad como el conjunto de cualidades de una
institución u organización, estimadas en un tiempo y situación dados; es
decir, no es eterna ni por reconocida, incuestionable. Por lo que requieren
tener:
Integridad, por incluir todos los factores necesarios para el desarrollo
del ser humano;
8 ANUIES: Consolidación y avance de la educación superior en México. Elementos de diagnóstico y
propuestas. S/f. ISBN 9707040998.
◙ 12 ◙
13. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
Coherencia, que es la congruencia entre fines, objetivos, estrategias,
actividades, medios y evaluación;
Eficiencia, que es lograr fines mediante la adecuada función de todos
los elementos comprometidos.
Es evidente la importancia de la actitud y el accionar éticos, de evaluados y
evaluadores, evitando viciar el proceso de Cultura de Calidad. En las
condiciones de desarrollo desigual y combinado de la sociedad mexicana, ese
reto es difícil de lograr, pero no es imposible. Por su parte, Pablo Latapí,
citado por la ANUIES, plantea que la calidad es la “readaptación continua de
la institución a su multientorno social, cultural y político; como una cultura
de superación y autoexigencia”.
La calidad es una entidad dinámica que se puede percibir, inferir, e
incluso llegar a medir, y sin embargo tal medición no se agota en la
cuantificación de aspecto alguno. En tal sentido su evaluación implica
estudiar y reconocer la interacción de los actores institucionales y sociales
que la construyen, la perciben y la aceptan.
La UNESCO (2005b), considera que la calidad educativa se encuentra
presente en lo que se aprende como una práctica derivada del proceso que
realiza el estudiante, en el tipo de procesos que apoyan dicha práctica, en los
resultados académicos y en el proceso general que envuelve a todos los
aspectos, y es el hilo conductor del proceso de gestión9.
La Calidad Educativa es un concepto dinámico producto de acuerdos
entre actores, de los entornos y proyectos de las instituciones, de los
valores y visiones de futuro que orienten sus actividades. Por lo que, de
acuerdo a cada actor, diferentes son las concepciones de calidad, en
consideración a sus necesidades y aspiraciones:
· Para académicos:
La calidad está vinculada a los saberes disponibles.
· Para los empleadores:
9 El subrayado y las itálicas son nuestras.
13
14. Las competencias básicas y profesionales para el
trabajo, otorgan calidad.
· Para los estudiantes:
Ingresar pronto al empleo, indica calidad.
· Para la sociedad:
Disponer de ciudadanos respetables, responsables,
competentes indica calidad del Sistema Educativo.
· Para el Estado:
La Calidad Educativa está bien, si egresan de las
IES profesionales con buena formación garantes del
desarrollo del país.
L a evaluación objetiva es necesaria para reconocer la Calidad de la
Educación. Pero su mejora no depende automáticamente de ella. Por lo que
ante la política centrada en la evaluación, es válido, de acuerdo con Coraggio,
citado por la ANUIES, afirmar que:
…es posible actuar directamente sobre problemas evidentes en la
docencia universitaria, sin la mediación de sistemas de evaluación
con efectos inductores en el largo plazo10.
P or lo visto, la calidad no es un objeto separado de procesos que le otorguen
esa condición a la educación entendida como bien social, e instrumento de la
formación ciudadana concretada en situaciones de aprendizaje enseñanza,
realizadas durante la cotidianeidad escolar. Coincidiendo con el INEE:
La finalidad del sistema es brindar elementos para la valoración justa
de la calidad del sistema educativo en forma oportuna, facilitando la
interpretación y lectura de los productos de la educación en el
momento apropiado. Dichos elementos se habrán de presentar de
manera que haya disponibilidad permanente de información relevante
para la toma de decisiones y la rendición de cuentas. Así también,
describirá un panorama actualizado del sistema educativo nacional y
10 ANUIES, obra citada.
◙ 14 ◙
15. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
sus tendencias; además promoverá entre las autoridades, directivos,
docentes, investigadores y opinión pública su utilización para la
formulación de proyectos que mejoren la calidad de la educación.11
La ANUIES aborda el tema de la calidad y su evaluación de manera
secuencial, reconociendo que las IES pueden y deben realizar acciones para
el mejoramiento de la calidad que no dependan de la realización de
procesos de evaluación, como factor determinante de las cualidades del
desarrollo; a la vez, reconoce que los modelos e instrumentos de evaluación
son un medio que contribuye a mejorar en todos los espacios académicos el
trabajo institucional12. Esto otorga mayor certidumbre y direccionalidad a las
decisiones de mejora de la calidad; especialmente cuando se trata de cambios
estructurales, incursión de nuevos criterios y procesos de trabajo, así como de
la creación de escenarios idóneos para el propósito del servicio.
Con respecto a las Dimensiones de Calidad, el INEE entiende que una
Educación de Calidad es aquella que:
• establece un currículo adecuado a las necesidades individuales de los
dicentes (pertinencia) y a las necesidades de la sociedad (relevancia);
• logra que la más alta proporción de destinatarios acceda a la escuela,
permanezca en ella hasta el final del trayecto y egrese en los tiempos
previstos (eficacia interna), habiendo alcanzado los objetivos de
aprendizaje establecidos en el currículo (eficacia externa);
• consigue que los aprendizajes sean asimilados en forma duradera y
se traduzcan en comportamientos sustentados en valores individuales
y sociales (impacto);
• cuenta con recursos humanos y materiales necesarios (suficiencia) y
los usa de la mejor manera posible evitando derroches y gastos
innecesarios (eficiencia); tiene en cuenta la desigual situación de
alumnos y familias, comunidades y escuelas y ofrece apoyos
especiales a quienes lo requieren, para que los objetivos educativos
sean alcanzados por el mayor número posible de estudiantes
(equidad).
13
11 INEE, obra citada; las itálicas son nuestras.
12 ANUIES, obra citada. El subrayado y las itálicas son nuestras.
13 INEE, obra citada, pág. 8
15
16. Evaluar supone comprender la situación por sus finalidades trascendentes en
un momento dado, comparando esa situación con un referente definido como
deseable, o adecuado. Esto pide acceder al juicio de valor sobre la verdadera
finalidad de la evaluación de la Calidad de la Educación que se ofrece.
Precisar el referente supone la existencia de un programa y modelo aceptado
por todos, a partir de entender que la calidad surge de la misión y propósitos
específicos de la institución, o del programa específico a evaluar.
Siendo la calidad un atributo dependiente de la misión, a su vez, la
misión depende de la visión de la Institución Educativa (IE). Por ejemplo: si
una IE, o un programa, postula generar nuevo conocimiento como su misión,
entonces la forma de evaluación tenderá a observar y a analizar procesos
escolares, conducentes a la creatividad.
Pero, si la misión es otra, por ejemplo, formar profesionistas con
capacidades competitivas básicas, o profesionalizantes, entonces el Modelo de
Evaluación debe analizar procedimientos escolares encaminados a ese logro,
en la formación técnica o/y metodológica del dicente para hacer
eficientemente un trabajo productivo.
Desde este enfoque, tomando como referencia el programa de
Cultura de Calidad, las diversas IES deben buscar caminos propios y el
Modelo de Calidad específico que deberá aplicarse a ellas.
Las estrategias para mejorar la calidad son múltiples, por lo que un
Modelo de Evaluación, adecuado para cierto tipo de IE, no
necesariamente lo es para otra, con fines y misión diferentes: los “fines”
son la visión y, la “misión”, son los medios al través de los cuáles se logran los
propósitos establecidos. En todos los casos, la Cultura de Calidad, dispone
condiciones para conseguirla, y la evaluación es una ayuda para ello.
En su logro, la Cultura de Calidad es atributo de procesos
administrados éticamente ; expresado en resultados alcanzados con
eficiencia en procesos y eficacia en resultados; con la congruencia y
relevancia de procesos y los resultados prometidos para responder a las
expectativas y demandas sociales de las instituciones culturales, las
organizaciones no gubernamentales, de las empresas del sector público y
◙ 16 ◙
17. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
privado, de las familias y de cada uno de los dicentes inscritos en las
IES.
De acuerdo con la idea expresada por la ONU/UNESCO, y compartida
por la Red Internacional de Macro Universidades, la Educación es un bien
público, cuya pertinencia no es respuesta escueta a las demandas
económicas, sino a las impetraciones y desafíos de la sociedad en su
conjunto frente a los retos del desarrollo contemporáneo, posible y deseable,
en las condiciones de la sociedad global y el vertiginoso desarrollo científico
tecnológico informático, cibernético, bio y nanotecnológico.
Programa de Cultura de Calidad
Instrumento de equidad, cobertura y administración eficiente
Con el sustento conceptual desarrollado, la visión del Estado y de las IES, se
hace realidad en misiones organizadas para la promoción con equidad y
cobertura del Sistema de Educación Superior, entendidas como puerta de
acceso a la producción científica, al desarrollo cultural, al mundo del trabajo y
a condiciones de vida dignas para todos. Disponer de un programa, modelo e
instrumento dinámico que otorgue proyección en condiciones de igualdad, al
conjunto de las IES constituyentes del Sistema Estatal, resulta muy
interesante. Reconocer las diferencias de enfoque paradigmático, sociales e
históricas de cada IE, facilita los objetivos y planes de la COEPES, al ser este
un organismo creado para acompañar, y no para negar o disgregar.
Un instrumento para el desarrollo y la evaluación dinámico compleja,
debe ser concebido y diseñado con criterios amplios y categorías abiertas,
motivadoras de la participación del conjunto de las IES en el proceso de la
Cultura de Calidad, iniciado con el ánimo de unificar la diversidad, sin, por
decreto, tratar de omitir las diferencias. Desde el punto de vista económico,
resulta culto destinar recursos para el proceso de mejora continua a favor de
todos los implicados en las IES y en el Sistema, y no sólo ni primordialmente
para costear la asistencia periférica de expertos o gestores evaluadores
externos: sin dudas, es más interesante, universitario y proyectivo, invertir
recursos en los procesos, que para sostener la asistencia de expertos
17
18. auditores, las más de las veces agregados al escenario, con la finalidad única
de allegarse recursos económicos. Bien nos apercibe la ANUIES, sobre la
asistencia “mal concebida o utilizada de herramientas”14, o agencias
evaluadoras.
Como es de entenderse, el manejo ético de la información generada por
el instrumento, así como el compromiso moral de que los datos concentrados
se signarán y usarán para el análisis de la realidad del Sistema Escolar
Estatal, y el trazado fino de las líneas de su mejora permanente, garantiza la
participación voluntaria y comprometida del conjunto de las IES, como hasta
ahora ha sucedido al seno de la COEPES.
Un instrumento de intervención de esa naturaleza, a la vez de permitir
reconocer las bondades y áreas de oportunidad de las IES, se propone para
servir de red inteligente que potencie la interacción del Sistema, a favor de las
partes, tanto como del conjunto.
Para darle soporte y validez internacional al Modelo e Instrumento de
Evaluación diseñado, se parte de reconocer las características de otros
modelos de planeación y evaluación, establecidos y probados por la ANUIES,
los CIEES/COPAES, el MECASUT, el PROCE XXI y el Formato 911 de la SEP.
En congruencia con ideas compartidas por la comunidad nacional e
internacional, el programa, modelo e instrumento propuesto para el análisis,
desarrollo y evaluación de la Calidad Educativa, estructura la intervención
interinstitucional colegiada de pares académicos: aplicarlo implica esfuerzos
extraordinarios de la comunidad de IES y, en gran medida, encaminados a
iniciar procesos de Cultura por la Calidad, desde el interior de las IES y como
condición previa de su certificación y/o acreditación externa. A su vez, el
instrumento aporta datos cualicuantitativos útiles sobre la situación
académica, administrativa, de vinculación y gestión de las IES.
No obstante las condiciones de complejidad recursiva del propósito, el
deseo de alcanzar con inclusión indicadores cualitativos y cuantitativos de
calidad, concita a participar sin condiciones en la consecución del propósito.
14 ANUIES, obra citada, pág. 83.
◙ 18 ◙
19. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
Con las ideas señaladas sobre logros de calidad derivada de la
congruencia entre la visión y misión del conjunto de las IES, relacionadas a
los ideales del Estado Mexicano para el periodo histórico de la sociedad global,
se diseñó el Programa de Calidad y Modelo de Evaluación por analogía con el
método científico crítico, que se propone reconocer el estado de la educación
formal, describiéndola, a la vez de establecer las bases de su transformación
ética, mediante procesos de Cultura de Calidad.
Por otra parte, apoyar al instrumento desde el enfoque de la
racionalidad científica ejercida con ética, concierne al compromiso imperativo
de la comunidad de Instituciones de Educación Superior (IES) por la cultura,
siendo el Programa de Calidad y Evaluación, precisamente, un aporte para la
integración y consistencia del lenguaje, del pensamiento científico y de la
comunidad educativa, en todas las modalidades y niveles. Para que tenga
sentido, la calidad es concomitante a la identidad del Sistema, de la
institución y del programa académico; por lo que conceptuar el por qué, el
para qué, en dónde y con quién, es clave para darle contexto a la misión de la
entidad.
Sin embargo, siendo la teoría importante, indudablemente que la
capacidad de prevención de los hechos y la práctica cotidiana, son el signo
distintivo del ser humano; por lo que la operacionalización de los conceptos, a
través de la determinación de variables, dimensiones, referentes empíricos e
indicadores estándares y paramétricos, resulta un procedimiento idóneo para
el tema en cuestión. A continuación se presenta el esquema lógico, que
concreta las ideas enunciadas.
19
20. Figura 1
Esquema lógico del programa, modelo e instrumento para y evaluar
desarrollar el Sistema Estatal de Educación Superior (SEES)
ANÁLISIS DE
DATOS,
Y
DIAGNÓSTICO
IDENTIDAD Y CALIDAD
CULT URA DE
CALIDAD DEL
SEES
DIMENSIONES
VARIABLES REFERENTES EMPÍRICOS
INDICADORES ESTANDARES Y PARAMÉTRICOS
DISEÑO DE
INSTRUMENT OS,
TRABAJO DE
CAMPO HECHOS CONCRETOS
CONCENTRACIÓN
DE DATOS
No hay mejor abono para el desarrollo de la comunidad educativa que la
equidad, respaldada con la lógica, metodología, procedimientos y técnicas del
método científico: la racionalidad y creatividad inspirada en actitudes éticas,
es clave para unificar a las IES, respetando sus cualidades diferentes.
Así, la planeación y evaluación del estado actual del Sistema, tiene
sentido porque transmuta en instrumentos sanos para la transformación del
ente examinado, interviniendo sutilmente en la planeación y programación de
los procesos y hechos concretos para el logro de las finalidades establecidas,
mediante procesos de Cultura de Calidad.
Analizados los diversos instrumentos de evaluación existentes, muy
parecidos entre sí, reconocemos que la calidad entendida como atributo de los
procesos educativos, se logra con la mejora permanente de:
◙ 20 ◙
21. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
· 2 Variables
· 9 Dimensiones
· 38 Referentes empíricos
· 176 Indicadores, estándares y paramétricos
· “ N” cantidad de hechos concretos.
L as variables son de naturaleza independiente, y las dimensiones son
variables dependientes o subordinadas a las constantes que caracterizan al
ente. Los referentes empíricos, son los aspectos que concretan en funciones,
objetivos y/o departamentos clave, las finalidades de los programas
académicos, de las IES y del Sistema Escolar. Los indicadores son el
instrumento que permite constatar y/o medir los hechos académicos y
administrativos de la vida cotidiana escolar; su observación y análisis
cualitativocuantitativo, asegura las conclusiones éticas de los cuerpos
colegiados, sobre la evolución del programa, la institución y el Sistema. El
esquema lógico para la instrumentación operativa de las variables, estructura
horizontal y verticalmente la concreción de los conceptos delimitados, de la
manera siguiente:
21
22. Tabla 1
Esquema lógico de operacionalización de las variables
del MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
VARIABLES DIMENSIONES Referentes Empíricos
Visión y Misión
Propósitos sociales y profesionales de la
MARCO DE
entidad: pertinencia del modelo
REFERENCIA
didáctico
Modelo pedagógico institucional
Fundamentos del plan de estudios:
estructura de los planes de estudio,
planeación académica, programación
didáctica
Didáctica de la especialidad
Participación activa de los discentes
DESARROLLO
Cuerpos colegiados
CURRICULAR
ACADEMIA Proceso de aprendizaje/enseñanza
Academias: perfil académico profesional
idóneo
Programa de capacitación, formación y
actualización docente y administrativa
Recursos e infraestructura
Disciplinar
INVESTIGACIÓN
Educativa
Organizaciones nacionales y
extranjeras: culturales, públicas,
VINCULACIÓN privadas, ONGs
Centro de investigaciones
Vínculos institucionales con la
◙ 22 ◙
23. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
sociedad: prácticas, estadías y
residencias profesionales; servicios a la
comunidad; servicio social;
participación social
Seguimiento de egresados
Difusión y extensión de la cultura
Comparación histórica de sistema
EVOLUCIÓN DEL
demográfico, económico, urbano y
SISTEMA
política: internacional, nacional, estatal
INSTITUCIONAL
Calidad
Educación universitaria
ESTRUCTURA
Educación superior de formadores de
DEL SISTEMA
docentes
INSTITUCIONAL
Educación superior tecnológica
Aportes al desarrollo de la ciencia
Aportes al desarrollo de la educación
PERTINENCIA
Aportes al desarrollo de la cultura
Aportes al bienestar social
ADMINISTRACIÓN
Artículos Tercero Constitucional
Y
Ley General y de Coordinación de
GESTIÓN
Educación Superior
Ley Estatal de Educación Superior
MARCO LEGAL Ley Estatal de Desarrollo
Acuerdos en materia educativa
Reglamentos internos de las IES y la
SEP
Reglamento de la COEPES
Subsidio gubernamental
Ingresos propios: cuotas y colegiaturas,
ECONÓMICO
venta de servicios
FINANCIERA
Donativos
Fuentes alternas
23
24. Estructuralmente, 2 variables clave de la vida escolar, la vida académica y la
función administrativa, se concretan mediante 9 dimensiones seleccionadas
representadas por la actividad realizada en departamentos, procesos o
desempeños de naturaleza subjetiva y objetiva, intelectual y material,
realizada con la intervención de sujetos peculiares: padres de familia,
dicentes, docentes, administradores y directivos: en toda las IES se observan
como constantes, sin importar el tamaño, tradición, enfoque pedagógico,
ubicación físicogeográfica, o si es de intereses profesionalizantes o
profesionales.
Los 38 referentes empíricos, develan la presencia de las variables en
actividades documentales, empíricas y prácticas, reflexivas y técnicas. De
igual manera, se consideran constantes en la vida escolar de las IES, para
observarse en realidades de naturaleza humana compleja, muchas de las
cuales no son permisibles de cuantificarse y, las que sí lo son, necesitan de
intervenciones analíticas de los sujetos implicados en los procesos para
comprenderlas justamente en su situación actual y perspectiva; las variables
y referentes empíricos se concretan en estándares y parámetros.
Un estándar es un tipo, patrón o modelo regularizado aproximado a
un estatus deseable y alcanzable, difícilmente cuantificable, o para cuyas
características toda medición resultaría absurda. Por ello, se dice que todo
estándar registra la presencia de conceptos, fenómenos o procesos
observados.
Por el contrario, las medidas paramétricas se utilizan para
representar numérica o geométricamente, realidades analizadas, dándole
valores a las funciones. Los parámetros son medidas exactas, repetibles,
resolutivas y sensibles; la repetición exacta de la variable medida permite
utilizarla para efectuar otras acciones, como la planeación; de igual manera,
la resolución del parámetro evita distorsiones, al ser capaz de precisar la
característica y el dato sintetizados, de acuerdo al instrumento empleado.
La sensibilidad del parámetro se refiere a que todo dato sirve para
derivar calificaciones con respecto a la evolución del fenómeno analizado,
◙ 24 ◙
25. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
según el instrumento empleado, así como a otros que intervengan para la
apreciación de las variables estudiadas, en situaciones humanas dinámicas.
Por lo que, por su objetividad, los parámetros que se proponen en el
modelo son los mínimos deseables que le dan fortaleza a los programas
académicos, a las IES y al Sistema de Educación Superior.
Todo hecho concreto refiere el acto en sí, actitud, ambiente,
procedimiento y técnica de la realidad analizada, por sus características
específicas y a detalle, considerando al propósito, objetivos, metodología e
instrumentos empleados. Los hechos, en todo caso, son las dimensiones y
variables determinadas, concretadas o materializadas y descritas utilizando
términos racionales, inclusive del sentido común, si fuera el caso.
Como la vida cotidiana escolar sintetiza planes y programas,
diseñados para alcanzar finalidades determinadas para aprender y
enseñar las profesiones, se enfatiza la idea de totalidad implicada en el
paradigma integrado por tres dimensiones, adoptado para estructurar el
modelo:
a) Teoría conceptual;
b) Metodología prescriptiva;
c) Práctica instrumental.
L a teoría conceptual se refiere a la filosofía y política educativa, expresada
en la visión, misión institucional, administración y gestión institucional. La
metodología prescriptiva, en esencia actividad práctica preventiva, se
manifiesta en la elaboración de planes académicos y programaciones
didácticas. La práctica instrumental se concreta en el trabajo de directivos,
gestores, administradores, docentes y dicentes.
25
26. Definición de términos
El marco de referencia presenta las características teórico/conceptuales e
históricas de las áreas del conocimiento impartidas por las IES, así como al
modelo educativo adecuado a sus propósitos epistemológicos y pedagógicos.
El diseño curricular sustenta o soporta los fundamentos conceptuales
y metodológicos, que le dan sentido y coherencia operativa a:
· Planes y programas de estudio.
· Objetivos generales del plan de estudios.
· Perfil de egreso del programa académico.
· Instrumentos de la coordinación académica de las asignaturas,
áreas de conocimiento o módulos.
· Programación didáctica de los docentes.
· Las formas internas de evaluación del proceso de enseñanza
aprendizaje.
A ctividades prácticas de investigación de las profesiones y de la didáctica
de las especialidades, son acompañantes de todo proceso de aprendizaje
enseñanza, especialmente para mantener la vigencia pertinente de los
programas académicos y, por tanto, del perfil de egreso de los nuevos
profesionales. Sin dudas, aprender a aprender, es resultado de la fusión de la
vida académica con el desarrollo ilimitado del conocimiento.
Vinculación. Así como todo saber dimana de la realidad, a la realidad
retorna para concretar un deseo inapreciable de todo Sistema Educativo: el
aprendizaje significativo y participativo, orientado a la resolución de temas,
asuntos, demandas y problemas naturales, espirituales y sociales.
Observar las cualidades de la evolución del Sistema y la estructura
institucional de las IES, son clave para planear los pasos de cada IE con
atención a los requerimientos del conjunto de la sociedad, ampliando la
cobertura con equidad para impulsar con igualdad el desarrollo regional. La
pertinencia del Sistema Educativo es resultado de la congruencia de
propósitos individuales, institucionales y estatales, registrados en la
◙ 26 ◙
27. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
colocación exitosa, emprendedora y ética de los egresados del Sistema Escolar
en el mercado de trabajo, así como en los ámbitos culturales, artísticos,
humanísticos y científicos, constatados por la calidad de sus aportes
creativos, medidos por su incorporación inmediata a las actividades sociales y
productivas.
Las formas de financiamiento sano de las IES públicas y privadas, son
determinantes para establecer e impulsar ambientes dignos de trabajo,
inspirantes de acciones conducentes en todos los miembros de las IES.
La rendición de cuentas, en el caso de las IES públicas, y la decisión
directiva de las IES privadas de favorecer procesos de aprendizaje enseñanza
de calidad, sobre la base de retribuir equilibradamente a la sociedad por los
recursos económicos recibidos, trabaja a favor de los propósitos trascendentes
del servicio educativo.
Toda sociedad humana desarrollada establece un marco legal para
propiciar el crecimiento en condiciones de igualdad. La observancia de las
reglas cultiva la mutua comprensión de los miembros integrantes del Sistema,
a favor de quienes se incorporan al paso de las generaciones. En el caso del
Sistema Escolar, los favorecidos del cuidado de las formas legales son los
estudiantes, y en el fondo la construcción colectiva de la sociedad a que se
aspira. Cuidar, preservar y cultivar leyes y reglamentos al operar las variables
de la Calidad Educativa, completa al Modelo de Diagnóstico que, por sus
cualidades, además de para la evaluación externa, es guía para la evaluación
interna de las IES.
Identidad: cohesión de la ca lida d del Servicio Educativo
P or lo visto, conceptuar y vivir la complejidad de los procesos de aprendizaje y
enseñanza, requiere de estructuras dinámicosensibles a la evolución de los
casos, tanto como de su conjunto; de allí que la intervención propia y la
externa con fines de evaluación del desarrollo, necesite de razones lógicas,
históricas y reales para comprenderla en su dimensión social. Asistir la
estructura del modelo con las teorías y leyes comentadas, nos permite definir
operativamente el concepto de calidad: darle al beneficiario de la educación lo
27
28. que se le promete, al aceptarlo en el programa académico institucionalizado,
considerando la demanda real y la demanda potencial de los profesionales, el
estado del conocimiento, la didáctica apropiada a su mejor aprendizaje, las
leyes y reglamentos que norman la actividad. Analizando el cuadro de
indicadores del INEE para Educación Básica, existe correspondencia con los
componentes: contexto social, contexto escolar, procesos y resultados a corto
y a largo plazo.
Las variables propuestas reconocen referentes empíricos para hacer
operativa la evolución de la realidad: adoptarlos, mejorarlos y transformarlos,
permite constatar el crecimiento de las IES en procesos de Cultura de la
Calidad compartidos, acompañados por la Autoridad educativa con un
enfoque incluyente de las dimensiones cuantitativas que sustentan las
cualidades del Sistema de Educación Superior.
Indicadores estándares y paramétricos del MARCO DE
REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
En cuanto al trabajo para continuar diseñando el instrumento, se
determinaron los siguientes criterios metodológicos, procedimientos
técnicos, actividades y plan de trabajo.
A) Criterios Metodológicos
1) Terminar de diseñar el Instrumento de Evaluación, precisando los
indicadores cualitativocuantitativos y hechos concretos, con criterios
académicos, científicos y éticos, incluyentes de los aportes de la
UNESCO/IESALC, del Sistema de Evaluación de la SEP, de la ANUIES, de los
CIEES/COPAES y otros organismos de evaluación.
2) La COEPES se encarga del desarrollo total del Instrumento para la Cultura
de Calidad, lo cual además servirá para el fortalecimiento académico de la
◙ 28 ◙
29. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
propia comunidad de IES y en especial de la Comisión, como un cuerpo
colegiado y de consulta.
3) El instrumento se soporta en un modelo teórico pertinente, con el propósito
de evitar suspicacias sobre la intencionalidad o sesgo que pudiera tener dicho
instrumento.
4) La COEPES delega la actividad en un grupo integrado por los miembros de
los Comités que han mostrado constancia, capacidad creativa, conocimientos
metodológicos y experiencia en investigación científica, específicamente sobre
el tema de indicadores e instrumentos de evaluación:
Tabla 2
Miembros del GT para diseñar el MARCO DE REFERENCIA PARA
LA CULTURA DE CALIDAD Y EVALUACIÓN DEL SISTEMA DE EDUCACIÓN
SUPERIOR
COMITÉ: PARTICIPANTE:
Calidad: Mtro. Marco Antonio Ramírez/ Mtro. Jaime Bonilla.
Dr. Luis Gerardo Ugalde/Mtro. Alejandro Solís/Dr. Daniel
Investigación:
Jaime Cortés.
Cobertura y
Ing. Luís Torreblanca/Mtro. Joel Cordero.
Rezago:
Estudios
Mtro. Carlos Castro/Mtro. Sergio Raúl Ortiz.
Estratégicos:
Normatividad: Profr. Miguel Ángel Javier Ojeda.
Subsistemas: Mtro. Oscar Puig.
5) Deberán tenerse en cuenta las limitaciones de la SEP y la COEPES para el
procesamiento de la información, acudiendo a apoyos externos convenientes.
6) La COEPES, a propuesta directa del InterComités, solicitará a la SEP y a
las IES que asignen miembros de su comunidad para realizar actividades
específicas, a demanda concreta y programada.
29
30. 7) En los rubros o procesos en que el grupo carezca de experiencia práctica,
solicitará a la SEP que contacte a especialistas, para la asistencia y/o
asesoría en tópicos específicos del diseño de los instrumentos y aplicación del
trabajo de campo.
8) Los especialistas requeridos serán propuestos por el Grupo de Trabajo
(GT), siendo pagado su aporte con recursos de la SEP.
9) Elaborado el instrumento del diagnóstico, a la par de su publicación y
aplicación práctica, se realizarán talleres de formación para su apropiación
por la comunidad de IES.
10) La COEPESSEP se reserva los derechos sobre el estudio realizado.
11) El grupo InterComités elaborará una propuesta del presupuesto de
operación (conceptos y costos) para formular el diagnóstico, así como de los
posibles apoyos que estén en posibilidades de aportar las IES en cada uno de
los seis Comités, a efecto de que la Subsecretaría de Educación Superior
gestione la autorización de los recursos presupuestarios y procure las
condiciones necesarias; con el siguiente formato.
B) Procedimientos de trabajo
1. Solicitar a los seis Comités, identifiquen los aspectos de interés, relacionen
sus requerimientos de información especial y su marco teórico conceptual, de
manera explícita y por escrito, y aporten el material disponible. Ello con el
afán de permitir el mantenimiento del Comité y de la COEPES por encima de
las personas.
2. Delegar la publicación del instrumento, en un Grupo de Tarea (GT) con
experiencia en el campo del diseño editorial.
3. Delegar la divulgación del instrumento, en un Grupo de Tarea (GT) con
experiencia en el trabajo de campo.
4. Se pretende evitar sesgos en el procesamiento y análisis “duro” de la
información recabada, explorando la viabilidad de la participación de
instituciones como el INEGI, así como de otras dependencias, entidades y
organizaciones, para tal propósito.
◙ 30 ◙
31. MARCO DE REFERENCIA PARA LA CULT URA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
5. Se sugiere avanzar en la identificación de necesidades técnicas y
tecnológicas para el desarrollo de la evaluación (levantamiento de información,
almacenaje, resguardo, captura, depuración y control de calidad).
6. Aplicación de los instrumentos del trabajo de campo.
7. Concentración, procesamiento y análisis de datos.
8. Informe de los resultados a la comunidad de IES.
Tabla 3
C) Programa de trabajo
ACTIVIDADES:
Integración del Grupo de Trabajo (GT) para el diseño del Marco
1
de Referencia.
Definición de la Visión detallada de la Educación Superior en el
2
Estado de Puebla por cada Comité.
Revisión de estudios y experiencias similares en otros Estados, y
3
por parte de instituciones oficiales.
Especificación de los aspectos relevantes de estudio y
4
requerimientos de información por parte de cada Comité.
Acopio de la relación de aspectos relevantes, marco teórico
5 conceptual, requerimientos de información, y aportación de
materiales de cada Comité.
6 Elaboración del Marco de Referencia.
Análisis y validación del Modelo de Diagnóstico con los
7
especialistas.
8 Desarrollo de la Metodología del Marco de Referencia.
9 Validación de la Metodología del Marco de Referencia.
10 Análisis de viabilidad y factibilidad del método.
11 Diseño del Instrumento.
31
32. 12 Validación del Instrumento con los especialistas.
13 Revisión de estilo del modelo teóricometodológico.
14 Selección de los medios de levantamiento de información.
15 Celebración de acuerdos y convenios de participación
16 Organización de equipo de tarea (trabajo operativo y de campo)
17 Publicación del modelo teóricometodológico.
18 Levantamiento de información
19 Validación y procesamiento
20 Análisis e interpretación
21 Integración del documento
22 Revisión y aprobación del documento
23 Publicación y difusión
A continuación se presentan los 176 indicadores, estándares y paramétricos
para la Evaluación y Desarrollo de Cultura de Calidad de la Educación
Superior. De acuerdo con el esquema lógico presentado en la siguiente
página:
Tabla 4
ESQUEMA LÓGICO DE VARIABLES, DIMENSIONES, REFERENTES
EMPÍRICOS E INDICADORES DEL
MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD Y
EVALUACIÓN DE LA EDUCACIÓN SUPERIOR
◙ 32 ◙
33. ACADEMI A, ADMINISTR ACI ÓN Y GESTIÓN DEL SISTEMA DE EDUCACIÓN SUPERI OR
DI MENSIONES
II III
I IV
REFERENTES EVOLUCIÓN DEL ESTRUCTUR A DEL V VI VI I VI II IX
MARCO DE DESARR OL LO
EMPIRI COS SISTEMA SISTEMA INVESTI GACI ÓN VI NCUL ACIÓN PER TINENCI A MARCO LEGAL ECONÓMICO F INANCIER A
REFERENCI A CURR ICUL AR
INSTITUCI ONAL INSTITUCI ONAL
I.1 1
Vi sión y Mi si ón MODELO EDUCAT I VO.
2
I.2 CONDICIONES
Propósit os social es y HI STÓRICO SOCI ALES
prof esional es de la DEL MEDIO DONDE SE
entidad: pertinencia I MPARTEN L OS
del model o di dác tic o. PROGRAMAS
ACADÉMICOS.
3
MODELO PEDAGÓGICO
CONGRUENTE CON EL
MODELO EDUCAT I VO.
I.3
Model o pedagógico 4
instit uci onal. MODELO DIDÁCTICO,
CONGRUENTE CON LA
COR RIENTE
PEDAGÓGI CA Y EL
MODELO EDUCAT I VO
POSTUL ADO.
5 79 112 160
PIR AMIDES DE 39 T ASA DE INGRESO. PROFESOR ADO GASTO PÚBLICO FEDERAL
POBLACIÓN 1996 NIVEL NET O DE MIEMBROS DEL Y EST AT AL COMO
2050 ESCOL ARIZACIÓN SISTEMA PORCENT AJE DEL PI B.
POBLACIÓN 80 NACI ONAL DE
ECONÓMICAMENTE T ASA DE EGRESO. INVESTI GADORES
40 161
ACTI VA, SEGÚN NI VEL
II.1 DE INST RUCCI ÓN MATRICUL A POR FINANCI AMIENT O DE L AS
EDAD. 81 UNIVERSI DADES PÚBL ICAS
Com parac ión 10011997 Y
T ASA DE 19941999 Y A 2006
histórica de sist ema: EST I MACI ÓN.
ABSORCI ÓN.
dem og ráfica,
41
ec onómi ca, urbana y
MATRICUL A EN EDAD 162
pol ítica: 6
NOR MAT IVA. 82 GASTO EN EDUCACIÓN
int ernaci onal, COBER TUR A DEL
T ASA DE POR ESTUDI ANTE 1995 Y
naci onal, estatal. SISTEMA EDUCATIVO
COBERTUR A. A 2006
DE EDUCACIÓN
42
SUPERI OR 19962020
POBL ACI ON
83
EST UDI ANT IL EN
EDAD EGRESADOS
7
EXTRAESCOL AR. INCORPOR ADOS AL
EVOLUCIÓN DEL
TRABAJ O
NÚMERO DE IES 1950
34. 1999 Y A 2006 43
EGRESADOS EN EDAD 84
NOR MAT IVA. T ASA DE
8 TI TULACIÓN.
EVOLUCIÓN DE IES
POR RÉGI MEN 1970 44
1999 Y A 2006 AÑOS DE ESTUDIO EN 85
PROMEDIO DE UNA ÍNDI CE GI NI DE
COHOR TE. DESI GUALDAD
9 EDUCATI VA.
CRECI MIENTO DE LA
MATRÍCULA DE 45
EDUCACIÓN EST UDI ANTES 86
SUPERI OR 19501999 REZAGADOS DE UNA GRADO DE
Y A 2006 COHOR TE. ESCOLARIDAD DE
CUER PO DOCENTE
Y ADMINISTRATI VO
10 46
POBLACIÓN ESCOLAR ÍNDI CE DE
POR NI VEL DE APR OBACI ÓN. 87
EST UDI OS 19501999 GRADO DE
Y A 2006 ESCOLARIDAD DE
47 PADRES DE
ÍNDI CE DE FAMILI A.
11 REPROBACIÓN.
EVOLUCIÓN DE L A
MATRÍCULA DE
LICENCI ATUR A 48
UNI VER SI T AR I A Y ÍNDI CE DE
DESERCIÓN.
TECNOL ÓGICA POR
RÉGIMEN 19701999
Y A 2006
12
MIGRACIÓN
INTEREST ATAL DE L A
POBLACIÓN ESCOLAR.
13
PER SONAL
ACADÉMICO 1999
2006
◙ 34 ◙
35. MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
14
REGIONAL IZACIÓN
DEL INGRESO AL SES.
15
INGRESO AL SES, POR
ORIGEN ÉTNI CO.
16
ÍNDI CE GI NI DE
DESIGUAL DAD DE
INGRESO ECONÓMICO
17
ÍNDI CE DE
DESARR OL LO
HUMANO.
18
INDI CE DE
MARGI NACIÓN.
19
RAZÓN DE
DEPENDENCI A
DEMOGRÁFICA.
20
CONDICIÓN
ECONÓMICA DE L A
POBLACIÓN
EST UDI ANT IL.
21
CONDICIÓN LABORAL
DE LOS
TRABAJADORES.
22
POBLACIÓN
EST UDI ANT IL
35
36. ORIGINAR I A DE
HOGARES EN
SITUACIÓN DE
POBREZA.
23 134
IES CERTIFICADAS. RESULT ADOS DE
EXAMEN DE
CAPACIDADES EN
24 LENGUA Y
IES EVALUADAS POR COMUNICACIÓN.
CIEES, NI VEL 1, 2, 3
135
25 RESULT ADOS DE
IES ACREDI TADAS. EXAMEN EN
CONOCI MIENTOS
TEÓR ICOS.
136
RSULTADOS DE
EXAMEN DE
CONOCI MIENTOS
II.2
MET ODOLÓGI COS.
Procesos de Cal i dad
137
RESULT ADOS DE
EXAMENES DE
CONOCI MIENTOS
PRÁCTI COS.
138
RESULT ADOS DE
EXAMENES DE
CAPACIDADES DE
EXPRESI ÓN LÓGICA Y
SINTÉTICA DE LOS
PENSAMIENTOS.
139
DEMOSTRACIÓN DEL
◙ 36 ◙
37. MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
DOMINIO DE
PRÁCTI CAS
PROFESI ONALES.
49 120
OFERT A EDUCAT I VA. IES CON ESTUDI OS Y
SER VI CI OS
TECNOL ÓGICOS A
50 EMPRESAS E
POBL ACI ÓN INSCRIT A INSTITUCI ONES.
III.1 EN T SU.
Educac i ón
uni versit aria,
superior de 51
formadores de POBL ACI ÓN INSCRIT A
docentes, superior EN LI CENCI AT UR AS.
t ecnol ógica.
52
POBL ACI ÓN INSCRIT A
EN ESTUDIOS DE
POSTGR ADO.
53 148 163
CRI TERI OS E TRÁMITES DE TIEMPO COMPLET O
INSTRUMENTOS PAR A CONTRATACIÓN DEL DESEABLE DE L A PLANTA
LA SELECCIÓN DEL PERSONAL, CON ACADÉMICA.
PER SONAL, DE PERTINENCI A
ACUERDO A L A LABORAL
NATUR ALEZA DEL PROFESI ONAL 164
PROGR AMA ACADÉMICA. TIEMPO PARCI AL DE LA
ACADÉMICO. PL ANTA DOCENTE.
III.2
54 165
Condic i ones de
PERFIL DOCENTE, CONTRAT OS POR
trabaj o
IGUAL O SUPERIOR AL HONORARIOS, DE L A
PL ANTA DOCENTE.
NIVEL EDUCATIVO
OFRECIDO.
55
SEGUI MIENTO DE LA
PRESTACI ÓN DEL
SER VICI O DE SUS
EMPLEADOS.
37
38. 88
DISEÑO
CURR ICUL AR DE
SUS PLANES Y
PROGRAMAS DE
EST UDI O,
CONSIDERANDO AL
ARTÍ CUL O
TERCER O
CONSTI TUCI ONAL,
A LA LEY GENERAL
DE EDUCACI ÓN Y
AL ACUERDO 279.
89
EST RUCTUR A DEL
IV.1 PLAN Y
Fundam ent os del PROGRAMAS DE
plan de estudi os: EST UDI O, SEGÚN
est ruct ura de los EL ACUERDO 279.
planes de estudio,
planeaci ón
90
académica,
REL ACI ÓN
Programación
CURR ICUL AR DE
didáctic a
LAS MATERI AS DEL
CONOCI MIENTO,
ÁREAS Y NI VELES.
91
SECUENCI A DE LOS
CONTENIDOS DE
LOS PROGR AMAS
DE ESTUDIO.
92
CALENDARIZACIÓN
POR PERIODO
ESCOLAR
DETERMINADO,
◙ 38 ◙
39. MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
PAR A L A
ADQUISICI ÓN DEL
CONOCI MIENTO.
93
PERFIL EL
INGRESO DE L OS
ALUMNOS AL
PROGRAMA.
94
CRI TERI OS
DIDÁCTI COS
ADECUADOS PARA
LA ENSEÑANZA DE
LA ESPECI ALI DAD.
IV.2
Di dác tica de la
espec ial i dad
95
RECURSOS
DIDÁCTI COS PARA
EL PROCESO DE
ENSEÑANZA
APRENDIZAJE.
96
PER TINENCI A DE
LA METODOLOGÍ A
DIDÁCTI CA
EMPLEADA.
56 97 113 140
PRESENCI A DE ALUMNOS POR ACCI ONES ALUMNOS CON
ALUMNOS SEGÚN GRUPO. EMPRENDEDORES RECURSOS
INGRESO PER CÁPIT A DISPONI BLES EN SU
Y NI VEL EDUCATI VO HOGAR, PARA LA
98 114 REALIZACI ÓN
IV.3
VI NCUL ACIÓN DE APORT ACI ONES SAT ISF ACTOR I A DE
Partici pación ac tiva
57 LA ACADEMIA CON CREAT I VAS SUS ESUDIOS
de los disc ent es
ALUMNOS QUE LA REALIDAD
COMBINAN EST UDIO Y
TRABAJ O 115 141
99 NÚMERO DE ALUMNOS QUE
ALUMNOS EGRESADOS POR
REALIZAN SUS
58 DEST ACADOS EN TESIS
39
40. ALUMNOS BECADOS FERI AS DEL EST UDI OS EN CLI MAS
CONOCI MIENTO DISCI PLI NARI OS
ADECUADOS
59
ALUMNOS CON 100
CAPACIDADES PREMIOS, 142
DIFERENTES DISTI NCI ONES, ALUMNOS CON
CERT IFICADOS SENTIDO DE
QUE AVALEN L A PER TENENCIA A L A
60 FOR MACIÓN IES
ALUMNOS CON NOT ABLE DE LOS
CAPACIDADES ALUMNOS
SOBRESALIENTES
101
ATENCIÓN
EFICIENTE A LOS
ALUMNOS
61 102
REL ACI ÓN DE SUSTENTO Y
RECUR SOS Y ORGANIZACIÓN
CUERPOS CUER POS
COLEGI ADOS COLEGI ADOS
62 103
DOCENTES CON CUER POS
EST ABILIDAD COLEGI ADOS POR
CONTR ACT UAL PROGRAMA
IV.4 ACADÉMICO
Cuerpos col egiados
63
REMUNERACIÓN 104
DOCENTE EN EVI DENCIAS DE L A
PROPOR CI ÓN CON EL ACTI VIDAD
PI B ACADÉMICA Y
ADMI NI STR ATI VA
DE LOS CUERPOS
64 COLEGI ADOS
DOCENTES
POTENCIAL MENTE
JUBILABLES
◙ 40 ◙
41. MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
65
EST ABILIDAD DE
DIRECTORES Y
DOCENTES
66
REL ACI ÓN DE
PROFESORES CON
PER SONAL
ADMI NI STR ATI VO
105
DOCENTES CON
EST UDI OS DE
ESPECI ALIDAD
106
PROGRAMA DE
IV.5 CAPACIT ACI ÓN,
Academ ias: perfil FOR MACIÓN Y
académ ico ACTUALIZACI ÓN
profesi onal i dóneo y DEL PERSONAL
programa de DOCENTE Y
capaci taci ón, ADMI NI STR ATI VO
formaci ón y
actualización
doc ent e y 107
adm ini strativa EVI DENCIAS DE L A
APLI CACIÓN DEL
PROGRAMA
CAPACIT ACI ÓN,
FOR MACIÓN Y
ACTUALIZACI ÓN
DEL PERSONAL
DOCENTE Y
ADMI NI STR ATI VO
67 108 121 143 149
DIRECTI VOS QUE PROMOCIÓN ÉT ICA PROFESORES QUE ALUMNOS POLÍ TICAS,
INTERVIENEN DE LOS INTERVIENEN INCORPOR ADOS A MANUALES E
IV.6 ACTI VAMENTE EL LOS PROCEDIMIENTOS ACTI VAMENTE DE CONTINUACIÓN DE INTRUMENTOS PARA
Proc eso de PROCESOS DE A/E DE TI TULACIÓN MANER A EST UDI OS EL INGRESO AL
aprendi zaje/ EXTRAORDINARI A EN PROGRAMA
enseñanza LOS PROCESOS DE
68 144
A/E
ASESORES INTERNOS VENT AJ AS
QUE INTER VIENEN RELATI VAS DE LOS
41
42. ACTI VAMENTE EN EGRESADOS, DE
LOS PROCESOS DE ACUERDO A SU
A/E OPCI ÓN DE
TI TULACIÓN
69
POLÍ TICAS PAR A EL
DISEÑO DEL ESPACI O
ESCOL AR
70
INST AL ACI ONES
ACADÉMICAS,
EXTRACURRICUL ARE
S, ADMINI STR ATI VAS
Y DE
MANTENIMIENTO
71
USO DE ESPACI OS
IV.7
Rec ursos e 72
infraestruc tura PLANES DE
SEGURIDAD
73
ESCUELAS CON
ESPACI OS CREADOS
EX PROFESO
74
ESCUELAS EN
LUGARES ADAPTADOS
75
NUMERO DE
ALUMNOS POR AULA
V.1 26 116 122
Di sci plinar PATENTES ENFOQUES IES CON PROYECT OS
◙ 42 ◙
43. MARCO DE REFERENCIA PARA LA CULTURA DE CALIDAD Y
EVALUACIÓN DEL SISTEMA DE EDUCACIÓN SUPERIOR
REGISTRADAS POR TEÓRICOS DE LA APLI CADOS EN
IES INVESTI GACI ÓN SECTORES
REALIZADA TRADI CI ONALES.
117 123
PROYECTOS IES CON PROYECT OS
ACADÉMICOS APLI CADOS EN
(DISEÑO, SECTORES
CONCL USIÓN, EMERGENTES.
OPERACIÓN,
LI BERADOS).
124
EVI DENCI AS SOBRE
118 LAS ACTIVIDADES DE
PROYECTOS DE INVESTI GACI ÓN.
INVESTI GACI ÓN
CIENTÍF ICA.
125
MEDIOS DE
119 DIVULGACI ÓN.
PROYECTOS DE
INNOVACIÓN
TECNOL ÓGICA.
76 109
ACERVO PROGRAMA DE
BIBLIOTECARI O Y INVESTI GACIÓN
BANCO DE COR RESPONDIENT
INF ORMACI ÓN, E CON EL (LOS)
ADECUADO PARA PROGRAMA(S)
I MPART IR LOS ACADÉMICO(S)
PROGR AMAS I MPART IDOS POR
ACADÉMICOS QUE LA IE.
OFRECE
V.2 110
Educati va 77 MATERI ALES
USUARI OS CURR ICUL ARES
SAT ISFECHOS CON EL PAR A VI GENCI A
SER VICI O DEL (DE LOS)
BIBLIOTECARI O PROGRAMA(S).
111
MATERI ALES
DIDÁCTI COS
PROPIOS PARA LA
ENSEÑANZA DEL
43