Este documento describe los componentes y procesos de evaluación de cursos en línea. Explica que un curso en línea se basa en un proceso interactivo de enseñanza-aprendizaje a través de Internet. Detalla los objetivos, características, componentes y fases del proceso de evaluación, incluido el análisis, diseño e implementación de instrumentos de medición. También cubre los actores y criterios éticos involucrados en la evaluación de cursos en línea.

1. Evaluación de cursos en línea Elaborado por: Perla Manzanero Rivero

2. ¿Qué es un curso en línea? Un curso en línea se fundamenta en un proceso de enseñanza-aprendizaje de tipo interactivo, en el que el estudiante tiene la posibilidad de interactuar o comunicarse, a través de internet, con el contenido, con el profesor y con los demás participantes del curso, por medio de las asignaciones, charlas, debates, exámenes, pruebas cortas, y otros dispositivos que puedan tomar el lugar de un libro, una unidad o un capítulo del material.

4. Entender el rol del facilitador en los cursos en línea.

5. Exponerse a diferentes tipos de facilitación en línea

6. Practicar a través de la facilitación una parte de un curso en línea.

7. Familiarizarse con la naturaleza de las discusiones en los cursos en línea.

8. Características de un curso en línea La mayoría de los cursos en línea emplean un entorno o ambiente de enseñanza-aprendizaje basado en la tecnología web, denominado sitio web instruccional o, simplemente, sitio instruccional. Se define el sitio instruccional como el ambiente interactivo de enseñanza-aprendizaje que integra a todos los demás elementos que componen el curso en línea: facilitadores, estudiantes, plan de estudio y demás recursos didácticos y herramientas de comunicación. El proceso enseñanza-aprendizaje se da usando el sitio instruccional como medio fundamental de interacción y comunicación.

10. Subsistema administrativo: Está integrado por una herramienta de gestión del proceso de enseñanza-aprendizaje y el administrador de los recursos humanos, educativos, tecnológicos.

12. Fase 3. Diseño del instrumento de medida Definir la cantidad de instrumentos a ser utilizados Diseñar el contenido del o de los instrumentos de medida Seleccionar la modalidad para captura de datos Diseño de la estructura del instrumento de medida Determinar características y elementos de las preguntas Determinar las técnicas para analizar los datos de evaluación Determinar el tamaño del instrumento y el tiempo estimado de ejecución Estimar el tamaño de la muestra de evaluadores Determinar cómo serán presentados los resultados de la evaluación Fase 4. Producción del instrumento de medida Determinar el medio y formato de presentación de los instrumentos de medida Elaborar el o los instrumentos de medida Elaborar instrucciones para administrar las pruebas

13. Fase 5. Administración de la(s) prueba(s) Seleccionar los evaluadores Adiestrar u orientar a los evaluadores en el uso del instrumento Conducir la prueba siguiendo la modalidad seleccionada Fase 6. Análisis de los datos Definir el modo de procesamiento de los instrumentos aplicados Procesar los instrumentos según enfoque y tipo de evaluación seleccionados. Analizar los resultados del procesamiento atendiendo a los indicadores definidos en la fase. Resumir resultados Presentar resultados según formato preestablecido en la fase 3. Fase 7. Producción del informe final de evaluación Identificar fortalezas y debilidades del curso en línea evaluado. Elaborar el informe final.

14. Consideraciones para proponer un modelo de evaluación de cursos en línea Montilva, Barrios y Sandia (2002) proponen un marco metodológico para la evaluación de productos instruccionales que emplea principios y modelos de la Ingeniería de Métodos. Uno de los aspectos más relevantes de este marco metodológico es su adaptabilidad a las características fundamentales del producto que se desea evaluar. En este sentido, el método facilita la evaluación de un producto desde múltiples perspectivas, las cuales son determinadas por el grupo de evaluación. Cada perspectiva define un conjunto de facetas de evaluación del producto. A cada faceta, a su vez, se le establecen los atributos de evaluación. A partir de los atributos, el grupo de evaluación diseña las preguntas que integrarán los instrumentos de evaluación. Este método sirve de fundamento para definir el proceso de evaluación de un curso en línea.

15. Actores en el proceso de evaluación El líder de la evaluación. Es el responsable de la planificación, organización, dirección, supervisión y control del proceso completo de evaluación. Estas actividades pertenecen al proceso de Administración y gestión del proceso de evaluación, definida en Montilva, Barrios y Sandia (2002). El líder será también el responsable de analizar los datos derivados del proceso de evaluación, y de producir el informe final correspondiente, con las conclusiones y recomendaciones. Los diseñadores de la evaluación. Son los encargados de la definición de los requisitos, del diseño de instrumento de evaluación y de la producción de estos instrumentos. Además, son los encargados de identificar las fortalezas y debilidades del sitio web del curso en línea, a partir del reporte de resultados del proceso de evaluación. Luego producen el informe final en conjunto con el líder.

16. Instrumentos de medición en el proceso de evaluación Se sugiere diseñar un instrumento por evaluación. Sin embargo, si el número de facetas y atributos que se desean evaluar crece significativamente, es más conveniente diseñar un instrumento para cada perspectiva. Otro criterio que puede emplearse es diseñar un instrumento para cada tipo de evaluador. El diseño de la estructura del instrumento de medida estará determinado por el enfoque de evaluación, la modalidad de captura de datos y, de alguna forma, el medio utilizado para su difusión. Para cada pregunta se establecen: su propósito, la escala de valoración u opciones de respuestas, manera de realizar la puntuación, el peso de opciones en las preguntas cerradas, el indicativo de importancia o relevancia dentro de la pregunta, etc.

17. Criterios en el proceso de evaluación Establecer el alcance, propósitos y beneficiarios de la evaluación. Seleccionar las teorías, estilos y principios que se desean emplear como filosofía de la evaluación. Determinar si se hará una evaluación exploratoria, comparativa, etc. Establecer las perspectivas, facetas y atributos que se aplicarán para evaluar el curso. Establecer los recursos humanos, tecnológicos, financieros y de tiempo que están disponibles para llevar adelante la evaluación.

18. El administrador. Es el encargado de conducir la prueba y analizar los datos obtenidos durante la administración de la evaluación. Se encarga de procesar los datos recogidos con el instrumento de medida. Los evaluadores. Es un grupo de personas integrado por usuarios, estudiantes, instructores, diseñadores instruccionales, etc., que utilizarán el instrumento de evaluación para calificar el producto instruccional. Este grupo es seleccionado, generalmente, mediante un proceso de muestreo.

19. Consideraciones éticas en la evaluación de cursos en línea Autenticación •Seguridad de la información. Resulta importante para la credibilidad de una institución el no aprovecharse, ni difundir información privilegiada. De igual forma es deber de la institución mantener controles estrictos de seguridad ante intrusos externos a fin de evitar posibles catástrofes. •Propiedad intelectual. Se debe de respetar la propiedad intelectual de la institución sobre cualquier material utilizado, así como todas las herramientas usadas en el proceso de aprendizaje. De igual forma el alumno tiene el derecho propiedad intelectual sobre los trabajos que presente, evitando su difusión sin su previo consentimiento.

20. Selección de los recursos humanos. Se refiere a las normas que la institución tiene para seleccionar recursos humanos de primer nivel. Se debe contar con una metodología para contar con un profesorado de calidad, con un nivel de formación alto y con experiencia en el campo laboral. Los aspectos salariales y las responsabilidades laborales deben estar previamente definidos, para evitar problemas a posteriori. Información. La institución debe hacer accesible toda la información respecto a sus metas, sus compromisos, sus normativas y señalar los deberes que cada miembro tiene con la Institución y viceversa. La información debe ser clara y fácilmente localizable. Se deben de respetar las opiniones de los miembros, creando un clima de tolerancia, democracia y de participación. Las instituciones de ED a diferencia de una institución de educación presencial necesitan hacer claros y explícitos todos los cursos y metodologías de aprendizaje para garantizar el buen desempeño de los alumnos. Puede pensarse que a mayor información, mayor garantía existe en el proceso de aprendizaje, sin embargo, esto no siempre sucede. Se debe de encontrar un límite humano razonable de información, para no caer en una sobre-saturación de información y por consecuencia, una pérdida de desempeño del alumno.

21. Evaluación de la universidad ante otras universidades. Para poder conocer la verdadera calidad en la educación que la institución ofrece es necesaria evaluarla y compararla. La comparación podría ser sólo entre instituciones no presénciales o ante cualquier institución de educación. El Estado se debe responsabilizar en la realización de una evaluación general y así poder hacer diversas recomendaciones para mejorar la educación en cada institución. La forma de evaluación es un tema crítico en este punto pues es necesario determinar si se hace presencial o no. Se opta por una auditoría completa de la institución, como una forma de evaluación, en el que tenga como fin principal la verificación del proceso enseñanza-aprendizaje.