El documento presenta un instrumento para evaluar el software educativo desde un enfoque sistémico. Propone adaptar el Modelo Sistémico de Calidad de Software (MOSCA) para evaluar la calidad del producto y proceso de desarrollo de software educativo. El instrumento evalúa las categorías de funcionalidad, usabilidad y fiabilidad a través de 587 métricas agrupadas en 11 características. Se aplica mediante cuestionarios a estudiantes, profesores y desarrolladores, y permite cuantificar y normalizar los resultados para determinar el

1. Instrumento de evaluación de software educativo bajo un enfoque sistémico Presentado por: Rogelio A. Pincheira Jiménez

2. El problema… Incorporar Software educativo de calidad en el aula. Estudios de uso de Software Beichner, 1994 (g);Borrás y Lafayette, 1994 (l); Cohen et al., 1994 (s); Cohen, Tsai et al., 1995 (s); Díaz-Antón, 2002 (s); Jonassen y Reeves (c), 1996, Liu y Reed 1995 (hm); Mayer et al., 1997 (c); Yildirim et al., 2001 (hm). Evaluaciones cuantitativas de Software Barrosot et al., 1998; Del Moral, 1998; Galvis, 2000; Gómez, 1997; González, 1999; Gros (Coord.) et al., 1997; Marquès, 1998; Martínez, 1993; MVU, 2002; Navarro, 1999; OTA, 1988; PEMGU, 1999; Reeves, 1998; Stephen, 1998). Instrumento de evaluación de software educativo bajo un enfoque sistémico

3. El problema… Pipo? Instrumento de evaluación de software educativo bajo un enfoque sistémico Trampolín? ¿Como evaluar “objetivamente” la calidad de un software educativo? Abrapalabra? El conejo lector?

4. El contexto… Necesidad de evaluar software según estándares de calidad internacionales (Norma ISO/IEC 9126). Eficiencia Funcionalidad Calidad de un software Manteneabilidad Fiabilidad Usabilidad Portabilidad Instrumento de evaluación de software educativo bajo un enfoque sistémico

5. El contexto… Norma ISO/IEC 15504 (1991), Adquisición Mantenimiento Calidad de un proceso Suministro Operación Desarrollo Instrumento de evaluación de software educativo bajo un enfoque sistémico

6. La propuesta… Adaptación Modelo Sistémico de Calidad de Software (MOSCA). Elaborado por LISI-USB (Laboratorio de Información y Sistemas de Información, Universidad Simón Bolívar). Gabriela Díaz-Antón. María Angélica Pérez. Luis Eduardo Mendoza. Ana Cecilia Grimán. Instrumento de evaluación de software educativo bajo un enfoque sistémico 2002

7. Modelo propuesto… 1 2 3 Metodología de preselección y estudio de selección final para la adquisición del software educativo Serie de cuestionarios aplicados a alumnos, profesores y desarrolladores de software. Cuantifica las métricas de evaluación de calidad a partir de tres categorías: Funcionalidad Usabilidad Fiabilidad Instrumento de evaluación de software educativo bajo un enfoque sistémico

8. Variables Producto (6 características) Calidad del software educativo. Referencias: Galvis (2002) Grimán, Mendoza, Pérez y Rojas (2001). Calidad del software. Referencias: Pressman (2002) Callaos y Callaos (1993) Pérez et al. (1999) Ortega, et al. (2000) Funcionalidad Usabilidad Fiabilidad Proceso (5 características) Instrumento de evaluación de software educativo bajo un enfoque sistémico

9. Estructura del modelo… Dimensiones Categorías Características Métricas Consta de 4 niveles y 587 métricas M O S C A Instrumento de evaluación de software educativo bajo un enfoque sistémico

10. Algoritmo para evaluar lacalidad sistémica… Fase 1 Fase 2 Fase 3 Integración de las mediciones de los sub-modelos de la calidad del producto y la calidad del proceso. Calidad del proceso de desarrollo de software con un enfoque sistémico. Calidad del producto de software con un enfoque sistémico. Instrumento de evaluación de software educativo bajo un enfoque sistémico

11. Método de preselección de software educativo… Instrumento de evaluación de software educativo bajo un enfoque sistémico

12. Propuesta de categorías, características, sub-características y número de métricas… Instrumento de evaluación de software educativo bajo un enfoque sistémico

13. Propuesta del modelo de evaluación de software educativo… Instrumento de evaluación de software educativo bajo un enfoque sistémico

14. Características mínimas que deben ser satisfechas para cada categoría… Instrumento de evaluación de software educativo bajo un enfoque sistémico

15. Normalización de las métricas para la evaluación del producto… Instrumento de evaluación de software educativo bajo un enfoque sistémico

16. Nivel de calidad del producto con respecto a las categorías satisfechas… Instrumento de evaluación de software educativo bajo un enfoque sistémico 75 %

17. Caso de estudio Trampolín 3º Los Aventureros 3º Kids English Smart Start in English Instrumento de evaluación de software educativo bajo un enfoque sistémico

18. Caso de estudio Instrumento de evaluación de software educativo bajo un enfoque sistémico

19. Conclusión Instrumento de evaluación de software educativo bajo un enfoque sistémico Evaluación Ética Innovación Desarrollo De contenidos Posibilidad de réplica

20. Teoría y Práctica de la Evaluación en el Contexto de Innovación y Cambio Educativo Rogelio A. Pincheira Jiménez