Este documento presenta un estudio sobre la evaluación del desempeño y la usabilidad de sitios web educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal. El estudio desarrolla un modelo de evaluación de la calidad de sitios web educativos y evalúa varios sitios según criterios como el contenido, la navegabilidad, la actualización y la accesibilidad. Los resultados proporcionan una guía de buenas prácticas para los creadores de sitios web educativos y conclusiones sobre cómo mejorar
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
1. Los sitios educativos de apoyo al aprendizaje en
educación primaria y secundaria en Portugal: un estudio
de desempeño y de usabilidad
___________________________________________________________
Doctoranda: Ana Maria Monteiro dos Santos
Directores:
Prof. José Antonio Cordón García y Raquel Gómez Díaz
Salamanca, 5 de julio de 2018
2. Tabla de contenido
___________________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
3. Tabla de contenido
___________________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
4. Pregunta de partida
Hipótesis
¿En qué medida los
recursos digitales de
apoyo al aprendizaje
disponibles en
Educación primaria y
secundaria en Portugal
son acordes a los
criterios de evaluación?
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
5. Los sitios web educativos de apoyo a las aprendizajes potencian los criterios de evaluación de la
calidad
Los creadores de los sitios web educativos están interesados en la actualización de sus contenidos
Los criterios de evaluación en los sitios web educativos pueden ser específicos y mensurables
Los sitios web de apoyo al aprendizaje que tienen en cuenta la valoración de los criterios, lograrán
aumentar en el alumno la adquisición y la retención del conocimiento
Los usuarios evalúan los sitios web según la satisfacción de sus necesidades
Cuando se crearon los sitios web los autores tuvieron en cuenta la usabilidad y su aceptación
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Hipótesis
6. Objetivo General
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Objetivos de Investigación
Establecer un sistema de evaluación de calidad de sitios web educativos de
apoyo a la enseñanza dirigidos a la Educación Primaria y Secundaria
7. Objetivos de Investigación
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Objetivos específicos
1. Estudiar los sitios educativos en Portugal
2. Conocer la tipología de los sitios web educativos
3. Definir los requisitos para seleccionar sitios web en Portugal
4. Crear una propuesta teórico-metodológica de evaluación de la Calidad de sitios web educativos, creando
un Modelo de Evaluación de la Calidad
8. Objetivos de Investigación
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Objetivos específicos
5. Utilizar herramientas de evaluación cualitativas y cuantitativas
6. Construcción de nuevas herramientas de evaluación de calidad de recursos en línea desde una
perspectiva objetiva y subjetiva
7. Establecer un Guía de buenas prácticas que ayude a los autores a conocer los requisitos que debe tener
un sitio web educativo para apoyar a los usuarios en las materia lectivas.
9. Relevancia del estudio
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Internet es un gran instrumento para acceder a la información
Faltan investigaciones sobre la evaluación de sitios educativos y sobre
los modelos de evaluación
Los creadores de espacios web educativos desconocen algunos conceptos
esenciales para la construcción de sitios web educativos con calidad
Los sitios web tienen que estar bien construidos en términos de usabilidad y
satisfacción de desempeño
10. Dificultades
Recogida y tipificación de los sitios web educativos
Selección y definición de la terminología a utilizar
Definición y número de criterios e indicadores a utilizar en el Modelo de evaluación
Dificultad para contactar con algunos responsables de los sitios web educativos para el envío del
cuestionario en línea
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
11. Tabla de contenido
___________________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
12. Evaluación de sitios web: enfoque de autores
WangeStrong(1996)
Beck(1997)
AlexandereTate(1999)
Olsina(1999)
Codina(2000a,b)
MarquèsGraells(2000)
BoklaschukeCaisse(2001)
FernandeseGodinho(2001)
OliveiraeAmaral(2003)
Herrera-Viedma(2004)
Obeso(2005)
Fernandes(2005)
Simões(2005)
TorresBarzabal(2005)
Carvalho(2006)
Silva(2006)
AlveseQuiroaHerrera(2007)
Costa(2007)
Ribeiroetal.(2007)
BottentuiteCoutinho(2007)
Araújo(2008)
CalerodelaPazetal.(2008)
MachadoeRocha(2008)
PintoMolina(2008)
Rocha(2010)
Correia(2011)
Santos(2012)
Henriques(2014)
Soaresetal.(2016)
Frequência
Acessibilidade X X x x x x x x x x x x x 13
Ajuda 1
Apresentação da Informação x x x x x 5
Atividades x x 2
Atualidade X x x x 4
Audiência /Adequado aos destinatários X X 3
Autoridade / Identidade X X X x x x x x x 9
Capacidade x 1
Cobertura da informação /Abrangência x X X 3
Comunicação x x 2
Confiabilidade / Fiabilidade x x 2
Conformidade / Repres. Concisa x x 2
Contacto x 1
Data X 1
Design Gráfico/Layout x x x x x 5
Edição colaborativa em linha x x 2
Espaço de Partilha x x 2
Funcionalidade/Eficiência x x x x x x 6
Interação (Feedback – capacidade de resposta) x x x x x x x 7
Interpretabilidade x 1
Links (Ligações) x 1
Manutenção/Gestão X x 2
Navegação X x x x x x x 7
Objetividade e Conteúdo / Informação X X X X x x x x x x x x x x x x x x x 19
Orientação x 1
Originalidade X 1
Portabilidade X x 2
Precisão/Rigor da informação x X X 3
Qualidade audiovisual e multimédia X 1
Qualidade técnica x 1
Rapidez de acesso x x x 3
Relevância x x 2
Serviços de apoio em linha x x x 3
Usabilidade X x x x x x x x x x x 11
Visibilidade X X 2
Critérios de Avaliação
Autores
Objectividad y
Contenido/Infor
mación
accesibilidad
usabilidad
Autoridad/
Identidad
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
13. Tabla de contenido
___________________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
14. Metodología
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Metodología de
investigación
mixta
Estudio exploratorio
cuantitativacualitativa
Observación
directa
modelo de
evaluación
instrumentos
de medición
cuantitativa
evaluación
objectiva
evaluación
subjectiva
15. Metodología
• Recursos educativos
• Sitios educativos
• Sitios web educativos + educación primaria
• Sitios web educativos + educación secundaria
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
La investigación para este trabajo fue efectuada en Internet entre el último trimestre de
2014 hasta principios de 2015 y se desarrolló hasta la tercera página de los resultados
Los motores de búsqueda (Google, Yahoo…)
Búsquedas a través de palabras clave, con o sin comillas y utilizando a veces el signo "+",
como por ejemplo:
16. Metodología
• Cuestionario aleatorio a los
alumnos
Usabilidad
Rendimiento
Satisfacción
• Plantilla (Modelo)
• Encuestas (usuarios y creadores)Sitios web
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
17. Herramientas
Herramientas de evaluación cualitativa
Ficha Descriptiva de Datos (FDD)
Aplicaciones informáticas: Validador
Examinator, AccessMonitor y Web Link
Validator
Cuestionario para los usuarios de la
Educación Primaria y Secundaria
Modelo de Evaluación de la Calidad de
Sitios Web Educativos (ACSWE)
Cuestionario a los creadores de Sitios
Web Educativos
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Herramientas de evaluación cuantitativa
18. Modelo ACSWE
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
ASPECTOS TÉCNICO-ESTÉTICOS
DISEÑO GRÁFICO Y CALIDAD MULTIMEDIA (10%)
Diseño claro y atractivo de las páginas
Textos y enlaces
Adecuada integración de los medios (recursos audiovisuales)
Homogeneidad visual entre páginas
Relevancia de las imágenes
Actividades
CONTENIDO (30%)
Objetividad (la información es correcta)
Identificación de las fuentes de información
Calidad de la escritura
Adecuado a la edad
Instalación de Plugins
NAVEGACIÓN (30%)
Visibilidad y presencia del menú de contenido
Mapa del sitio
Conexiones que permitan acceder al nivel superior en todas las páginas
Movimientos intuitivos entre páginas
Presencia de botones de navegación que permiten al usuario recorrer el sitio web
de forma lógica
Secuencia de las páginas accedidas
Velocidad adecuada en las animaciones, lectura de datos
RAPIDEZ DE ACCESO (10%)
Rapidez de acceso al sitio y de navegación en su interior
Enlaces rotos
INTERACCIÓN (20%)
Acceso a otros recursos de Internet
Posibilidad de guardar documentos
Posibilidad de impresión y envío por correo electrónico
Existencia de herramientas colaborativas (Web 2.0)
Chat, foro, Wikis, etc.
Correo electrónico o formulario de solicitud de información
ASPECTOS FUNCIONALES
AUTORIDAD (30%)
Inscripción del autor y / o organización a la que pertenece
Descripción del currículo académico o profesional
Dirección de correo electrónico, teléfono y dirección postal
Declaración de principios e intenciones sobre la finalidad de los contenidos
Logótipo que represente a instituição
Alguna crítica o mención por parte de una organización externa
sobre la calidad del sitio web
ACTUALIZACIÓN (15%)
Fecha de creación del sitio web
Fecha de actualización
Existencia de conexiones obsoletas y erróneas, que no nos lleva a un lado
alguno
USABILIDAD (20%)
Las páginas web resultan ser agradables, fáciles de usar y auto
explicativas
Estructura del sitio: menú siempre disponible, a través de una estructura
en rede
Recorrido seguido
Acceso al contenido en otros formatos
ACESSIBILIDAD (20%)
Versiones alternativas de visualización
Cumplimiento de la norma WAI
Ayuda a la navegación
Visibilidad de la ayuda
Versiones en otros idiomas
Imágenes, mapas de imágenes sin textos alternativos
Motor de búsqueda interno
Sonidos y vídeos sin subtítulos
El usuario debe poder controlar los vídeos y el sonido
Facilidad de lectura
COMUNICACIÓN (15%)
Contacto del responsable
Comunicación sincrónica, realizada a través de chat
Comunicación por correo electrónico y foro
19. Ponderación de los criterios
Autoridad 30%
Actualización 15%
Accesibilidad 20%
Usabilidad 20%
Comunicación 15%
Total 100%
Diseño gráfico y calidad multimedia 10%
Contenido 30%
Navegación 30%
Rapidez de acceso 10%
Interacción 20%
Total 100%
Aspectos Funcionales (50%)
Aspectos Técnicos-Estéticos (50%)
100%
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
20. Descripción de la muestra
Sitios web educativos para la
Educación Primaria (n=20)
Sítios web educativos para la
Educación Secundário (n=37)
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
21. Descripción de la muestra
• Abordar temas directamente relacionados con áreas de conocimiento para la Educación Primaria y
Secundaria
• Seleccionar solo sitios de aprendizaje y conocimiento más detallado de los ámbitos mencionados
• Adecuarse a los jóvenes entre los 6-10 años y 16-18 años
• Exclusión de todos los sitios web educativos que no fueran de uso libre y gratuito
• Incluir sólo los sitios portugués y eliminar páginas con el dominio público "br“
• Exclusión de blogs
Delimitación de
la muestra
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en portugal: un estudio de desempeño y de usabilidad
22. Descripción de la muestra de alumnos encuestados
Alumnos – EP
Alumnos - ES
68
200
La muestra de alumnos utilizados es una muestra de conveniencia del total de la
población.
El cuestionario fue constituido por 40 preguntas cerradas, y otra para medir el
grado de satisfacción (cinco opciones, escala de Likert)
La aplicación de la encuesta por cuestionario
a los usuarios/alumnos se realizó durante el
mes de mayo-junio/2016 .
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
23. Tabla de contenido
___________________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
24. AspectosFuncionales 1,75 0,50 0,87
AspectosTécnico-Estéticos 2,21 0,50 1,11
CriteriosdelosAspectosFuncionales
Autoridad 1,78 0,30 0,53
Actualización 1,97 0,15 0,30
Usabilidad 2,02 0,20 0,40
Accesibilidad 1,16 0,20 0,23
Comunicación 1,81 0,15 0,27
CriteriosdelosAspectosTécnico-Estéticos
DeseñoGráficoYCalidadeMultimEdia 1,50 0,10 0,15
Contenido 2,56 0,30 0,77
Navegación 1,81 0,30 0,54
RapidezdeAcceso 3,40 0,10 0,34
Interacción 1,79 0,20 0,36
Media %Ponderación MediaPonderada
Resultados del análisis vertical
Media más elevada.
Alcanzó la valoración de
suficiente
Criterio con media más
elevada. Alcanzó la
valoración de suficiente
Criterios con una media
más elevada. Alcanzaron la
valoración de suficiente y
bueno
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Fuente: SPSS a partir de los datos recogidos
25. Resultados por grado de enseñanza
Los Aspectos Técnico -Estéticos obtuvieron mejores
resultados en los dos Grados de Enseñanza,
destacándose el ES
Los criterios en los AF que obtuvieron mejores
medias, llegando a la valoración de suficiente fue el
ES, con el criterio Actualización y Usabilidad
Los criterios en los ATE que obtuvieron mejores
medias, llegando a la valoración de suficiente y
bueno en ambos grados de enseñanza fueron el
Contenido y la Rapidez de Acceso
0=NA / 1=Malo / 2=Suficiente / 3=Bueno / 4=Mui Bueno
Fuente: SPSS a partir de los datos recogidos
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Media dp Media dp p Mann-Whitney
AspectosFuncionales 1,57 0,25 1,84 0,34
AspectosTécnico-Estéticos 2,18 0,19 2,23 0,25
CriteriosdosAspectosFuncionales
Autoridad 1,61 0,57 1,87 0,35
Actualización 1,68 0,44 2,13 0,72
Usabilidad 1,88 0,48 2,1 0,55
Accesibilidad 1,15 0,36 1,18 0,37
Comunicación 1,55 0,38 1,95 0,59
CriteriosdosAspectosTécnico-Estéticos
Deseño gráfico y calidademultimedia 1,57 0,47 1,46 0,55
Contenido 2,55 0,16 2,57 0,25
Navegación 1,8 0,38 1,82 0,46
RapidezdeAcceso 3,4 0,62 3,41 0,6
Interación 1,58 0,48 1,91 0,53
0,986
0,021
0,134
0,717
0,007
0,308
0,796
0,724
Ed.Secundaria
(n=37)
0,004
0,349
0,047
0,013
Ed.Primaria
(n=20)
26. Resultados del análisis horizontal
El sitio davcosta obtuvo
mejor media y media
ponderada en los Aspectos
Funcionales y en los
Aspectos Técnico-Estéticos
El sitio jotave obtuvo peor
media y media ponderada
en los Aspectos Funcionales
y en los Aspectos Técnico-
estéticos
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
ID Nombre del sitio Media
Media
Ponder.
Media
Media
Ponder.
1 aprende e diverte-te 1,37 0,68 2,36 1,18
2 coolkids 1,59 0,80 1,97 0,98
3 davcosta 2,05 1,02 2,53 1,27
4 fabulas 1,94 0,97 2,30 1,15
5 fichas 1º ciclo 1,43 0,72 2,24 1,12
6 mosaico 1,93 0,96 2,28 1,14
7 nosso amiguinho 1,85 0,93 2,16 1,08
8 jsaraiva 1,37 0,68 2,16 1,08
9 jotave 1,17 0,58 1,86 0,93
10 rosaritos 1,71 0,86 2,35 1,18
11 quadrado mágico 1,66 0,83 2,10 1,05
12 quadro e giz 1,48 0,74 2,13 1,07
13 recreio 1,44 0,72 1,86 0,93
14 centro de recursos 1,53 0,77 2,25 1,12
15 Net Escolas Básicas 1,78 0,89 2,49 1,25
16 zonix 1,64 0,82 2,04 1,02
17 jogos infantis 1,18 0,59 1,91 0,95
18 matem.divertida 1,40 0,70 2,20 1,10
19 abolina 1,31 0,66 2,07 1,03
20 recursos educativos 1,62 0,81 2,30 1,15
EducaciónPrimaria ASP. FUNC. ASP. TÉC.
Fuente: SPSS a partir de los datos recogidos
27. ID Nombre del sitio Media
Media
Ponder.
Media
Media
Ponder.
21 aabrantes 1,38 0,69 1,78 0,89
22 o meu baú 2,05 1,03 2,38 1,19
23 macs 1,35 0,67 2,32 1,16
24 página Artur Rosa 2,00 1,00 1,89 0,95
25 situações matemáticas 2,03 1,02 1,91 0,95
26 matem.-A rosa ferreira 2,33 1,16 2,52 1,26
27 absolutamente 2,66 1,33 2,59 1,30
28 eletrotecnia e eletrónica 1,98 0,99 2,39 1,20
29 matemática 1,81 0,91 2,19 1,09
30 página apoio alunos 1,48 0,74 2,04 1,02
31 rui paulo lebre 1,87 0,94 2,44 1,22
32 ferralopes 1,18 0,59 1,78 0,89
33 elisiosilva 2,50 1,25 2,66 1,33
34 atractor 2,11 1,06 2,79 1,39
35 eduvisilva 1,73 0,87 2,29 1,14
36 anfra projetos 2,01 1,01 2,32 1,16
37 elektron 1,81 0,90 2,21 1,11
38 ludgero Leote 1,90 0,95 1,98 0,99
39 dteedmi 1,55 0,78 2,26 1,13
40 página José Matias 1,63 0,81 2,09 1,04
EducaciónSecundaria
ASP. FUNC. ASP. TÉC.
Resultados del análisis horizontal
El sitio absolutamente obtuvo la media más
elevada en los Aspectos Funcionales y Técnico-
estéticos
El sitio ferralopes obtuvo la media más baja
en los Aspectos Funcionales y Técnico-
estéticos
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en portugal: un estudio de desempeño y de usabilidad
Fuente: SPSS a partir de los datos recogidos
28. ID Nombre del sitio Media
Media
Ponder.
Media
Media
Ponder.
41 Luisalegrio.automação 2,00 1,00 2,44 1,22
42 Rui Cancelinho 2,04 1,02 2,51 1,25
43 dicionário de sociologia 1,68 0,84 2,22 1,11
44 frances 1,41 0,71 2,14 1,07
45 eletronica 2,23 1,12 2,40 1,20
46 molecularium 1,73 0,87 2,03 1,02
47 laboratório 2,09 1,05 2,47 1,23
48 farol das letras 2,16 1,08 2,38 1,19
49 figuras de estilo 1,59 0,79 2,24 1,12
50 serreta 2,32 1,16 2,33 1,17
51 Química12 1,88 0,94 2,37 1,19
52 curlygirl 1,66 0,83 1,83 0,91
53 coisas matemática 1,36 0,68 1,98 0,99
54 naveg.filosofia 1,73 0,87 2,02 1,01
55 portal de apoio.fasp 1,88 0,94 2,33 1,16
56 crítica 1,71 0,86 2,12 1,06
57 matemáticaA 1,38 0,69 2,02 1,01
ASP. FUNC. ASP. TÉC.EducaciónSecundaria
Resultados del análisis horizontal
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en portugal: un estudio de desempeño y de usabilidad
En los AF 14 sitios web obtuvieron
promedios positivos de suficiente
En los ATE 30 sitios web obtuvieron
promedios positivos de suficiente
Fuente: SPSS a partir de los datos recogidos
29. Ranking de los sitios web educativos analizados
Sitios web
de EP com
mejores
Media Total
Sitios web de EP
con peor media
total y peor
clasificados en el
ranking
Sitios web de ES con
los peores media total
y peor clasificados en
el ranking
Sitios web de
la ES con
mejores
Media Total
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Fuente: SPSS a partir de los datos recogidos
30. Amostra (n=268)
Média Dp Mínimo Máximo
Aspectos Funcionales 2,04 0,36 1,25 3,00
Aspectos Técnico-Estéticos 1,85 0,37 1,10 3,00
Total de los Aspectos 1,95 0,35 1,23 3,00
Satisfación Global 2,92 1,18 1 5
Criterios de los Aspectos Funcionales
Autoridad 1,88 0,71 1,00 3,00
Actualización 2,34 0,52 1,25 3,00
Usabilidad 1,71 0,39 1,00 3,00
Accesibilidad 1,83 0,50 1,00 3,00
Comunicación 2,44 0,57 1,00 3,00
Criterios de los Aspectos Técnico-Estéticos
Deseño Gráfico Y Calidade MultimEdia 1,92 0,65 1,00 3,00
Contenido 1,83 0,41 1,00 3,00
Navegación 1,42 0,49 1,00 3,00
Rapidez de Acceso 2,10 0,37 1,00 3,00
Interacción 2,00 0,61 1,00 3,00
Resultados del análisis de las encuestas a los usuarios
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Media de respuestas positivas a
las cuestiones en el Total de los
aspectos
Media de respuestas negativas al
criterio Actualización y
Comunicación
Media de respuestas negativas al
criterio Rapidez de Acceso y
Interacción
Escala de los usuarios:
Escala del modelo de ACSWE: 1 a 1.99 negativo 2 a 4 positivo
2 a 3 negativo / no estoy de acuerdo1 a 1,99 positivo/de acuerdo
Escala del Grado de Satisfacción Global
1= Nada satisfecho / 2= Poco satisfecho / 3= Satisfecho / 4= Muy satisfecho / 5= Totalmente satisfecho
31. Ranking de los sitios web educativos según los usuarios
Mejor evaluación Peor evaluación
EP sitio davcosta (media=1,43) sitio jotave (media=2,46)
ES sitio elisiosilva (media=1,17)
sitio aabrantes
(media=2,75)
EP sitio jotave (media=1,70)
sitio fabulas
(media=2,07)
ES sitio elisiosilva (média=2,31)
sitio aabrantes
(média=2,73)
EP sitio fabulas (média=1,75)
sitioabolina
(média=1,94)
sitio elisiosilva (média=1,52)
sitio aabrantes
(média=1,87)
absolutamente (média=1,52)
EP sitio fabulas (média=1,43) sitio jotave (média=2,29)
ES
sitio absolutamente
(média=1,55)
sitio ferralopes
(média=2,07)
EP sitio fabulas (média=1,73) sitio jotave (média=2,46)
ES
sitio eleisiosilva
(média=2,11)
sitio ferralopes
(média=2,88)
critério accesibilidad
critério comunicación
ES
ASPECTOS FUNCIONALES
criterio autoridad
criterio actualización
critério usabilidad
Mejor evaluación Peor evaluación
EP sitio abolina (media=1,40) sitio jotave (media=2,08)
ES sitio elisiosilva (media=1,48)
sitio aabrantes
(media=2,55)
EP sitio davcosta (media=1,53) sitio jotave (media=2,09)
ES sitio alisiosilva (media=1,59)
sitio aabrantes
(media=2,19)
EP sitio abolina (media=1,29) sitio jotave (media=1,79)
ES sitio elisiosilva(media=1,21)
sitio aabrantes
(media=1,73)
EP sitio fabulas (media=1,80) sitio jotave (media=2,35)
ES
sitio absolutamente
(media=1,98)
sitio ferralopes
(media=2,28)
EP sitio abolina (media=1,46)
sitio fabulas
(media=2,35)
ES sitio elisiosilva (media=1,63)
sitio ferralopes
(media=2,45)
ASPECTOS TÉCNICO-ESTÉTICOS
criterio diseño gráfico y calidad multimedia
criterio contenido
criterio navegación
criterio rapidez de acceso
criterio interación
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
criterio interacción
32. Satisfacción global de los usuarios
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
El sitio web davcosta
obtuvo la clasificación de
satisfecho y muy
satisfecho
El sitio web fabulas
obtuvo la clasificación de
nada satisfecho
33. Satisfacción global de los usuarios
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Porcentaje más positiva -
absolutamente
Porcentaje más negativa
- aabrantes
34. Análisis de los resultados comparativos a los 8 sitios
web
En términos generales los
usuarios y el modelo de ACSWE
evaluaron los Aspectos
Funcionales negativamente
Los usuarios y el modelo de
ACSWE evaluaron el criterio
Actualización y Comunicación
negativamente
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en portugal: un estudio de desempeño y de usabilidad
En términos generales los
usuarios y el modelo de ACSWE
evaluaron lo Contenido de
positivo/de acuerdo y
negativo/no estoy de acuerdo lo
criterio InteracciónFuente: SPSS a partir de los datos recogidos
35. Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Los resultados del Modelo ACSWE y usuarios
El criterio de la comunicación en ambos
evaluadores ha obtenido resultados
negativos
Los usuarios evaluaron la satisfacción del
desempeño en promedio de poco
satisfecho
El criterio Accesibilidad en ambos
evaluadores obtuvo resultados negativos
Los usuarios y el modelo de AQSWE
evaluaron los Aspectos Técnicos-Estéticos
positivamente los 8 sitios web educativos
en los dos grados de enseñanza
El criterio Contenido en ambos
evaluadores obtuvo resultados positivos
AnaMariaMonteiroSantos
Usuarios Modelo de ACSWE Usuarios Modelo de ACSWE
Aspectos Funcionales 1,95 1,62 2,07 1,94
Aspectos Técnico-Estéticos 1,77 2,19 1,88 2,21
Total de los Aspectos 1,86 1,90 1,98 2,08
Satisfación Global 2,79 2,97
Criterios de los Aspectos Funcionales
Autoridad 2,00 1,54 1,84 2,04
Actualización 1,84 1,5 2,51 2,25
Usabilidad 1,85 2,05 1,66 2,13
Accesibilidad 1,90 1,45 1,81 1,43
Comunicación 2,17 1,49 2,54 1,83
Criterios de los Aspectos Técnico-Estéticos
Deseño Gráfico Y Calidade MultimEdia 1,66 1,63 2,00 1,63
Contenido 1,78 2,60 1,84 2,55
Navegación 1,49 2,07 1,40 1,68
Rapidez de Acceso 2,05 3,00 2,12 3,25
Interacción 1,88 1,67 2,04 1,91
EP ES
Media Media
Escaladel Grado de Satisfacción Global
1=Nadasatisfecho /2=Poco satisfecho /3=Satisfecho /4=Muy satisfecho /5=Totalmente satisfecho
Fuente: SPSS a partir de los datos recogidos
36. Resultados de la consulta a los autores
___________________________________
• La Autoridad es muy importante
• Los autores no encuentran relevante la existencia de herramientas colaborativas (Web 2.0)
• Gran parte no tuvieron formación para crear el sitio web
• La mayoría de los autores considera importante que el sitio tenga una estrutura organizada
• Consideran la descripción del currículo académico o profesional de los autores poco relevante
• Los autores acuerdan que el sitio tenga incluido un motor de búsqueda
• Los autores desconocen la Norma WAI (Web Accessibility Iniciative) y no probaron el sitio web
AnaMaríaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
37. Resultados de la encuesta a los responsables
70% y el 30% respondió
satisfecho con el rendimiento
de su sitio web educativo
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
38. Tabla de contenido
___________________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
39. Discusión de los resultados
Criterio autoridad
Obtuvo un promedio total negativo, 60% de los sitios web obtuvieron la clasificación de Malo
El 35% de los sitios web del EP carecen de identificación de autoría
Los autores de ES tienen más conciencia de la relevancia de este indicador
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
40. Discusión de los resultados
Criterio usabilidad
En el modelo de ACSWE, obtuvo una evaluación positiva (promedio de 2,02 en que el 61,4% de los sitios web
evaluados obtuvo una clasificación cualitativa de suficiente)
Los usuarios no señalaron problemas de usabilidad
Para el observador, la media 2,02 fue de suficiente
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
41. Discusión de los resultados
Criterio Navegación
En ES 37 sitios, 19 (51%) obtuvieron clasificación de suficiente. Se observa una mayor preocupación por parte
de los autores del ES en procurar cumplir con este criterio.
El observador concluyó, que en 20 sitios web educativos dirigidos al EP, sólo 5 (25%) alcanzaron medias
posicionadas en la clasificación de suficiente
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
42. Tabla de contenido
_______________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
43. Guía de buenas prácticas
• Orientación para los autores
• Construído según el Modelo ACSWE, partiendo de la valoración máxima de los critérios e indicadores
Critérios de los Aspectos Funcionales
• Autoridad
• Actualización
• Usabilidad
• Accesibilidad
• Comunicación
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Critérios de los Aspectos Técnico-Estéticos
• Diseño gráfico y calidad multimedia
• Contenido
• Navegación
• Rapidez de acceso
• Interacción
44. Guía de buenas prácticas
Criterio actualización
Teniendo en cuenta los siguientes indicadores:
• Fecha de creación del sitio web. Fecha siempre en la página principal.
• Fecha de actualización del sitio web. Fecha de creación en la página principal entre los 0 a 15 días.
• Existencias de conexiones obsoletas y erróneas que no nos llevan a ninguna parte. Sin conexiones
obsoletas y erróneas.
Criterio rapidez de acceso
Debe estar de acuerdo con los siguientes indicadores:
• Rapidez de acceso al sitio y de navegación en su interior. Carga de la página web debe ser efectuada en
menos de 7 segundos
• Ausencia de hipervínculos rotos. Las conexiones (links) en el sitio web deben ser claras.
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
45. Tabla de contenido
___________________________________________
Introducción a
la
investigación
CAPÍTULO I.
Sitios web y
educación
CAPÍTULO II.
Procedimientos
metodológicos:
Métodos y
materiales
CAPÍTULO III.
Resultados de
la evaluación
CAPÍTULO IV.
Discusión de
los resultados
CAPÍTULO V.
Guía de
Buenas
Prácticas en la
creación de
sitios web
educativos
CAPÍTULO VI.
Conclusiones
y
consideracio-
nes generales
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
46. Conclusiones
Gran cantidad de recursos en línea dirigidos a la enseñanza pero ausencia de calidad en su ejecución y
omisión de algunos criterios esenciales
Los autores no se preocupan por la calidad de los sitios que construyen y mantienen
Los sitios web educativos en Portugal son de baja calidad
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
La media de satisfacción global en ambos grados de enseñanza es significativa
47. Conclusiones
En el modelo ACSWE el criterio más penalizado fue la accesibilidad
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
El Modelo de Evaluación de Sitios Web Educativos y de la Guía de Buenas permitirá una mejora de los
sitios web educativos
48. Utilización de tres evaluadores automáticos gratuitos, Validator Examinator, Access Monitor y Web Link
Validator
El carácter cambiante de los sitios disponibles en Internet
Recuperación de las respuestas de la encuesta por cuestionario a los autores de los sitios
La imposibilidad de aplicar la encuesta por cuestionario de los usuarios a todos los sitios evaluados a través
del modelo ACSWE
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Limitaciones del estudio
49. Principales contribuciones
________________________
Creación de un Modelo de Evaluación de la Calidad de Sitios Web Educativos (ACSWE)
Guía de Buenas Prácticas en la Creación de Sitios Web Educativos
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad
Estado de los sitios web educativos en Portugal
50. Perspectivas de trabajos futuros
Conocer el impacto de la Guía de Buenas Prácticas en los sitios analizados, y saber si los autores se
autoevalúan con el Modelo de ACSWE y corrigen atendiendo a la Guía
Efectuar dentro de 5 años, una evaluación a sitios web educativos aplicando nuevamente el Modelo
de ACSWE, analizando y comparando su evolución
Estudio comparativo entre España y Portugal por la aplicación del Modelo de ACSWE a sitios web
de la Educación Secundaria
AnaMariaMonteiroSantos
Los sitios educativos de apoyo al aprendizaje en educación primaria y secundaria en Portugal: un estudio de desempeño y de usabilidad