Esta guía tiene por objetivo familiarizar a los lectores con los aspectos básicos y esenciales que deben considerarse en el momento de construcción de este tipo de cuestionarios. El proceso de construcción y validación es prácticamente una investigación completa y muchas tesis se dedican únicamente a llevar a cabo esa validación. Por este motivo, la guía se ha adaptado a las características de los TFM y, por tanto, se obviarán algunos pasos que, normalmente, si deberían llevarse a cabo, sobre todo, si los instrumentos van a publicarse y a emplearse para tomar decisiones sobre los sujetos.
Diapositivas de apoyo al estudio del Tema 3 ("La Observación") de la asignatura "Técnicas e Instrumentos para la Recogida de Información" (Grado en Pedagogía, UNED)
Diapositivas de apoyo al estudio del Tema 3 ("La Observación") de la asignatura "Técnicas e Instrumentos para la Recogida de Información" (Grado en Pedagogía, UNED)
Tecnicas de recolecion de datos cuantitativos y cualitativos uanejavierJavier Armendariz
Tecnicas de recolecion de datos para la investigacion cuanittativa, para la clase de planeacion de proyectos educativis de la Universidad Americana del Noreste, del profesor Javier Armendariz Cortez
Tecnicas de recolecion de datos cuantitativos y cualitativos uanejavierJavier Armendariz
Tecnicas de recolecion de datos para la investigacion cuanittativa, para la clase de planeacion de proyectos educativis de la Universidad Americana del Noreste, del profesor Javier Armendariz Cortez
Se presenta una serie de orientaciones relativas a las tareas referidas al Problema Educativo detectado y la Propuesta de Solución par el problema detectado.
La participación de las familias en la educación escolarEnrique Navarro
En un contexto en el que la mejora de la calidad de nuestra educación es tan necesaria como compleja, cuando los factores de influencia son tan variados y se corre el riesgo de perderse en suposiciones y en conjeturas escasamente fundadas, adquiere pleno sentido generar evidencias empíricas, explorar a partir de ellas la importancia de la participación familiar y recomendar su atinado fortalecimiento como una forma de contribuir sustantivamente al éxito educativo y a la mejora escolar. Participación familiar entendida, en un sentido moderno, como sinónimo de implicación parental que puede manifestarse de distintas maneras y ejercerse con diferente intensidad.
El estudio «La participación de las familias en la educación escolar» está organizado en tres partes bien diferenciadas:
La parte I «Aspectos conceptuales y marcos normativos» —de carácter introductorio— se centra en distintos aspectos teóricos de la participación familiar que cubren tanto la dimensión conceptual como la aproximación normativa.
La parte II «Análisis empíricos» alberga los análisis empíricos apoyados en investigaciones que han sido efectuadas ex profeso para este estudio.
La parte III «Mirando al futuro» resume lo esencial de las dos partes anteriores, formula sus conclusiones mayores y efectúa recomendaciones dirigidas a los actores principales de la participación de las familias en el ámbito escolar: las administraciones educativas, los centros docentes y las propias familias. Finalmente, se concluye con un conjunto de reflexiones que miran hacia el futuro de la participación.
Imagen corporal y riesgo de trastornos de la conducta alimentaria en població...Enrique Navarro
Esta investigación analiza la imagen corporal y el riesgo de padecer trastornos de la conducta alimentaria en un grupo de estudiantes universitarios españoles (n=563), mediante la aplicación de dos cuestionarios: el EDI-3-RF y el IMAGEN. Los resultados muestran una proporción elevada de universitarios que se encuentran en riesgo de padecer un trastorno de este tipo. Además, se observaron niveles significativos de obsesión por la delgadez, rasgos bulímicos o insatisfacción corporal, todos ellos claros factores de riesgo asociados al desarrollo de estas patologías. Las mujeres presentaron puntuaciones más elevadas en casi todas las variables, sin que se observaran diferencias relacionadas con la edad. Los resultados constatan la necesidad de implementar estrategias de prevención e intervención en este tipo de población.
EPIBI: Escala de Percepción de Indicadores de Bienestar Infantil. Validación...Enrique Navarro
Artículo en prensa que se publicará en la revista de educación el próximo abril de 2014.
El resumen es:
La obtención de indicadores para el análisis las condiciones de vida de niños y niñas es una preocupación creciente en nuestra sociedad. Prueba de ello es que diversos organismos e instituciones nacionales e internacionales han dirigido notables esfuerzos en obtener medidas precisas de las características específicas del bienestar infantil. Al mismo tiempo, conocer la opinión de los futuros profesionales de la educación acerca de los elementos determinantes del bienestar infantil y de su impacto en la vida de niños y niñas ayudará a un mayor acercamiento a dicha realidad, comprendiendo ésta de forma más ajustada. En consecuencia, el objetivo del presente trabajo es validar el instrumento EPIBI (Escala de Percepción de Indicadores del Bienestar Infantil) que permite analizar los determinantes del bienestar infantil que los futuros profesionales de la educación reconocen, así como el grado de importancia que otorgan a cada uno de ellos. Eltest final está compuesto por 80 reactivos, que se responden en una escala tipo Likert con 6 categorías de respuesta. Para la validación se han probado cuatro modelos politómicos Teoría Respuesta al Ítem (modelo de Rasch) que varían en el procedimiento de cálculo de las probabilidades de respuesta (escala de clasificación versus crédito parcial) y la dimensionalidad de la escala (unidimensional versus multidimensional). Los resultados muestran cómo el modelo con mejor ajuste es el multidimensional de crédito parcial. Al mismo tiempo se ha detectado un buen funcionamiento de la escala en su conjunto, a pesar de que algunos ítems muestran bajos ajustes en las categorías extremas de la escala, hallazgo que permite su revisión y mejora.
Análisis del bienestar psicológico, estado de salud percibido y calidad de vi...Enrique Navarro
Artículo publicado en Pedagogía Social. Revista Interuniversitaria, 2013, 22, pp. 153-168. RESUMEN: En el marco de la intervención educativa en contextos sociales para la mejora de la calidad de vida de las personas adultas mayores, describir el estado en el que se encuentran estas personas debe ser un objetivo prioritario para promocionar un adecuado envejecimiento activo y saludable. Por ello, el propósito de este estudio fue analizar, en una muestra de 328 participantes de la Comunidad de Madrid, la asociación entre el bienestar psicológico, estado de salud percibida y hábitos saludables que se encuentran directamente relacionados con la calidad de vida de los mayores. Para ello, se aplicó una encuesta elaborada ad hoc y la Escala de Bienestar Psicológico de Carol Ryff que establece un modelo que atiende a seis dimensiones: Autoaceptación, Relaciones positivas con otras personas, Autonomía, Dominio del entorno, Propósito de vida y Crecimiento personal. Los resultados obtenidos muestran la tendencia a que las personas que afirman que su estado de salud ha sido muy malo tienden a presentar resultados más altos en Autoaceptación y Propósito de vida que aquellos que lo consideran bueno o muy bueno. Asimismo aquellos que durante su tiempo libre realizan el ejercicio físico que desean obtienen puntuaciones altas en la escala de Autoaceptación. En este sentido, los que realizan ejercicio regularmente obtienen puntuaciones más altas en Autoaceptación y Dominio del entorno. Finalmente, los mayores que no salen con otras personas, tienen menos posibilidades de hablar con otras personas sobre sus problemas, se distraen menos de lo que desean y reciben menos elogios obtienen puntuaciones más bajas
ALUMNOS DE ALTO, MEDIO Y BAJO RENDIMIENTO EN MATEMÁTICAS EN TIMSS. ESTUDIO DE...Enrique Navarro
Es el capítulo 6 de la publicación: PIRLS - TIMSS 2011Estudio Internacional de progreso en comprensión lectora, matemáticas y ciencias.
Volumen II: Informe español. Análisis Secundario
Orientación Educativa: fundamentos teóricos, modelos institucionales y nuevas...Enrique Navarro
Esta obra pretende contribuir a satisfacer la necesidad de información, formación y, por tanto, actualización de los profesionales de la orientación. Con esta finalidad se ha intentado poner a su disposición un texto que recoge información actualizada sobre aquellos aspectos que se han juzgado más relevantes en la orientación educativa. A lo largo de este trabajo se realiza un recorrido conceptual que va desde temas clásicos y fundamentalmente teóricos, como el marco histórico-conceptual o los modelos de intervención en orientación, a otros más cercanos a la experiencia como la “e-orientación” o las nuevas tendencias en orientación educativa.
El libro se compone de cuatro bloques temáticos: orígenes, concepto y modelos de orientación, estructuras institucionales de orientación educativa, áreas y contextos de intervención, y nuevas perspectivas en la orientación.
Cada bloque tiene una entidad en sí mismo por lo que puede consultarse independientemente del resto, lo que conlleva que ciertos contenidos se aborden indistintamente en diversos capítulos si así se considera relevante para la comprensión global del tema.
Este trabajo pretende construir en el lector una idea general de la situación de los alumnos españoles, que cursan educación secundaria obligatoria, respecto a su rendimiento en matemáticas. Utilizando de los datos obtenidos a través del estudio PISA 2003, esta investigación selecciona algunos predictores, relacionados con el background del alumno y de la escuela, para identificar su relación con el logro en matemáticas, una de las materias que evalúa PISA. Para ello, se realiza un análisis multinivel con la finalidad de explicar la varianza existente entre los alumnos y entre los centros educativos y, de esta forma, elaborar un modelo explicativo de dicho rendimiento.
REICE - Revista Electrónica Iberoamericana sobre Calidad, Eficacia y Cambio en Educación
2007, Vol. 5, No. 3
Sistematización de un proyecto de educación en valoresEnrique Navarro
Este artículo se enmarca dentro del proyecto de innovación educativa denominado “Otro mundo es
posible, otro mundo es necesario”. Dicho proyecto se ha realizado en un instituto de enseñanza secundaria
de Madrid y trata la temática de la educación en valores, involucrando a toda la comunidad educativa
del centro. El objetivo de este estudio fue conocer los factores que inducen al profesorado a
implicarse en un proyecto de este tipo. Para la recogida de información se ha aplicado un cuestionario
a todos los profesores participantes y una entrevista a profesores de tres Departamentos Didácticos del
centro, con grados de implicación distintos. El marco de referencia de este estudio utiliza una metodología
llamada Sistematización.
Estudio de variables determinantes de eficiencia a través de los modelos jerá...Enrique Navarro
Este trabajo relaciona el rendimiento obtenido por los alumnos españoles en la
evaluación PISA 2006 con variables del entorno del estudiante y del centro que están asociadas a
la función básica de producción educativa (Hanushek, 1989) y, por lo tanto, a la eficiencia del sistema
educativo. El análisis se ha llevado a cabo mediante la técnica de análisis multinivel, ya que
permite el estudio adecuado de estructuras de datos anidados, como ocurre en el caso de datos
educativos. A la luz de los resultados obtenidos es posible evidenciar una relación entre las
diferentes variables de recursos, tanto de alumno (por ejemplo recursos educativos, posesiones
culturales en casa) como de centro (titularidad o número de ordenadores por alumno, entre
otras) con el rendimiento académico.
Revista: Archivos Analíticos de Políticas Educativas (2009) 17 (16)
Bateria-ECODI. Batería de evaluación cognitiva para personas con discapacidad...Enrique Navarro
El propósito de este estudio piloto es la presentación de las pautas
seguidas para la elaboración de la Batería-ECODI (Batería de Evaluación
Cognitiva para Personas con Discapacidad Intelectual) y los resultados del
análisis de la fiabilidad. La Batería-ECODI es un test diseñado para la
evaluación de las funciones cognitivas superiores de niños con síndrome de
Down en edad escolar (6-12 años). Se realizó un análisis preliminar para
observar qué ítems no discriminaban bien. Tras la depuración de la prueba
inicial el índice de fiabilidad fue de 0,99. Consideramos tras el análisis
preliminar que disponemos de una prueba fiable para valorar el perfil cognitivo
del niño en edad escolar con síndrome de Down. Así, en fases posteriores se
procederá a la elaboración de los baremos y validación con una muestra mucho
mayor.
Revista de Psicología y Educación (2011) 1 (5) pp 15-34
Invarianza de la estructura de covarianzas de medidas de rendimiento de rendi...Enrique Navarro
Dados los enormes cambios de carácter tanto psicobiológicos de los estudiantes como en la estructura organizativa y curricular del sistema educativo que experimentan en la transición entre Educación Primaria y Educación Secundaria, en el presente artículo se analiza la posibilidad de mantener la misma estructura longitudinal de base en los estudios de valor añadido con alumnos de Educación Primaria y con los de Educación Secundaria. Para ello, se estudia la
estructura de varianza-covarianza de las variables de rendimiento en un estudio longitudinal realizado con 6.709 estudiantes agrupados en 153 centros educativos de la Comunidad de Madrid escolarizados entre 5º de Educación Primaria y 4º de ESO en los cursos académicos 2005-06 y 2006-07. Para el análisis de la invarianza de la estructura de varianza-covarianza del
rendimiento en Matemáticas y Comprensión Lectora, se ha empleado, por un lado, el contraste mediante el estadístico M de Box y, por otro, el análisis de un modelo de ecuaciones estructurales
de relaciones entre variables observadas, esto es, comenzar con un modelo que establece la línea base de las relaciones en el tiempo. Los resultados obtenidos apoyan sólo parcialmente la idea del mantenimiento de dicha estructura en las distintas cohortes o grupos, ya que existe
una mayor semejanza en la estructura de Educación Primaria y primer ciclo de Educación Secundaria que entre los dos ciclos de secundaria. Esta variación asociada al tiempo se mantiene en los dos campos disciplinares que se han estudiado,Comprensión Lectora y Matemáticas, aunque cada uno de ellos tenga características diferenciadas.
Revista de Educación (2009). nº 348
Ponencia en I SEMINARIO SOBRE LA APLICABILIDAD DE LA INTELIGENCIA ARTIFICIAL EN LA EDUCACIÓN SUPERIOR UNIVERSITARIA. 3 de junio de 2024. Facultad de Estudios Sociales y Trabajo, Universidad de Málaga.
GUÍA: VALIDEZ DE CONTENIDO EN UN CUESTIONARIO DE OPINIÓN (ESCALA DE ACTITUD)
1. GUÍA: VALIDEZ DE CONTENIDO
EN UN CUESTIONARIO DE
OPINIÓN (ESCALA DE ACTITUD)
Autor: Enrique Navarro Asencio
(@eduktive)
https://eduktive.wordpress.com/
Versión 2
26/01/2015
2. Enrique Navarro Asencio (@eduktive)
1. INTRODUCCIÓN
La elaboración de un cuestionario para conocer la opinión sobre aspectos relacionados
o no con el sistema educativo no es un proceso sencillo. Se trata, por tanto, de elaborar
instrumentos para medir o evaluar las actitudes respecto a algún tema concreto. Estos
cuestionarios también son conocidos como escalas de actitudes.
Esta guía tiene por objetivo familiarizar a los lectores con los aspectos básicos y
esenciales que deben considerarse en el momento de construcción de este tipo de
cuestionarios. El proceso de construcción y validación es prácticamente una
investigación completa y muchas tesis se dedican únicamente a llevar a cabo esa
validación. Por este motivo, la guía se ha adaptado a las características de los TFM y,
por tanto, se obviarán algunos pasos que, normalmente, si deberían llevarse a cabo,
sobre todo, si los instrumentos van a publicarse y a emplearse para tomar decisiones
sobre los sujetos.
El cuestionario de opinión debe ser un instrumento que sirva para recoger información
válida y fiable. Es una herramienta para conocer o, más bien, medir el grado de acuerdo
sobre un tema determinado. Si no se cumplen ciertos requisitos metodológicos en su
elaboración, dicha información puede estar sesgada y, por tanto, los resultados de la
investigación que utiliza esa herramienta también lo estarán.
De forma resumida, los requisitos indispensables para conseguir una buena
herramienta de medida son los siguientes:
A. Elaboración de una matriz de especificaciones. No es más que una
matriz de contenido que agrupan los aspectos que se desean conocer mediante
el cuestionario. Normalmente, se elabora una tabla que agrupa dimensiones e
indicadores concretos que darán lugar a los diferentes ítems del cuestionario.
B. Validación inicial de expertos. Una vez elaborado el borrador del
cuestionario debe entregarse a un grupo de expertos para que lo valorenlos
aspectos clave.
C. Aplicación y recogida de información: momento de aplicación del
cuestionario
D. Validez y fiabilidad: análisis de las respuestas de los sujetos con la finalidad
de observar y conocer las características del instrumento elaborado y evitar
sesgos.
A estas fases se debería añadir, después de la validación inicial de expertos, un pilotaje
del instrumento con una muestra de sujetos que compartan las características de los
que serán objeto de la investigación. Este es uno de los aspectos que no se incluyen en
esta guía debido a que las oportunidades para acceder a dos muestras distintas en los
TFM son muy pocas.
2. EL CUESTIONARIO
El cuestionario, como ya se ha mencionado en la introducción, es la herramienta que
nos permite recopilar la información sobre determinados aspectos. En este caso, los
cuestionarios de actitudes tratan de averiguar la posición u opinión de los sujetos
respecto a cualquier aspecto o temática.
El cuestionario consta fundamentalmente de tres partes esenciales:
3. Enrique Navarro Asencio (@eduktive)
A. Las instrucciones necesarias para responder a las cuestiones o ítems que se
plantean.
B. Cuestiones relacionadas con las características de los sujetos. Son útiles para
recopilar información personal de los encuestados que permitirá llevar a cabo
agrupaciones y, en caso de ser necesario, comparaciones entre esos grupos. Por
ejemplo: edad, género, nivel de estudios, etc.
C. Ítems. Cada una de las cuestiones, enunciados, afirmaciones, etc. que los sujetos
deben contestar o valorar en el cuestionario. El conjunto de estos ítems
componen una escala de medida o evaluación. Existen diferentes tipos de ítems
pero esta guía se centra en uno concreto, los denominados tipo Likert. Un
ejemplo de este tipo de ítem es señalar el grado de acuerdo con alguna
afirmación:
Ítem Nunca
(1)
2 3 4 5 Siempre
(6)
Realizo resúmenes de cada tema para preparar el
examen de la asignatura
El ítem esta compuesto, por tanto, por el enunciado o tronco y las alternativas que en
este tipo de ítems es una escala para valorar el grado de acuerdo con la afirmación.
2.1 ÍTEMS TIPO LIKERT
Emplear este tipo de ítems en los cuestionarios de actitudes garantiza una puntuación
global en la dimensión evaluada al sumar las respuestas de un sujeto en todos los ítems.
Por esta característica, las escalas construidas con este tipo de ítems también son
conocidas como escalas sumativas.
En el ejemplo anterior, la escala de valoración planteada varía entre nunca y siempre
con un intervalo de 6 puntos. Pueden llevarse a cabo modificaciones como, por ejemplo,
ampliar o reducir el intervalo de puntos de esa escala de valoración. Otro posible
cambio es modificar las alternativas, es decir, cambiar nunca y siempre por otras
opciones distintas, por ejemplo: Totalmente en descuerdo y Totalmente de acuerdo.
Algunas de las opciones más típicas de respuesta son las siguientes:
2
opciones
De
acuerdo
En
desacuerdo
3
opciones
De
acuerdo
Indiferente En
desacuerdo
4
opciones
De
acuerdo
Más bien de
acuerdo
Más bien en
desacuerdo
En
desacuerdo
5
opciones
Muy de
acuerdo
Más bien
de
acuerdo
Indiferente Más bien en
desacuerdo
Muy en
desacuerdo
6
opciones
Muy de
acuerdo
De
acuerdo
Más bien
de
acuerdo
Más bien en
desacuerdo
En
desacuerdo
Muy en
desacuerdo
Algunas normas para redactar los ítems que formarán pare de la prueba son las
siguientes:
4. Enrique Navarro Asencio (@eduktive)
- Formula en forma de opinión
- Contenido relevante y relacionado con el tema o aspecto a medir
- Claridad en la redacción. Debe garantizarse que todos los sujetos lo entiendan
de la misma forma
- Precaución con las negaciones en los troncos. Dependiendo de la edad de los
encuestados las negaciones pueden confundir las respuestas. Es más adecuado
formular los enunciados en forma positiva. En todo caso debe evitarse la doble
negación
Ítem En desacuerdo
(1)
2 3 4 5 De acuerdo
(6)
No me gusta estudiar
No me gustan los libros que no tienen
dibujos
- Cada ítem debe contener una única idea, ya que al incluir más se puede estar de
acuerdo con una pero no con otra.
- Conviene incluir algún ítem que repita la misma idea que otro para poder
contrastar la información.
- Conviene incluir ítems favorables y desfavorables pero evitando la negación
siempre que sea posible.
Ítem En desacuerdo (1) 2 3 4 5 De acuerdo (6)
Estudiar es divertido
Estudiar es aburrido
A. MATRIZ DE ESPECIFICACIONES
Esta matriz debe incluir todos los aspectos que van a medirse o evaluarse en la
investigación. El primer paso, por tanto, es definir la actitud o actitudes (o un rasgo
psicológico, la opinión sobre un tema, etc.) generales objeto de la investigación.
Una definición concreta ayudará en la posterior elaboración de los ítems que formarán
parte del cuestionario.
El ejemplo que se incluye a continuación trata de evaluar los aspectos relacionados con
los servicios educativos que influyen en el bienestar de la infancia.
DIMENSIONES INDICADORES ÍTEMS
Acceso a servicios educativos
Escolarización.
Ser escolarizado antes de los 3 años.
Abandonar la escuela de forma temprana.
Actividades
extraescolares.
Realizar actividades extraescolares.
Centros sociales y
culturales.
Realizar actividades en centros culturales.
Recursos educativos e
infraestructuras.
Contar con instalaciones deportivas y recreativas
en el centro (piscina, gimnasio, pistas deportivas,
etc.).
Contar con instalaciones educativas específicas
en el centro (laboratorios, sala de música, sala de
informática, etc.)
Contar con instalaciones deportivas y recreativas
5. Enrique Navarro Asencio (@eduktive)
cercanas al domicilio.
Se trata de concretar progresivamente el rasgo o dimensión a medir hasta llegar a la
formulación final del ítem.
Una vez realizada la matriz de especificaciones se elabora un documento con los ítems
que han sido construidos para que sea evaluado por un grupo de expertos.
B. VALIDACIÓN DE EXPERTOS
Los expertos adecuados para evaluar los distintos ítems deben dominar los contenidos
que el cuestionario pretende medir.
El documento que se entrega a los expertos debe incluir los siguientes apartados,
además de unas instrucciones para poder responder a las cuestiones planteadas.
A continuación se incluye un ejemplo que trata de conocer la opinión de los expertos
respecto a la claridad y redacción del ítem, si es adecuado para medir la dimensión
planteada y sí es relevante para el objetivo. También se añada una columna para que
los expertos añadan los comentarios que deseen para mejorar el ítem.
DIMENSIONES ÍTEMS CLARIDAD
IDONEIDAD
RESPECTO A
LA
DIMENSÓN
RELEVANCIA
EN
RELACIÓN AL
OBJETIVO
COMENTAR
IOS
Acceso a servicios educativos
Ser
escolarizado
antes de los 3
años.
1 2 3 4 1 2 3 4 1 2 3 4
Abandonar la
escuela de
forma
temprana.
1 2 3 4 1 2 3 4 1 2 3 4
Realizar
actividades
extraescolares.
1 2 3 4 1 2 3 4 1 2 3 4
Realizar
actividades en
centros
culturales.
1 2 3 4 1 2 3 4 1 2 3 4
Contar con
instalaciones
deportivas y
recreativas en
el centro
(piscina,
gimnsaio,
pistas
deportivas,
etc.).
1 2 3 4 1 2 3 4 1 2 3 4
Contar con
instalaciones
educativas
específicas en
el centro
(laboratorios,
sala de música,
sala de
informática,
etc.)
1 2 3 4 1 2 3 4 1 2 3 4
Contar con
instalaciones
deportivas y
recreativas
cercanas al
1 2 3 4 1 2 3 4 1 2 3 4
6. Enrique Navarro Asencio (@eduktive)
domicilio.
La información que proporcionan los expertos debe utilizarse para mejorar el
cuestionario elaborado inicialmente. También es posible incluir la introducción y las
cuestiones relacionadas con las características de los sujetos para también valoren su
adecuación y pertinencia.
C. APLICACIÓN Y RECOGIDA DE INFORMACIÓN
En esta fase se aplica el cuestionario definitivo a la muestra seleccionada para la
investigación. Una validación completa del cuestionario implica llevar a cabo,
previamente a la aplicación final, un estudio piloto con otra muestra similar a la que
será objeto de estudio como se ha mencionado en la introducción.
En los TFM es muy difícil acceder a muestras amplias ya que no son investigaciones
que cuenten con el respaldo de organismos oficiales que faciliten o garanticen ese
acceso a un gran número de sujetos. Por tanto, la fase de pilotaje se obviará en esta guía.
D. FIABILIDAD Y VALIDEZ
Una vez recogida la información se estiman indicadores o índices que muestren la
fiabilidad y validez del cuestionario. Estos indicadores son normalmente estadísticos
que se calculan con los datos recogidos. Se incluyen en esta guía los indicadores
fundamentales de fiabilidad y validez.
La fiabilidad de un cuestionario es un concepto relacionado con la estabilidad de la
medida proporcionada por la prueba, con su consistencia y con la predictibilidad de la
misma.
- Cuando a las mismas personas se les pasa la misma prueba en diferentes
momentos, si no han cambiado, deberían obtener las mismas puntuaciones (o
muy parecidas): Fiabilidad como estabilidad temporal (correlación
test-retest)
- Cuando se aplican dos pruebas diferentes que miden el mismo rasgo o
característica los sujetos deberían obtener puntuaciones similares en ambas
pruebas: Fiabilidad como equivalencia procedimiento de formas
paralelas (correlación)
- De un instrumento que evalúe, por ejemplo, la satisfacción con un docente se
espera que todos los elementos (ítems) midan lo mismo o en el mismo sentido,
y que, por tanto, sean sumables en una puntuación total única que representa
ese rasgo: Fiabilidad como consistencia interna (alpha de Cronbach)
Normalmente se estima el coeficiente alpha de Cronbach para conocer ese grado de
fiabilidad general del instrumento elaborado. No existe un criterio único para valorar
los resultados pero sí cierto acuerdo en que este coeficiente debe situarse en torno a
0,60 en instrumentos utilizados en investigación básica como los TFM. Si el
cuestionario se utiliza para la posterior toma de decisiones sobre sujetos (orientación o
diagnóstico) los valores no deben ser inferiores a 0,8. Los autores Morales, Urosa y
Blanco (2003, p. 92) elaboran una tabla de interpretación de este coeficiente:
7. Enrique Navarro Asencio (@eduktive)
Toma de decisiones
sobre sujetos
concretos
Descripción de
grupos feedback a
un grupo
Investigación
teórica;
investigación en
general
0,85 o mayor Sí Sí Sí
Entre 0,60 y 0,85 Cuestionable Sí Sí
Inferior a 0,60 No Cuestionable cuestionable
La validez es un concepto general que indica el grado en el cual el instrumento de
medida (cuestionario) evalúa el contenido que pretende y no otra cosa.
- De Contenido: comprobar si los ítems de la prueba representan el universo de
medida que pretende medir el cuestionario (tabla de especificaciones, juicio de
expertos, …)
- De Constructo: comprobar que mide el constructo teórico (rasgo) que
pretende medir. Probar con hipótesis: diferencias entre grupos en el rasgo,
análisis factorial, etc.
- Validez aparente o didáctica: cuestiones de formato, longitud,
instrucciones, etc.
La validez de constructo será difícil de comprobar en los TFM porque su estudio podría
ser objeto de una investigación con entidad propia. A no ser que el objetivo del TFM sea
validar un instrumento o cuestionario. Los requisitos respecto al tamaño muestral para
llevar a cabo un análisis factorial son muy estrictos y se necesita un gran número de
sujetos. Sin embargo, la validez de contenido y didáctica si pueden garantizarse cuando
se siguen los pasos de elaboración de instrumentos que se incluyen en esta guía.
A modo de conclusión conviene mencionar que el proceso descrito puede alcanzar un
mayor grado de complejidad, sobre todo, en las cuestiones de fiabilidad y validez.
Existen en la actualidad técnicas más potentes basadas en la Teoría Respuesta al ítem
adecuadas para evaluar este tipo de cuestionarios.
No obstante puede conseguirse un buen instrumento siguiendo los pasos que se han
mencionado en la guía: Definir el rasgo o contenido a evaluar, elaborar la matriz de
especificaciones, juicio inicial de expertos y comprobación de la fiabilidad y validez.
8. Enrique Navarro Asencio (@eduktive)
TRABAJOS CITADOS
Morales, P., Urosa, B., & Blanco, A. (2003). Construcción de escalas de actitudes tipo
Likert. Madrid: La Muralla.