Este documento describe los pasos para diseñar un instrumento de evaluación efectivo. Explica que un instrumento de evaluación consiste en preguntas destinadas a medir una o más variables de interés. Luego, detalla los tipos de preguntas, como abiertas, cerradas y semiabiertas, y sus ventajas y desventajas. Finalmente, resume los pasos clave para el diseño de un instrumento, incluida la planificación, elaboración, prueba piloto y administración.

1. Elaboración de Instrumentos Evaluación de Recursos Digitales Especialización TAC Prof Elvira Navas

2. ¿Qué es un instrumento de evaluación? Lista de preguntas relativas a un mismo tema destinadas a ser contestadas por una gran número de individuos (Salvat, 1968 p 244) Un procedimiento que permite obtener respuestas a preguntas, mediante el uso de un formulario que el sujeto puede llenar por si solo (Berdie y Anderson,1974) Un conjunto de preguntas respecto a una o más variables a medir (Hernández, Fernández y Baptista,1991) Un instrumento de evaluación esta integrado por preguntas que solicitan información referida a un problema, objeto o tema de investigación, el cual normalmente es administrado a un grupo de personas (Ruiz Bolívar, 2002)

3. Clasificación de los instrumentos de evaluación Por el tipo de preguntas De respuestas abiertas De respuestas cerradas De respuestas semi-cerradas. Mixtos (contiene preguntas de los tres tipos anteriores)

4. Ejemplo de respuesta abierta Indique su opinión general sobre el sitio evaluado. _________________________________ _________________________________ _________________________________ _________________________________

5. Ejemplo de respuesta cerrada ¿Cuál de las frases que se presentan a continuación expresan su opinión acerca de las imágenes utilizadas en el programa evaluado? (Marque con una X) ___ Son adecuadas para la edad de la audiencia ___ Son muy infantiles ___ Son demasiado abstractas

6. Ejemplo de pregunta semi-cerrada ¿Cuál es su opinión acerca de la navegación en el sitio evaluado? Es muy fácil de seguir Al comienzo es complicada pero luego se hace fácil Es muy difícil de seguir No es evidente Otra ______________________________

7. Ventajas de las preguntas cerradas Los ítems de respuesta cerrada son fáciles de puntuar y de codificar No es necesario que el individuo evaluador sea capaz de expresarse verbalmente de manera adecuada. ( el caso de los niños) Facilita que se conteste todo el instrumento ya que es mas rápido completarlo.

8. Desventajas de las preguntas cerradas Siempre existe la posibilidad de no proveer de todas las respuestas posibles al evaluador. Se puede inducir al sujeto no intencionalmente a responder de una determinada manera.

9. Ventajas de las preguntas abiertas Son muy útiles cuando el evaluador tiene poca información acerca de la población objeto del estudio. Permite obtener una información mas completa y determinar detalles.

10. Desventajas de las preguntas abiertas Las respuestas son mas difíciles de clasificar y codificar. En las respuestas abiertas se siente la influencia de las destrezas verbales del individuo para expresar su opinión correctamente. Consumen mucho mas tiempo tanto el llenado del instrumento como su codificación posterior.

11. Clasificación de losinstrumentos de evaluación Por el momento de la codificación Pre-codificados Post-codificados Por la forma de administración Autoadministrados(entrega personal, envío por correo o en línea) Entrevista personal Entrevista telefónica

12. Pasos para el diseño de un instrumento de evaluación Reflexiones previas Planificación Elaboración del instrumento Estudio piloto Administración Análisis de datos

13. Reflexiones previas Antes de comenzar a diseñar un cuestionario debemos hacer algunas reflexiones tales como: ¿Cuál es el propósito del instrumento? ¿A quiénes está dirigido? ¿Cuán fácil será la aplicación del instrumento? ¿Qué modalidad de instrumento se utilizará? ¿Qué clase de preguntas se emplearán? ¿Qué extensión podría tener el instrumento? ¿Cuánto control puede ser ejercido sobre los factores que pueden afectar la validez de los resultados?

14. Planificación del instrumento Determinar el propósito del instrumento. Determinar las dimensiones en que puede dividirse el propósito del instrumento. Determinar los indicadores de cada una de las dimensiones establecidas. Redactar los ítems necesarios para cada uno de los indicadores.

15. Ejemplo: Dimensiones e indicadores de instrumento elaborado por Elvira Navas

16. Elaboración del instrumento Algunas recomendaciones para la elaboración del instrumento según Hernández(1991) Las preguntas deben ser claras y comprensibles Las preguntas no deben incomodar al respondiente Las preguntas deben referirse a un solo aspecto o asunto Las preguntas no deben inducir las respuestas Las preguntas no deben apoyarse en instituciones, ideas respaldadas socialmente ni en evidencia comprobada El orden fijo de las alternativas de respuesta puede favorecer determinadas opciones El lenguaje debe ser adecuado al nivel de los respondientes

17. Ejemplo (cont) Indicadores: 1.-Facilidad de acceso 2.-Facilidad de uso 3.- Facilidad de ayuda 4.- Identificación de créditos 5.- Facilidad de navegación Algunos Items del instrumento elaborado por Elvira Navas

18. Elaboración del instrumento Para el formato del cuestionario se deben tener en cuenta: La diagramación La secuencia de las preguntas Se debe empezar por preguntas fáciles y no agresivas Es preferible avanzar desde preguntas amplias y generales a las mas específicas Si hay preguntas confidenciales, trate de no hacerlas al principio del instrumento

19. Estudio piloto Se hace con la primera versión del instrumento para verificar su funcionalidad. Debe hacerse en dos fases: Validación por juicio de expertos Mediante una muestra piloto de sujetos

21. Análisis estadístico