Marcos Bielba Calvo, Fernando Martínez Abad and María Esperanza Herrera García. University of Salamanca

1. Selection of key standards to create an
instrument information literacy
assessment in Compulsory Secondary
Education
Marcos Bielba Calvo
Fernando Martínez Abad
Mª Esperanza Herrera García

2. INTRODUCTION
Information
Literacy
Knowledge
Society
Information
overload

3. INTRODUCTION
Proble
m
Solution
www.smarteducation.com.co/ http://www.mindmapart.com – IQMatrix.com

4. INTRODUCTION
• Dimension of Information Need
• Dimension of Information Search
• Dimension of Information Assessment
• Dimension of Information Process
• Dimension of Information Communication

5. INTRODUCTION
The abilities to search, obtain, process and communicate information and transform it
in knowledge. It has different abilities, from the access to the information to its
transmission in different media, including the use of Information and Communication
Technologies as main element to inform, learn and communicate. (Information literacy
Treatment and Digital Competence. Ministry of Education, Culture and Sports, 2013. Guide to the
training in educational centres about basic competences).
http://noticias.iberestudios.com/escuela-2-0-tecnologias-tic-en-las-aulas/

6. AIMS
1. Designing a table of specifications with the dimensions, sub-dimensions and
performance standards of information literacy from the review, unification and
selection of standards from different handbooks.
2. Doing an initial selection of the standards from the comparison between the table
of specifications and the Spanish Curriculum contents.
3. Selecting the key standards from the relative importance that they have in the
Curriculum, its importance during the start-up process and the importance
assigned by experts on assessment.

7. METHOD
• Design: It is used a design of type non-experimental from studies of type
descriptive-correlational with a methodology ex-post-facto.
• Sample: For the development of the 3rd phase, 14 experts in information literacy who
belong to different branches of knowledge (social, sciences, computing, IT,
documentation…) constitute the simple.
www.smcdsb.on.ca

8. METHOD
• Variables and instruments: The instruments used to collect the data is a
questionnaire carried out with Google Drive (Google Forms). They contain 42
initial standards, selected from the review of handbook and adapted to the level of
Secondary Education in Spain. It is a Likert-type (1 to 10).

9. METHOD: Phases
• Phase 1: Review of the different handbooks about information
literacy.

10. METHOD: Phases
• Phase 2: Comparison between the table of specifications and the Spanish
Curriculum in Secondary Education. It collects the criteria of Organic Law of
Education (2006).
• Its obtained a first score about the importance of each standards depending on
the specific weighting that which of them has in the Curriculum.

11. METHOD
• Phase 3: Creation a flowchart in order to represent the main nodes and their
relation.
• Through this process it is obtained a second score about the importance of each
learning result (1 point if the node sent a link and 2 points if the node received a
link).

12. METHOD
• Phase 4: Once finished the whole process, the last phase is to do a valuation of the
standards by experts on that topic.
• Through this way, the experts value from 1 to 10 the importance of each of
standards (42), which are related to the information literacy in Secondary
Education.
mighelp.viczian.hu

13. METHOD
• Phase 5: It performs the calculation of percentiles by standardized scored,
becoming in Z score and doing the weighted summation of these.
• 25% refers to the connections established between the different learning results of the
flowchart.
• 25% refers to the comparison of the specification table and the Curriculum in secondary
education.
• 50% is extracted from the valuation made by experts.

14. DATA ANALYSIS
• In all phases, descriptive techniques such as the analysis of frequency tables and
calculating the average, deviation and coefficient of variation, are used. The
selection of final standards is proceeded from the calculation of percentiles from
the weighted score of the three variables.
datosprimarios.blogspot.com

15. • First Phase
• Second Phase
RESULTS
• In general the dimension of
information search predominates
4
Dimension
s
14
Learning
Results
42
Standards

16. RESULTS
DIMENSIÓN DE BÚSQUEDA DE INFORMACIÓN / DIMENSION OF INFORMATION SEARCH
O5, Conoce los tipos de fuentes de información apropiados, sean impresos o no.
B1
O5, T6, T3, T2 Selecciona las fuentes de información que “mejor se ajusten” a la tarea a realizar.
O5, T2 Habilidad para comprender los problemas que afectan a la accesibilidad de las fuentes.
O5, T6, T2 Es capaz de diferenciar entre fuente primaria y secundaria.
O1, O5, Identifica la disciplina donde se enmarca el problema informacional.
B2
O1, O2, Identifica palabras clave, sinónimos y términos relacionados para la información que necesita.
O1, O2, O3, O4,
O5, O7, T2
Construye una estrategia de búsqueda utilizando los comandos apropiados del sistema de recuperación de información elegido (por ejemplo: operadores
booleanos, truncamiento y proximidad para los motores de búsqueda; organizadores internos, como los índices para libros).
O2, O3, O5, O7,
T6, T3, T2
Aplica la estrategia de búsqueda en varios sistemas de recuperación de información utilizando diferentes interfaces de usuario y motores de búsqueda,
con diferentes lenguajes de comando, protocolos y parámetros de búsqueda.
O1, O2, O3, O4,
O5, O7, T6, T3, T2
Utiliza diversos sistemas de búsqueda para recuperar la información en formatos diferentes.
O1, O2, O3, O4, B3
O5, O7, T6, T3, T2
Utiliza personalmente o en línea los servicios especializados disponibles en la institución para recuperar la información necesaria (por ejemplo: préstamo
interbibliotecario y acceso al documento, asociaciones profesionales, oficinas institucionales de investigación, recursos comunitarios, expertos y
profesionales en ejercicio).
O1, O2, O3, O5,
O7, T6, T3
Selecciona la técnica más adecuada para la tarea de extraer la información que necesita (por ejemplo: funciones de copiar y pegar en un programa de
ordenador, fotocopiadora, escáner, equipo audiovisual o instrumentos exploratorios).
O1, O2, O3, O4, B4
O5, T3
Crea un sistema para organizarse y gestionar la información (por ejemplo: fichas, Ednote…).
O2, O4, Registra la fuente primaria de la que se ha extraído la información para referencias futuras.

17. RESULTS
DIMENSIÓN DE EVALUACIÓN DE LA INFORMACIÓN / DIMENSION OF INFORMATION ASSESSMENT
O5, O7, T6,
T3, T2
Valora la cantidad, calidad y relevancia de los resultados de la búsqueda para poder determinar si habría que utilizar
herramientas de acceso a la información o métodos de investigación alternativos.
T2 Identifica lagunas en la información recuperada y es capaz de determinar si habría que revisar la estrategia de búsqueda. E1
T2 Es capaz de determinar si la información satisface la investigación u otra necesidad de información.
O1, O2, O3,
O4, O5, T6, T2
Examina y compara la información de varias fuentes para evaluar su fiabilidad, validez, corrección, autoridad,
oportunidad y punto de vista o sesgo.
E2
O1, O2, O3,
O4, O5, T6, T2
Identifica la finalidad y los destinatarios de los recursos potenciales (por ejemplo: divulgativo vs erudito, actualizado vs
histórico).
O1, O2, O3,
O4, O5, T6, T2
Reconoce y pone en cuestión los prejuicios, el engaño o la manipulación.
O1, O2, O3,
O4, O5, T6
Tiene en cuenta la estructura del texto.

18. RESULTS
DIMENSIÓN DE PROCESAMIENTO DE LA INFORMACIÓN / DIMENSION OF INFORMATION PROCESS
O7, T1, T2, T3,
T5, T7, T8,
Crea un sistema de organización y gestión de la información obtenida (por ejemplo: mediante fichas, programas, automatizado de
gestión de referencias, esquemas, borradores, diagramas…).
P1
O2, O3, O4, O5,
O7, T8,T2
Maneja distintos modos de acceso a la información (por ejemplo: textos digitales, imágenes, datos..)
O4, T1, T7, T8,
T2
Reconoce la interrelación entre conceptos y los combina en nuevos enunciados primarios potencialmente útiles con el apoyo de las
evidencias correspondientes.
T1, T5, T7, T8, P2
T2
Extiende la síntesis inicial hacia un nivel mayor de abstracción para construir nuevas hipótesis que pueden requerir información
adicional.
O7, T1, T5, T2 Analiza y sintetiza la información de la que dispone utilizando diversas técnicas (mapas conceptuales, esquemas…)
O2, O4, T1, T6,
T8, T7, T2
Comprueba si la nueva información contradice o verifica los conocimientos previos.
P3 Comprende que la información y el saber en cualquier disciplina es en parte un constructo social que está sometido a cambios
como resultado de un proceso continuo de diálogo e investigación.
T8, T5, T7, T3 Integra la nueva información con la información o el conocimiento previo).
O3, O5, O7, T5,
T2
Utiliza encuestas, cartas, entrevistas y otras formas de investigación para obtener información primaria.
P4
O2, T1, T8, T5 Combina los conocimientos previos con los conocimientos adquiridos.

19. RESULTS
DIMENSIÓN DE COMUNICACIÓN DE LA INFORMACIÓN / DIMENSION OF INFORMATION COMMUNICATION
CO4, CO5 Respeta la libertad de expresión y privacidad individual.
Comprende de la propiedad intelectual, los derechos de reproducción y el uso leal de los materiales acogidos a la
legislación sobre derechos de autor o copyright.
Reconoce en la desigualdad en el acceso a la información un factor que contribuye a las diferencias socioeconómicas.
CO4, CO5 C1
CO4, CO5, T4, T2 Emplea una identidad digital propia.
CO4, CO5, Respeta los derechos de uso y acceso a la información. C2
CO4, CO5 Cita correctamente los recursos de información utilizados.
CO3, CO4, T3 Selecciona un estilo de presentación documental adecuado.
CO3, CO4, CO5, T4, C3
T3
Elige el medio de comunicación que mejor apoye la finalidad del producto o la actividad y los destinatarios a los que
se dirige.
CO3, CO4, Incorpora principios de diseño y comunicación.
C4
CO1, CO2, CO3,
CO4, CO5, T4,
Comunica con claridad y un estilo adecuado a los fines de la audiencia.
CO1, CO2, CO3,
CO4, CO5, T4
Comunica de manera objetiva y respeta los valores universalmente aceptados.

20. RESULTS

21. RESULTS
DIAGRAMA DE FLUJO / FLOWCHART
RECIBE
RECEIVES
ENVÍA
SENDS
B1 Conoce y domina las fuentes de información para acceder a la información que se necesita 4 2
B2 Planifica la búsqueda 5 2
B3 Selecciona información 1 3
B4 Extrae, registra y gestiona la información y sus fuentes 2 2
E1 Aplica y evalúa 1 4
E2 Conoce Criterios de evaluación 3 2
P1
Revisa el proceso de actuación, gestionando la información reunida o generada y organiza la
información
3 2
P2 Sintetiza las ideas principales para construir nuevos conceptos 3 4
P3
Compara el nuevo conocimiento previo para determinar el valor añadido, las contradicciones u otras
características propias de la información.
1 3
P4 Crea conocimiento nuevo. 2 3
C1
Comprende y aplica las cuestiones éticas, legales y sociales que envuelven la información y las
tecnologías de la información
3 4
C2
Sigue las leyes, reglamentos y políticas institucionales así como las normas de cortesía relacionadas
con el acceso y uso de los recursos de información
2 2
C3 Conoce y domina herramientas 3 3
C4 Es capaz de comunicar a los demás con eficacia el producto o actuación 3 0

22. RESULTS
DIMENSION LEARNING RESULTS ni/n TOTAL
BÚSQUEDA
---------------------
SEARCH
B1: manage resources 2/4
5/12
B2: know how to do the search planning 3/4
B3: select information 0/2
B4: extract and manage the sources 0/2
EVALUACIÓN
---------------------
ASSESSMENT
E1: apply and assess 1/3
3/7
E2: know assessment criteria 2/4
PROCEDIMIENTO
---------------------
PROCESS
P1: review the process 2/2
8/10
P2: synthesize ideas and create new concepts 3/3
P3: compare new knowledge 2/3
P4: create new knowledge 1/2
COMUNICACIÓN
---------------------
COMMUNICATION
C1: understand and apply ethical standards 0/3
3/11
C2: know the rules, laws and policies 1/3
C3: know and manage tools 1/2
C4: know how to communicate effectively 1/3

23. DIMENSION LEARNING RESULTS Xres Xdim
BÚSQUEDA
---------------------
SEARCH
B1: manage resources 0,23
-0,09
B2: know how to do the search planning 0,46
B3: select information -0,66
B4: extract and manage the sources -0,40
EVALUACIÓN
---------------------
ASSESSMENT
E1: apply and assess -0,10
-0,01
E2: know assessment criteria 0,09
PROCEDIMIENTO
---------------------
PROCESS
P1: review the process 0,50
0,20
P2: synthesize ideas and create new
concepts
0,73
P3: compare new knowledge -0,08
P4: create new knowledge -0,35
COMUNICACIÓN
---------------------
COMMUNICATIO
N
C1: understand and apply ethical
standards
-0,45
-0,19
C2: know the rules, laws and policies -0,15
C3: know and manage tools -0,03
C4: know how to communicate
-0,14
effectively
RESULTS
- The dimension of information
process is the most important,
with an average of 0,20

24. CONCLUSIONS
1. Each handbook uses its own criteria; therefore, there are some
differences between them: different dimensions, handbooks based on
cognitive skills, handbooks based on practice…
2. In the phase 2 and 3 the information search dimension is the most
valuable. However, in the phase 4, the data obtained by experts on
valuations, the information process dimension is the most valuable.
3. Despite of these differences, it is important to say that all dimensions are
important because all of them are related to each other.

25. Thank you so much
Marcos Bielba Calvo
Fernando Martínez Abad
Mª Esperanza Herrera
García