1) O documento discute diferentes abordagens e instrumentos para avaliação da aprendizagem, incluindo abordagens analíticas versus globais, e instrumentos como observação, registros de incidentes críticos, listas de verificação, rubricas e grelhas de avaliação.
2) É sugerido que abordagens globais requerem avaliadores experientes enquanto abordagens analíticas fornecem mais detalhes sobre o desempenho do estudante.
3) Diferentes instrumentos como observação, registros e rubricas podem ser us
Design de Cenários de Aprendizagem - Formação de professores
Avaliacao online: instrumentos e classificacao
1. Critérios de
Avaliação,
instrumentos e
cotações
ou
O Pânico! da
2. A v a lia ç ã o d a
a p r e n d iz a g e m
A p re nd e nte
+
Tecnologia
(método e
conteúdo)
v a lia ç ã o p a r a A v a lia ç ã o c o m o
a p r e n d iz a g e m a p r e n d iz a g e m
5. Abordagem Global
- Pouco tempo
- Questões abertas (simples ou muito complexas)
- Questões sem referente
- Muito dependente das expectativas do avaliador
- Crianças pequenas (ex. pré-escolar)
“Holistic scoring seemed to held more consistent ratings for
the same student from block to block or from judge to judge
Q ue s tã o : than analytic scoring.
A quem serve? As a general rule, global quality scaling is simpler as faster
than analytic scoring. In some situations it may be more
reliable. But it does not provide any clear justification of the
grade assigned, nor does it give any indication to the student
of how his answer fell short to the mark.”
(Ebel, 1972, p. 151).
6. Abordagem Global
- Requer um avaliador experiente
- Requer vários avaliadores (painel) ou provedor/especialista
(ou um avaliador extremamente confiante!!!)
- Referência a norma vs referência ao grupo
- Implica a não existência de ‘conflitos’ e de distúrbios no interior da
prova
N o v a m e n t e … A quem serve?
7. 1) Ler cuidadosamente as respostas encontradas na globalidade
2) Distingui-las de forma geral, considerando o nível de adequação às
expectativas do avaliar
3) Dividir as respostas em pilhas de distintas qualidades de desempenho
Fraco
Médio Bo m
9) Rever cada uma das pilhas para conferir a consistência entre as respostas
• Subdividir novamente as pilhas em novas pilhas de qualidades de
desempenho distintas (n vezes: quanto > n, > precisão)
Satifaz Mto
Mto Fraco Pouco Satisfaz
Bom
Bo m
o
Frac 2
2 2 4
5
1
5% 25% 20% - 40% - 20% 25% 5%
1) A divisão (pode) considerar níveis equilibrados de respostas por pilha ou
aproximação a distribuição normal Ebel (1972)
8. Abordagem Analítica
- Time-consuming
- Criteria-based assessment = quebra tarefas complexas em diferentes
componentes
- Procura aumentar o grau de precisão, exactidão e especificidade
- Questões abertas
- Questões com referente (teórico/empírico)
“Holistic scoring seemed to held more consistent ratings for
the same student from block to block or from judge to judge
Q ue s tã o : than analytic scoring.
A quem serve? As a general rule, global quality scaling is simpler as faster
than analytic scoring. In some situations it may be more
reliable. But it does not provide any clear justification of the
grade assigned, nor does it give any indication to the student
of how his answer fell short to the mark.”
(Ebel, 1972, p. 151).
22. Exames
Apresentações orais . Observação
Composições/ Ensaios / . Registos de
Sínteses incidentes críticos
Produção de vídeos . Listas de Verificação
Podcasts (Check-lists ou
Relatórios de Imagens/ Inventários)
Books . Grelha de Avaliação
Narrações .Rubricas
Legendagens . Entrevistas
Projectos . Escalas, testes e
Websites Questionários
Concepção de Produtos (Pais & Monteiro, 1996)
23. Observação
- Baseada em evidências, processo sistemático (procura eliminar a
avaliação baseada em impressões gerais)
- Grelhas de observação/Protocolos: procuram aumentar o grau de
precisão e especificidade
- Time-consuming
. Utilizar grelhas de registo E s t r a t é g ia s ?
. Sistematizar o foco de avaliação (num
comportamento observável)
. Focar a atenção num grupo de cada vez
. Seleccionar aleatoriamente um sujeito para
observar
24. Registo de Incidentes
críticos
- Complementar à obervação
- Baseado em situações atípicas (positivas e negativas)
- Grelhas de Registo: procuram aumentar o grau de precisão e
especificidade
- Exaustividade na descrição
In q u é r it o s p r é -
d e f in id o s
25. Listas de Verificação
- Baseada numa abordagem dicotómica
- Difíceis de construir pela necessidade de discriminação dos componentes
- Não permite avaliar a qualidade do desempenho
- Rápida aplicação
http://printablechecklist.org/
26. - Baseada numa abordagem progressiva de etapas na qualidade da
performance
- Qualitativa e descritiva: grau de complexidade na construição de rubricas
de qualidade (global/analítica)
- Permite avaliar a qualidade do desempenho (abordagem escalar)
- Aval. propósitos formativos (durante/prévio à tarefa)
- Rápida aplicação
Exemplos: http://www.uwstout.edu/soe/profdev/rubrics.cfm http://
www.grelhasonline.com/showquestions.php?id=28
27. -
Grelhas de Avaliação
Baseada numa abordagem analítica (descriminativa da qualidade de cada
elemento da tarefa =
- Quantitativa (por vezes, explicativa)
- Aval. propósitos sumativos e concomitantemente formativos (após tarefa)
- Aplicação morosa
29. Os professores e a
avaliação
Os Puristas Os Poetas Os
Pragmáticos (Griffin, 2009)
30. R e f e r ê n c ia s
Andrade H., & Du, Y. (2005). Student perspectives on rubric-referenced assessment. Practical
Assessment Research & Evaluation, 10 (3). Disponivel em http://pareonline.net/pdf/v10n3.pdf.
Black, P., Harrison, C., Lee, C., Marshall, B. and Wiliam, D. (2003) Assessment for Learning. Putting it
into practice. Maidenhead: Open University Press.
Ebel, R. L. (1972). Essentials of educational measurement (2nd ed.). New Jersey: Prentice Hall, Inc.
Dierick, S., & Dochy, F. (2001). New lines in Edumetrics: New forms of assessment lead to new
assessment criteria. Studies in educational evaluation, 27,4, 307-329.
Griffin, M. (2009). What is a Rubric?. Assessment Update, 21, 6, 4-13.
Kan, D. (2007). An alternative method in the new educational program from the point of
performance-based-assessment: rubric scoring scales. Educational Sciences: Theory & Practice, 7 (1),
144-152.
Pais, A., & Monteiro, M. (1996). Avaliação, uma prática diária. Lisboa: Editorial Presença.
Taggart, G. L., Phifer, S. J., Nixon, J. A., & Wood, M. (Eds.) (2008). Rubrics: Handbook for
construction and use. Lancaster: Technomic Publishing Co.