30
Critérios de Avaliação, instrumentos e cotações ou O Pânico! da Classificação

Avaliacao online: instrumentos e classificacao

Embed Size (px)

DESCRIPTION

Avaliacao online das aprendizagens__Unid Curricular do Mestrado em TIC e Educação e Tecnologias e Metodologias em E-learning, Instituto de Educação, Universidade de Lisboa

Citation preview

Page 1: Avaliacao online: instrumentos e classificacao

Critérios de Avaliação,

instrumentos e cotações

ouO Pânico! da Classificação

Page 2: Avaliacao online: instrumentos e classificacao

Avaliação dada aprendizagem

Avaliação parapara aprendizagem

Avaliação comocomo aprendizagem

AprendenteAprendente+

Tecnologia (método e conteúdo)

Page 3: Avaliacao online: instrumentos e classificacao

Avaliação Diversificada

… nas Abordagens

Page 4: Avaliacao online: instrumentos e classificacao

Classificação:Abordagem analítica vs Abordagem

global

Page 5: Avaliacao online: instrumentos e classificacao

Abordagem Global- Pouco tempo

- Questões abertas (simples ou muito complexas)- Questões sem referente- Muito dependente das expectativas do avaliador- Crianças pequenas (ex. pré-escolar)

Questão: A quem serve?

“Holistic scoring seemed to held more consistent ratings for the same student from block to block or from judge to judge

than analytic scoring.

As a general rule, global quality scaling is simpler as faster than analytic scoring. In some situations it may be more

reliable. But it does not provide any clear justification of the grade assigned, nor does it give any indication to the student

of how his answer fell short to the mark.” (Ebel, 1972, p. 151).

Page 6: Avaliacao online: instrumentos e classificacao

Abordagem Global

- Requer um avaliador experiente

- Requer vários avaliadores (painel) ou provedor/especialista (ou um avaliador extremamente confiante!!!)

- Referência a norma vs referência ao grupo

- Implica a não existência de ‘conflitos’ e de distúrbios no interior da prova

Novamente… A quem serve?

Page 7: Avaliacao online: instrumentos e classificacao

1) Ler cuidadosamente as respostas encontradas na globalidade2) Distingui-las de forma geral, considerando o nível de adequação às

expectativas do avaliar3) Dividir as respostas em pilhas de distintas qualidades de desempenho

4) Rever cada uma das pilhas para conferir a consistência entre as respostas

Fraco

Médio Bom

Satisfaz2

Mto Bom5

Mto

Fraco

1

Fraco2

Satifaz Pouco

2

Bom4

5) Subdividir novamente as pilhas em novas pilhas de qualidades de desempenho distintas (n vezes: quanto > n, > precisão)

6) A divisão (pode) considerar níveis equilibrados de respostas por pilha ou aproximação a distribuição normal

5% 25% 20% - 40% - 20% 25% 5%

Ebel (1972)

Page 8: Avaliacao online: instrumentos e classificacao

Abordagem Analítica- Time-consuming

- Criteria-based assessment = quebra tarefas complexas em diferentes componentes

- Procura aumentar o grau de precisão, exactidão e especificidade- Questões abertas- Questões com referente (teórico/empírico)

Questão: A quem serve?

“Holistic scoring seemed to held more consistent ratings for the same student from block to block or from judge to judge

than analytic scoring.

As a general rule, global quality scaling is simpler as faster than analytic scoring. In some situations it may be more

reliable. But it does not provide any clear justification of the grade assigned, nor does it give any indication to the student

of how his answer fell short to the mark.” (Ebel, 1972, p. 151).

Page 9: Avaliacao online: instrumentos e classificacao

Avaliação Diversificada

… nos Instrumentos

Page 10: Avaliacao online: instrumentos e classificacao

Instrumentos de Avaliação

diferentes permitemanalisar diferentes facetas

Page 11: Avaliacao online: instrumentos e classificacao

Instrumentos de Avaliação

vs Actividades ou

Produtos sobre os quais incide a

avaliação

Page 12: Avaliacao online: instrumentos e classificacao

Testes Exames

Page 13: Avaliacao online: instrumentos e classificacao

Produção de vídeos

Page 14: Avaliacao online: instrumentos e classificacao

Narrações / Story-telling

Page 15: Avaliacao online: instrumentos e classificacao

Criação de apresentações(áudio)

Page 16: Avaliacao online: instrumentos e classificacao

Relatórios (fotográficos)

Page 17: Avaliacao online: instrumentos e classificacao

Tutoriais explicativos

Page 18: Avaliacao online: instrumentos e classificacao

Legendagens

Page 19: Avaliacao online: instrumentos e classificacao

Entrevistas a ‘especialistas’

Page 20: Avaliacao online: instrumentos e classificacao

Gestão de Projectos

Page 21: Avaliacao online: instrumentos e classificacao

Criação de Websites/blogues/Wikis

Page 22: Avaliacao online: instrumentos e classificacao

. Observação . Registos de

incidentes críticos

. Listas de Verificação

(Check-lists ou Inventários). Grelha de Avaliação.Rubricas

. Entrevistas . Escalas, testes e

Questionários

ExamesApresentações

oraisComposições/

Ensaios / SíntesesProdução de

vídeosPodcasts

Relatórios de Imagens/ Books

NarraçõesLegendagens

ProjectosWebsites

Concepção de Produtos (obras)

Portefólios

(Pais & Monteiro, 1996)

Page 23: Avaliacao online: instrumentos e classificacao

Observação- Baseada em evidências, processo sistemático (procura eliminar a

avaliação baseada em impressões gerais)- Grelhas de observação/Protocolos: procuram aumentar o grau de

precisão e especificidade- Time-consuming

Estratégias ?

. Utilizar grelhas de registo

. Sistematizar o foco de avaliação (num comportamento observável)

. Focar a atenção num grupo de cada vez

. Seleccionar aleatoriamente um sujeito para observar

Page 24: Avaliacao online: instrumentos e classificacao

Registo de Incidentes

críticos- Complementar à obervação - Baseado em situações atípicas (positivas e negativas)- Grelhas de Registo: procuram aumentar o grau de precisão e

especificidade- Exaustividade na descrição

Inquéritos pré-definidos

Page 25: Avaliacao online: instrumentos e classificacao

Listas de Verificação

http://printablechecklist.org/

- Baseada numa abordagem dicotómica - Difíceis de construir pela necessidade de discriminação dos componentes- Não permite avaliar a qualidade do desempenho- Rápida aplicação

Page 26: Avaliacao online: instrumentos e classificacao

Exemplos: http://www.uwstout.edu/soe/profdev/rubrics.cfm http://www.grelhasonline.com/showquestions.php?id=28

- Baseada numa abordagem progressiva de etapas na qualidade da performance

- Qualitativa e descritiva: grau de complexidade na construição de rubricas de qualidade (global/analítica)

- Permite avaliar a qualidade do desempenho (abordagem escalar)- Aval. propósitos formativos (durante/prévio à tarefa)- Rápida aplicação

Page 27: Avaliacao online: instrumentos e classificacao

Grelhas de Avaliação- Baseada numa abordagem analítica (descriminativa da qualidade de cada elemento

da tarefa =- Quantitativa (por vezes, explicativa)- Aval. propósitos sumativos e concomitantemente formativos (após tarefa)- Aplicação morosa

Page 28: Avaliacao online: instrumentos e classificacao

??? Listas,

Grelhas ou Rubricas

???

Page 29: Avaliacao online: instrumentos e classificacao

Os professores

e a avaliaçãoOs Puristas Os

Poetas Os Pragmáticos

(Griffin, 2009)

Page 30: Avaliacao online: instrumentos e classificacao

ReferênciasAndrade H., & Du, Y. (2005). Student perspectives on rubric-referenced assessment. Practical Assessment Research & Evaluation, 10 (3). Disponivel em http://pareonline.net/pdf/v10n3.pdf.

Black, P., Harrison, C., Lee, C., Marshall, B. and Wiliam, D. (2003) Assessment for Learning. Putting it into practice. Maidenhead: Open University Press.

Ebel, R. L. (1972). Essentials of educational measurement (2nd ed.). New Jersey: Prentice Hall, Inc.

Dierick, S., & Dochy, F. (2001). New lines in Edumetrics: New forms of assessment lead to new assessment criteria. Studies in educational evaluation, 27,4, 307-329.

Griffin, M. (2009). What is a Rubric?. Assessment Update, 21, 6, 4-13.

Kan, D. (2007). An alternative method in the new educational program from the point of performance-based-assessment: rubric scoring scales. Educational Sciences: Theory & Practice, 7 (1), 144-152.

Pais, A., & Monteiro, M. (1996). Avaliação, uma prática diária. Lisboa: Editorial Presença.

Taggart, G. L., Phifer, S. J., Nixon, J. A., & Wood, M. (Eds.) (2008). Rubrics: Handbook for construction and use. Lancaster: Technomic Publishing Co.