Ambientes digitais,

21stcentury skills e

avaliaçãoUC: Avaliação Online das aprendizagensNeuza Pedro

Competências para o século

XXI: como avaliar?

UC: Avaliação Online das aprendizagensNeuza Pedro

Como avaliar?

Quando avaliar?

O quê avaliar?

Quem avaliar?

Para quê avaliar?

MétodosInstrumentos

SituaçõesEpisódios

AquisiçõesProduçõesSatisfaçãoProcessos

Percursos, ...

Alunos/FormandosProfessoresRecursos, Estratégias E-ACourse DesignGruposInstituições, ProgamasSistemas...

SeriaçãoSelecçãoCertificaçãoRegulaçãoDesenvolvimento ...

Foco da avaliação:

aprendizagens =

conhecimento + competência + valores

(ou conhecimento em acção num contexto social)

21stcentury skills

UC: Avaliação Online das aprendizagensNeuza Pedro

(Pedro, Matos, Pedro & Abrantes, 2011)

‘ 21stcentury skills ‘

é uma ‘buzzword’ não um conceito científico

UC: Avaliação Online das aprendizagensNeuza Pedro

21st century skills

enGauge model (North Central Regional Educational Laboratory (NCREL) e Metiri Group .

‘ 21stcentury skills ‘

uma meta-análise a 17 documentos de referênciaUC: Avaliação Online das

aprendizagensNeuza Pedro

(Pedro, Matos, Pedro & Abrantes, 2011)

(Pedro, Matos, Pedro & Abrantes, 2011)

(Pedro, Matos, Pedro & Abrantes, 2011)

21st century assessment

• Integrar de forma balançeada diferentes tipos de avaliação (high-quality standardized testing, effective formative and

summative assessments)• Feedback útil integrado na aprendizagem diária dos alunos

• Promove o desenvolvimento de portfolios que demonstrem o domínio de diferentes competências para o século XXI (a professores e futuros empregadores)

• Suporte a avaliação da qualidade dos sistemas educativos mas que igualmente a avaliação das aprendizagens de ordem superior e as competências para o século XXI

“Requires a balance of technology-enhanced, formative and summative assessments that measure student mastery of 21st

century skills”

21st century assessment Princípios para uma avaliação efectivamente formativa / feedback eficazes

1. Clarificar o que é entendido como ‘uma boa performance’ (metas, critérios e padrões)2. Encorajar o “tempo e esforço” nas tarefas desafiantes de aprendizagem3. Devolver feedback eficaz para que o estudante se autocorrija4. Permitir que o estudante atue após o feedback5. A avaliação sumativa tem que ter um impacto positivo na aprendizagem6. Encorajar a interação e o diálogo em torno da aprendizagem7. Dar condições para a autoavaliação e reflexão na aprendizagem8. Permitir que os estudantes escolham tópicos, métodos, critérios e tempos

específicos na avaliação9. Envolver os estudantes nas decisões sobre a avaliação10. Suportar o desenvolvimento de grupos e comunidades de aprendizagem11. Promover a autoconfiança e o aumento da autoestima12. Partilha de informação entre professores (para melhorar o processo de ensino)

Effective Assessment in a Digital Age - www.jisc.ac.uk

Pen-and-paper

vsOn-screen

Quais são as vantagens?

Ambientes online e

avaliação - Variedade e autenticidade nos modos de avaliação- Dedicação do estudante- Possibilidade de gerir de forma mais adaptada o tempo e o local da

avaliação (dirigirmo-nos para uma aprendizagem individual)- Analisar outras competências- Gestão de todo o processo (desde o local de submissão à classificação- Possibilidade de feedback imediato (a informação é transmitida muito

mais rapidamente)- Oportunidade do estudante atuar sobre o feedback- Abordagens inovadoras- Diminuição de custos

Vantagens

E quais são as

desvantagens?!

Ambientes online e

avaliação

- Autenticidade e legitimação da autoria- Fraude e plágio- Dependência da fiabilidade das tecnologias e sistemas- Dominio pelos docentes (limitações na formação)- Limitações no acesso a equipamentos (desigualdades)

Desvantagens

Objectivos educacionais e

Avaliação: Taxonomia de

Bloom

Taxomonia de Bloom

controversa e fortemente

criticada

??? Taxonomia

???

• É um referencial de classificação • Parte da ideia de linearidade na relação entre

conceitos = continuum

• Procura integrar organização e dimuir a imprecisão

Taxonomias hierárquicas

Taxonomias não-

hierárquicas

Folksonomias

Tagging

Taxonomia

Folksonomia

(adaptado de http://www.slideshare.net/gledson82/taxonomia-e-folksonomia

Taxonomia de Bloom

(Bloom, Hastings, Madaus, 1971)

Estrutura de organização hierárquica de objetivos educacionais

Desenvolvida nos anos 50 por uma comissão multidisplinar de especialistas de várias universidades dos EUA, liderada por Benjamin S. Bloom

3 domínios de aprendizagem :• o psicomotor: capacidades físicas, coordenação e

destreza manipulativa;

• o cognitivo: envolvendo o processamento da informação, o conhecimento e as capacidades intelectuais;

• o afetivo: atitudes, sentimentos e valores.

Dimensões do processamento

cognitivoCriar

Avaliar

Analizar

Aplicar

Comprender

Recordar

Pensamento de Ordem Inferior

Pensamento de Ordem Superior

(Bloom, 1949*)

Avaliar

Sintetizar

Analizar

Aplicar

Comprender

Conhecer

(Anderson & Krathwohl, 2001)

Avaliação com propósitos sumativos

(Anderson & Krathwohl, 2001)

• Cada categoria da Taxonomia tem um número de verbos-chave associados:* Recordar – reconhecer, listar, descrever, identificar,

recuperar, denominar, localizar.

* Comprender– Interpretar, resumir, inferir, parafrasear, clasificar, comparar, explicar, exemplificar.

* Aplicar – Implementar, desempenhar, usar, executar.

* Analizar – comparar, organizar, desconstruir, atribuir, delinear, encontrar, estruturar e integrar.

* Avaliar – rever, formular hipóteses, criticar, experimentar, julgar, monitorizar.

* Criar – desenhar, construir, planear, produzir, idealizar, elaborar.

Dimensões do processos cognitivos

Dimensões do

conhecimento

Recordar Compree

n-der Aplicar Analisar Avaliar Criar

A) Conhecimento

Factual

A.1 Conhecimento de terminologia A.2 Conhecimento de detalhes e elementos

B) Conhecimento

Conceptual

B.1 Conhecimento de classificação e categoriasB.2 Conhecimento de princípios e generalizações

B.3 Conhecimento de teorias, modelos e estruturas

C) Conhecimento

Processual

C.1 Conhecimento de habilidades específicas do domínio e algoritmosC.2 Conhecimento de técnicas e métodos específicos do domínioC.3 Conhecimento dos critérios que determinam quando usar os

procedimentos apropriados

D) Conhecimento

Meta-Cognitivo

D.1 Conhecimento estratégicoD.2 Conhecimento sobre tarefas cognitivas, incluindo o conhecimento

contextual apropriadoD.3 Conhecimento de si

Dimensões do processos cognitivos

Dimensões do

conhecimento

Recordar Compree

n-der Aplicar Analisar Avaliar Criar

Conhecimento Factual

Enunciarlocalizar

SumariarExemplificar

Experimentar Organizar Medir Combinar

Conhecimento

Conceptual

DescreverIlustrar Explicar

DividirIntegrarAtribuir

Seriar Planificar

Conhecimento

ProcessualReconhecer

PredizerInferir

ExecutarImplementar

Diferenciar CriticarComporProduzir

Conhecimento Meta-Cognitivo

Fazer usoExecutar

apropriada-mente

Determinar Apropriar

AtingirJulgar

(tomada de decisão)

Gerar Inovar

http://www.usi.edu/distance/bdt.htm

Objectivosaprendizag

ens

Actividades

Avaliações

===

Diferentes objectivos de

aprendizagens,diferentes

propostas de actividade

logo diferentes formas de avaliação

Em súmula, avaliação

(online) das aprendizagens

(online) permite:

• actividades/propostas mais significativas e reais (rich real-world tasks)

• Diversificada (objetivos, tipo, formato, tempo, autor) ex: auto-avaliação e hetero-avaliação

• níveis mais elevados de pensamento e actuando sobre diferentes capacidades (multimédia & higher order thinking)

• incorporar e trazer à evidência dimensões complexas (Colaboração, resolução de problemas e criatividade)

• feedback individualizado, imediato, recuperável e interactivo

• desenvolvida numa moldura transparente e co-construtida

(dê-se acesso aos alunos a grelhas a usar, critérios de avaliação e à sua participação no seu design)

Pode a Criatividad

e ser avaliada?

Elemento -novidade

originalidade ‘germinalidade’ ‘transformacionali

dade’ 

Resolução adequação Nivel de

ajustamento Utilidade valor logica

Elaboração bem-executado atractivo expressivo complexidade elegânia Unicidade

(Besemer & O’Quin, 1987)

• Pessoa características de uma pessoa criativa

• Processo caracteristicas associadas ao processo criativo

• Produto qualidade do produto criativo

• Contexto ou factores ambientais ambiente que facilitam /promover uma performance

criativa

Requer-se uma (nova) literacia da avaliação

(‘assessment literacy’ Stiggins, 2006 cit. por Ussher & Earl, 2010)

ReferênciasAnderson, L. W., & Krathwohl, D. R. (eds.) (2001). A taxonomy for learning, teaching and assessing: A revision of Bloom's taxonomy of educational objectives. New York: Longman.

Bessemer, S. P., & O’Quin, K. (1987) Creative product analysis: testing a model by developing a judging instrument. In S.G. Isaksen (Ed.) Frontiers of Creativity: Beyond the Basics (pp. 342-357). New York: Bearly Buffalo.

Bloom, B.S. Hastings, J. T., & Madaus, G. F. (1971). Handbook of formative and summative evaluation of students learning. New York: McGraw-Hill.

JISC, (2010). Effective dssessment in a digital age: A guide to technology-enhanced assessment and feedback. Disponível em http://www.jisc.ac.uk/media/documents/programmes/elearning/digiassass_eada.pdf

Pedro, N., Matos, J. F., Pedro, A., & Abrantes, P. (2011). Teacher skills and competence development for classrooms of the future_Annex 1. Disponível em http://itec.eun.org/c/document_library/get_file?p_l_id=10307&folderId=37321&name=DLFE-2213.pdf

Rogers, M., & Fasciato, M. (2005). Can Creativity be assessed? Paper presented at the British Educational Research Association Annual Conference, University of Glamorgan, 14-17 September. Disponível em http://www.leeds.ac.uk/educol/documents/150029.htm

Ussher, B., & Earl, K., (2010). ‘Summative’ and ‘Formative’: Confused by the Assessment Terms? New Zealand Journal of Teachers’ Work, 7 (1), 53-63.