Oficina de Apropriação de Resultados para

Professores

PAEBES 2014Língua Portuguesa e Matemática

5º ano do Ensino Fundamental

PAEBES 2014

2

Momentos de formação

1º Momento: Avaliação Externa e em Larga Escala.

2º Momento: Resultados de Língua Portuguesa

(Leitura) e Matemática.

3º Momento: Resultados de Língua Portuguesa

(Produção de Texto).

1º MomentoAvaliação Externa e em Larga Escala

PAEBES 2014

O que é avaliar?

Coletar

Diagnosticar

Decidir Agir

Produzir algum julgamento sobre a realidade.

Dados e informações sobre determinada realidade.

Tomar decisão em função de um objetivo que se deseja alcançar.

Traçar estratégias de uma ação sobre o objeto avaliado.

PAEBES 2014

4

PAEBES 2014

5

Os Sistemas de Avaliação

• Um Sistema de Avaliação da Educação tem por objetivo fornecerdados sobre o desempenho dos estudantes, a fim de contribuir parao aprimoramento da educação oferecida pela rede de ensino.

Paebes

• Criado em 2000, o Programa de Avaliação é, desde 2009, organizadopelo CAEd/UFJF, através de uma parceria com a SEDU/ES.

• O programa tem como objetivo diagnosticar o desempenho dosalunos em diferentes áreas do conhecimento e níveis deescolaridade, bem como subsidiar a implementação, a reformulaçãoe o monitoramento de políticas educacionais, contribuindo, dessaforma, para a melhoria da qualidade da educação no Estado.

PAEBES 2014

Etapas básicas dos Sistemas de Avaliação

• Determinação da população a ser avaliada

1

• Elaboração da Matriz de Referência

• Construção de itens

• Pré-testagem dos itens

• Análise estatística e pedagógica dos itens

2

• Montagem dos cadernos de testes (BIB)

• Elaboração dos testes

• Elaboração dos questionários contextuais

3

• Aplicação dos instrumentos

• Processamento e constituição da base de dados da avaliação

4

• Análise dos resultados: TCT e TRI

• Produção dos resultados

• Construção e interpretação das Escalas de Proficiência

• Divulgação dos resultados

5

PAEBES 2014

7

Desenho da Avaliação

PAEBES ALFA 1ª onda

Edição 1º ano EF

2008 Língua Portuguesa

2009 Língua Portuguesa

2010 Língua Portuguesa e Matemática

2011 Língua Portuguesa e Matemática

2012 Língua Portuguesa e Matemática

2013 Língua Portuguesa (Leitura e Escrita) e Matemática

2014 Língua Portuguesa, Leitura, Escrita e Matemática

PAEBES 2014

8

Desenho da Avaliação

PAEBES ALFA 2ª onda

Edição 1º ano EF 2º ano EF 3º ano EF

2008 LP LP LP

2009 LP LP LP

2010 LP e MAT LP e MAT LP e MAT

2011 LP e MAT LP e MAT LP e MAT

2012 LP e MAT LP e MAT LP e MAT

2013LP (Leitura e Escrita) e

MATLP (Leitura e Escrita) e

MATLP (Leitura e Escrita) e

MAT

2014LP, Leitura, Escrita e

MATLP, Leitura, Escrita e

MATLP, Leitura, Escrita e

MAT

PAEBES 2014

9

Desenho da Avaliação

PAEBES

Edição 5º ano EF 9º ano EF 1º ano EM 2º ano EM 3º ano EM

2009 LP e MAT LP e MAT LP e MAT - -

2010 LP e MAT LP e MAT LP e MAT - LP e MAT

2011 LP e MAT LP e MAT - -LP, MAT, BIO,

FIS, QUI

2012 LP e MATLP, MAT, GEO e

HIST -LP e MAT(estudo

secretaria)

LP, MAT, GEO, HIST

2013 LP e MAT LP, MAT e CIEN - -LP, MAT, BIO,

FIS, QUI

2014 LP, MAT, PTLP, MAT, HIST,

GEO- -

LP, MAT, HIST,GEO

PAEBES 2014

10

O nosso desafio

PAEBES 2014

11

Como utilizar os resultados?

Uso dos ResultadosProfessor

12

PAEBES 2014

Projetos de intervenção pedagógica.

Elaboração de projetos especiais.

Foco nos alunos com dificuldades.

Planejamento das ações de sala de aula.

Ações de reforço escolar.

Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica.

Uso dos ResultadosAluno e família

13

PAEBES 2014

Acompanhamento individual do desempenho escolar pelos alunos e seus familiares.

Informações sobre a qualidade dos serviços educacionais oferecidos.

2º MomentoResultados de Língua Portuguesa (Leitura) e Matemática

PAEBES 2014

15

Como trabalhar os resultados na escola

• O trabalho de intervenção realizado em cada escola, deve serdesenvolvido pensando criticamente na prática de hoje ouanteriores e nos resultados alcançados.

• Conhecendo esses elementos, pode-se pensar em estratégias paramelhorar a prática que será aplicada.

Os grupos de trabalho e o modo de contato/intervençãopara cada grupo

• Qual é o trabalho desenvolvido com a equipe gestora (direção ecoordenação)?

• Qual é o trabalho desenvolvido com equipe pedagógica(coordenadores e professores)?

PAEBES 2014

16

Equipe Pedagógica

• Conhecer os resultados gerais da escola:

1. Etapas avaliadas e percentual de participação;2. Etapas avaliadas e proficiência média em cada disciplina;3. Etapas avaliadas, proficiência média e distribuição por

padrão de desempenho em cada disciplina;

Como os dados podem ser acessados?

• Revista Impressa.• Aceso ao portal PAEBES:

http://www.paebes.caedufjf.net/

PAEBES 2014

17

PAEBES 2014

18

PAEBES 2014

19

Resultados

- Por escola:

- foco na TRI.

- Por aluno:

- foco na TCT.

PAEBES 2014

20

PAEBES 2014

Apresentação dos Resultados – Matemática

21

PAEBES 2014

Apresentação dos Resultados – Matemática

22

PAEBES 2014

Apresentação dos Resultados – Matemática

26

O que representa a Proficiência Média? Como se obtém esse dado?

• O que são itens?

– São os elementos que compõem os testes ouquestionários

PAEBES 2014

27

PAEBES 2014

28

PAEBES 2014

29

O que representa a Proficiência Média?

• O que é proficiência?

– É a medida que representa um determinado traçolatente (aptidão)

• Teoria da Resposta ao Item (TRI)

– Grupo de modelos matemáticos e estatísticos quedescrevem a associação entre a aptidão de umindivíduo e a probabilidade de uma resposta a umitem

PAEBES 2014

O que representam os Padrões de Desempenho?

30

PAEBES 2014

• RECUPERAÇÃO: Os estudantes demonstram um desenvolvimento aindaincipiente das principais habilidades associadas à sua etapa deescolaridade.

• REFORÇO: Os estudantes respondem itens com habilidades maiscomplexas, quando comparados com o verificado no padrão anterior.

•APROFUNDAMENTO: Esses estudantes demonstram atender às condiçõesmínimas para que avancem em seu processo de escolarização.

• DESAFIO: Esses estudantes costumam responder corretamente a ummaior quantitativo de itens, o que sugere a sistematização do processo deaprendizagem de forma consolidada para aquela etapa de escolaridade.

Do mais básico...

Ao mais avançado...

31

Como realizar a leitura e interpretação dos resultados?

• VÍDEO de Apropriação de Resultados.

• REVISTAS publicadas pelo sistema.

PAEBES 2014

32

PAEBES 2014

Leitura e interpretação dos Resultados –Língua Portuguesa (Leitura)

33

PAEBES 2014

Leitura e interpretação dos Resultados –Língua Portuguesa (Leitura)

34

PAEBES 2014

Leitura e interpretação dos Resultados –Língua Portuguesa (Leitura)

35

Organize os dados na tabela para análise

PAEBES 2014

5EF 16 88,9 208,5 Proficiente SIMHabilidades

elencadas nos padrões ABAIXO

DO BÁSICO e BÁSICO

Habilidades elencadas no

padrão AVANÇADO

36

PAEBES 2014

2. Etapas avaliadas e proficiência média

2.1 Observe a proficiência média.

2.2 Vamos alocar esse dado na Escala deProficiência?

Equipe Pedagógica1. Etapas avaliadas e percentual de participação

1.1 Como vocês analisam a participação dessaescola?

37

PAEBES 2014

ESCOLA: 208,5

ESTADO: 209,6SRE: 204,5

38

Equipe Pedagógica2. Etapas avaliadas e proficiência média

• Relacione o resultado alcançado com asações/intervenções pedagógicas que foram ou podemser implementadas no âmbito da escola.

• Como possibilitar que os estudantes que chegarão àesta etapa desenvolvam as habilidades esperadas?

• Como recuperar os estudantes que já passaram pelaetapa avaliada para que, ao final da Educação Básica,tenham desenvolvido habilidades e competênciasesperadas?

PAEBES 2014

39

PAEBES 2014

Leitura e interpretação dos Resultados –Língua Portuguesa (Leitura)

40

Organize os dados na tabela para análise

PAEBES 2014

• Identifique o percentual de estudantes em cada padrão de desempenho.

• A turma apresenta um desenvolvimento homogêneo? Todos desenvolveram ashabilidades no mesmo grau de complexidade?

• Como identificar os estudantes que se encontram em cada Padrão deDesempenho?

5EF 208,5 Proficiente6,2% 37,5% 37,5% 18,8%

1 6 6 3

Textos mais familiares e de simples

compreensão

Textos com temática mais complexa e de

maior extensão

41

Equipe Pedagógica

4. Etapa de escolaridade e percentual de acertopor descritor

• Observe descritores menos acertados :– São habilidades desenvolvidas naquela etapa

avaliada ou são desenvolvidas ao longo do EnsinoFundamental?

– Qual é a relação de cada habilidade com osconteúdos trabalhados em sala de aula? Quais aspráticas pedagógicas adotadas pelos professoresda escola em relação a cada um dessesconteúdos?

PAEBES 2014

42

PAEBES 2014

Percentual de Acerto por descritor

PAEBES 2014

23,08% IV D11

33,33% III D20

41,94% I D00

100,0% V D16

83,87% V D17

75,00% IV D15

44

Equipe Pedagógica

5. Avaliação externa e interna

• Os resultados da avaliação interna sãocomparáveis àqueles extraídos da avaliaçãoexterna?

• As habilidades avaliadas pelos professores são asmesmas avaliadas pelo programa de avaliaçãoexterna?

• Os conteúdos desenvolvidos pelos professores daescola, com base no currículo, estão relacionadoscom as habilidades da matriz de referência?

PAEBES 2014

45

PAEBES 2014

3º MomentoResultados de Língua Portuguesa (Produção de Texto)

PAEBES 2014

PAEBES 2014

47

Produção de textos em avaliação em largaescala

• De modo diferente e ao mesmo tempo complementar, doteste em que o aluno responde a itens de múltiplaescolha, na parte de produção de texto, ele assume aautoria de um texto.

• Avalia-se, portanto, conjuntamente, as competências deleitura e produção de textos. Desse modo, pode-seaproximar de um diagnóstico mais preciso do domíniolinguístico e textual do sujeito-estudante, em situaçãoformal de produção de textos escritos.

PAEBES 2014

48

Aspectos teóricos orientadores da produção de texto

PAEBES 2014

49

O que é texto?

• “... ocorrência linguística falada ou escrita, de qualquer extensão,dotada de unidade sociocomunicativa, semântica e formal. Antes demais nada, um texto é uma unidade de linguagem em uso,cumprindo uma função identificável num dado jogo de atuaçãosociocomunicativa*.”

Aspectos a serem avaliados em um texto

• O pragmático, que tem a ver com seu funcionamento enquantoatuação informacional e comunicativa;

• O semântico-conceitual, de que depende sua coerência;

• O formal, que diz respeito à sua coesão.

*COSTA VAL, Maria da Graça. Redação e textualidade. São Paulo: Martins Fontes, 2006.

PAEBES 2014

50

Textualidade

• Chama-se textualidade ao conjunto de característicasque fazem com que um texto seja um texto, e nãoapenas uma sequência de frases.

Elementos de textualidade

• Coerência: elemento fundamental de textualidade,responsável pelo sentido do texto, depende não apenasda lógica interna do texto, como também dacompatibilidade entre a rede conceitual (mundo textual)e o conhecimento de mundo de quem processa odiscurso.

PAEBES 2014

51

• Coesão: é o resultado do modo como se expressam na superfícietextual os conceitos e as relações subjacentes. É responsável pelaunidade formal do texto.

• Intencionalidade: para que uma manifestação linguística constituaum texto é necessário que haja a intenção do locutor em apresentá-lo como tal. Cada um dos objetivos que temos em mentedeterminará o texto que produziremos.

• Aceitabilidade: é o complemento da intencionalidade. É adisposição ativa de participar de um discurso e/ou compartilhar umpropósito. Se todo texto produzido se dirige a alguém, é preciso queo destinatário ou alocutário dê sentido a ele, o considere útil erelevante. O texto recebido precisa produzir conhecimentos ouqualquer outro tipo de efeito que mobilize o interlocutor a cooperarcom produtor.

PAEBES 2014

52

• Situacionalidade: todo texto depende do contexto em que éinterpretado. Nenhum texto é autossuficiente, pois é produzidoou utilizado por alguém com certos propósitos claramentevinculados a uma dada situação comunicativa.

• Informatividade: designa em que medida os materiaislinguísticos apresentados no texto são operados ou nãooperados, conhecidos ou não conhecidos da parte dosinterlocutores.

• Intertextualidade: refere-se às diversas maneiras pelasquais a produção e a recepção de um texto dependem doconhecimento do outros textos anteriormente produzidos.Nesse sentido pode-se falar em : alusão, epígrafe, paródia,paráfrase, citação, metalinguagem e polifonia.

PAEBES 2014

53

Tipologia textual

• Esta é a forma como o texto se organiza estruturalmente, podendoser classificado como narrativo, argumentativo, expositivo(dissertativo), descritivo ou injuntivo. Cada uma dessas classificaçõesvaria de acordo com a forma como o texto se apresenta (aspectoslexicais, sintáticos, tempos verbais, relações lógicas) e com afinalidade para o qual foi escrito.

Gênero textual

• Refere-se às diferentes formas de expressão textual , ou seja, váriostipos de escrita. No estudo da Literatura, temos, por exemplo,poesia, crônicas, contos, prosa, etc. Para a Linguística, os gênerostextuais englobam estes e todos os textos produzidos por usuáriosde uma língua. Assim, ao lado da crônica , do conto, vamos tambémidentificar a carta pessoal, a conversa telefônica, o e-mail, e tantosoutros exemplares de gêneros que circulam em nossa sociedade.

PAEBES 2014

54

A avaliação de produção de texto no PAEBES

PAEBES 2014

55

Qual foi a tarefa de produção de texto?

• Solicitou-se aos estudantes a elaboração de um textonarrativo em prosa ficcional ou relato.

• A escolha por uma produção textual por tipologiaconferiu aos estudantes liberdade para definirem aspropriedades sociocomunicativas necessárias para atransmissão da mensagem pretendida por cada um.

PAEBES 2014

56

Proposta de produção textual

PAEBES 2014

57

Em uma escala de 0 a 10 pontos,

qual nota você atribuiria a

esse texto em uma avaliação interna? Por

quê?

2,0 pts.

PAEBES 2014

58

PAEBES 2014

59

Em uma escala de 0 a 10 pontos,

qual nota você atribuiria a

esse texto em uma avaliação interna? Por

quê?

7,5 pts.

PAEBES 2014

60

PAEBES 2014

61

O que foi avaliado?

O que é avaliado Descrição da competência

Competência I

Registro

Verificar o domínio da norma padrão da língua escrita: ortografia,

pontuação, sintaxe, adequação vocabular, segmentação de palavras,

formação de palavras e concordância verbal/nominal de gênero,

número e pessoa.

Competência II

Coerência Temática

Verificar a compreensão da proposta de produção textual e a

aplicação conceitos das várias áreas de conhecimento para

desenvolver o tema.

Competência III

Tipologia

Verificar os conhecimentos relativos aos elementos organizacionais

do texto narrativo.

Competência IV

Coesão

Verificar o conhecimento acerca do emprego dos mecanismos

linguísticos necessários ao encadeamento textual.

Atribuição de notas

• O avaliador atribuiu umanota entre 0 (zero) e 10(dez), em intervalos de 2(dois) pontos, para cadauma das 4 (quatro)competências, e a somadesses pontos compõe anota total do estudante.

• A nota final do estudante éa média aritmética dasnotas totais atribuídas pelosavaliadores, alocada emuma escala que varia entre0 (zero) e 10 (dez) pontos.

Situações para atribuição da nota 0 (zero) ao texto do

estudante

• Folha de redação em branco.

• Texto insuficiente.

• Cópia.

• Anulado.

• Escrita ilegível.

• Fuga ao tema.

• Fuga à tipologia.

62

PAEBES 2014

63

A Matriz de Correção por Competência

PAEBES 2014

64

PAEBES 2014

65

PAEBES 2014

66

Resultados

PAEBES 2014

67

Leitura e interpretação dos Resultados –Língua Portuguesa (Produção de Texto)

PAEBES 2014

68

Leitura e interpretação dos Resultados –Língua Portuguesa (Produção de Texto)

PAEBES 2014

69

Leitura e interpretação dos Resultados –Língua Portuguesa (Produção de Texto)

PAEBES 2014

70

Leitura e interpretação dos Resultados –Língua Portuguesa (Produção de Texto)

PAEBES 2014

71

Perfil de escritor

www.caed.ufjfj.br

oficinasecursos@caed.ufjf.br