Oficina de Apropriação de Resultados

Oficina de Apropriação de Resultados

IDEPB 2013

Oficina de Apropriação de Resultados de MATEMÁTICA

por Gabriela Leãoe-mail: [email protected]

Avaliando IDEPB

• Conhecendo o outro... Formação do grupo!

Avaliando IDEPB

Avaliando IDEPB

O Centro de Políticas Públicas e Avaliação da Educação (CAEd), da Universidade Federal de Juiz de Fora, é uma instituição que operacionaliza (elabora e desenvolve) programas estaduais e municipais destinados a mensurar o rendimento de estudantes das escolas públicas.

A instituição também cria e promove cursos de formação, qualificação e aprimoramento aos profissionais da Educação de diversos estados do Brasil. O CAEd oferece, ainda, apoio para o desenvolvimento de projetos educacionais promovidos por iniciativas privadas, a exemplo de algumas ações da Fundação Roberto Marinho, Instituto Unibanco e Fundação Oi Futuro.

Avaliando IDEPB

O CAEd está organizado em cinco unidades:

Pesquisa, Avaliação, Formação, Sistemas de Gestão e Administração.

O CAEd atua junto ao Governo Federal, Estados, Municípios, instituições e fundações na realização de avaliações de larga escala com a produção

de medidas de desempenho e na investigação de fatores intra e extraescolares associados ao desempenho.

O objetivo principal é oferecer dados e informações úteis capazes de subsidiar as ações de melhoria da qualidade da educação e

equidade nas oportunidades educacionais.

Avaliando IDEPB

OBJETIVOS DA OFICINAObjetivo geral

Analisar e interpretar resultados do IDEPB para (re)planejamento das ações pedagógicas implementadas em sala de aula, a serem definidas pelas unidades escolares envolvidas no processo de avaliação.

Avaliando IDEPB

Objetivos específicos

Apresentar a Matriz de Referência, analisando os descritores que norteiam a elaboração dos itens presentes nos testes de Matemática;

Apresentar e interpretar a Escala de Proficiência, considerando os agrupamentos de seus intervalos (Padrões de Desempenho Estudantil);

Analisar e interpretar pedagogicamente os resultados da avaliação de Matemática.

Avaliando IDEPB

O que é avaliar?

É refletir sobre uma determinada realidade a partir de dados e informações, e emitir um

julgamento que possibilite uma ação.

Em outras palavras a avaliação escolar é um componente do processo de ensino que visa, através da

verificação e qualificação dos resultados obtidos, determinar a correspondência destes com os objetivos

propostos e, daí, orientar a tomada de decisões em relação às atividades didáticas seguintes.

AVALIAÇÃO EDUCACIONAL EM LARGA ESCALA

• As avaliações em larga escala desempenham o importante papel de assegurar que o acesso à educação de qualidade seja acompanhado da garantia do direito a uma efetiva aprendizagem por parte dos estudantes de todos os níveis de ensino.

• As avaliações em larga escala usam, como instrumentos, testes de proficiência e questionários, que permitem avaliar o desempenho escolar e os fatores intra e extraescolares associados a esse desempenho.

Avaliando IDEPB

Avaliando IDEPB

Testes de Proficiência

Questionários Contextuais

Oferecer uma medida Desempenho Escolar

AVALIAÇÃO INTERNA E EXTERNAAvaliando IDEPB

Provas abertasProvas objetivas

Observação/RegistroPortfólio

TEORIA CLÁSSICA TEORIA DA RESPOSTAAO ITEM

Avaliação Interna/Escola

Processo da aprendizagem

AVALIAÇÃO EDUCACIONAL

Avaliação Externa/Sistemas

Testes de proficiência Questionários contextuais

Desempenho dos alunos

Fatores associados ao desempenho escolar

Avaliando IDEPB

Fatores Extraescolares

Fatores socioeconômicos

Fatores familiares

Fatores Intraescolares

Gestão e administração

Prática pedagógica

Condições de infraestrutura

Qualificação dos profissionaisFatores individuais

Sistema de Avaliação da Educação da Paraíba

• Edições:– 2012 e 2013

• Etapas avaliadas: – 5º e 9º do Ensino Fundamental– 3ª série do Ensino Médio

• Disciplinas avaliadas– Língua Portuguesa– Matemática

Avaliando IDEPB

MATRIZ DE REFERÊNCIA

Avaliando IDEPB

Características da Matriz de ReferênciaAvaliando IDEPB

Apresenta as habilidades definidas para serem avaliadas nos testes utilizados no IDEPB;

Garante legitimidade e transparência à avaliação;

A Matriz não esgota o conteúdo a ser trabalhado em sala de aula e, portanto, não pode ser confundida com o currículo, propostas curriculares, estratégias de ensino ou diretrizes pedagógicas;

Apresenta habilidades possíveis de aferir em um teste de múltipla escolha;

Avaliando IDEPB

É formada por um conjunto de tópicos ou temas;

Cada tema apresenta um conjunto de habilidades;

Cada habilidade é descrita por um descritor;

Os descritores apresentam as habilidades consideradas básicas e possíveis de serem aferidas por meio do instrumento utilizado em avaliações em larga escala.

Avaliando IDEPB

•Descreve cada uma

das habilidades

da Matriz

• Avalia apenas uma única habilidade

• Representa uma

subdivisão de acordo com o

conteúdo, competências

de área e habilidades.

• Agrupa as habilidades passíveis de avaliação em um teste de proficiência.

Matriz Tema Tópico

Descritor

Item

Da Matriz aos itens dos testes de proficiência

Avaliando IDEPB

Objetivos dos testes de proficiênciaAvaliando IDEPB

Os testes de proficiência têm como objetivo aferir habilidades que são esperadas dos alunos em diferentes

etapas de escolarização.

Os testes são compostos por itens.

Cada item avalia apenas uma habilidade da Matriz.

Essas habilidades são descritas por descritores.

ItemAvaliando IDEPB

Avalia uma única habilidade, portanto o item é unidimensional.

Obtêm um resultado por estudante, que permite avaliar as hipóteses levantadas por ele.

Na formulação de um item, deve-se considerar:

GRAU DE DIFICULDADE(diz respeito à adequação entre a formulação do item e a

capacidade de resposta do estudante)

DISCRIMINAÇÃO(capacidade de o item de distinguir estudantes com diferentes níveis de

habilidade)

ItemAvaliando IDEPB

DistratoresGabarito

Comando

Suporte

É o estímulo para que o aluno mobilize recursos para solucionar o problema apresentado.

Dado sob a forma de complementação ou de interrogação, deve estar atrelado à habilidade que se pretende avaliar

Devem ser plausíveis referindo-se a raciocínios possíveis

ObservaçãoAvaliando IDEPB

A Matriz de Referência não esgota o conteúdo a ser trabalhado em sala de aula e, portanto, não pode ser confundida com as diretrizes curriculares, estratégias de ensino ou diretrizes pedagógicas, pois um recorte é feito com base naquilo que pode ser aferido.

Referenciais Curriculares

Avaliando IDEPB

Matriz de Referência

Avaliando IDEPB

Diferenças Avaliando IDEPB

• A Matriz Curricular direciona o currículo de uma instituição de ensino, leva em conta as concepções de ensino e aprendizagem da área e apresenta: objetivos, conteúdos, metodologias e processos de avaliação.

• A Matriz de Referência de Avaliação também leva em conta as concepções de ensino e aprendizagem da área, mas é composta apenas por um conjunto delimitado de conhecimentos definidos em unidades denominadas de Descritores que, no caso da Matemática, estão agrupados por blocos de conteúdos.

Diferenças Avaliando IDEPB

• A Matriz Curricular é um documento prescritivo, que direciona o ensino, insere-se no Projeto Pedagógico da instituição e é construído coletivamente pela comunidade escolar, com base em orientações curriculares da área indicadas por órgãos oficiais e na realidade escolar.

• Matriz de Referência de Avaliação é um documento descritivo, no geral escrito por técnicos, e que leva em consideração documentos curriculares oficiais. É um “recorte” de uma Matriz Curricular que não direciona o ensino, mas que delimita o que vai ser avaliado na prova a ser realizada em um programa de avaliação em larga escala.

Matriz de Referência de Avaliação de MatemáticaTópicos/Tema

• I Geometria• II Grandezas e Medidas• III Números e Operações/ Álgebra e Funções• IV Estatística, Probabilidade e Combinatória

Avaliando IDEPB

Atividade – Matriz de Referência• Formação de grupos com 4 pessoas;• Atividade de cada grupo:

– descrever e distinguir os conteúdos trabalhados em cada um dos tópicos da disciplina (o grupo poderá relacionar conteúdos de modo geral, para todas as etapas de escolaridade, ou limitar apenas uma etapa avaliada pelo sistema);

• Discutir com os participantes da turma, os conteúdos apontados;

Avaliando IDEPB

Atividade – Matriz de Referência• Cada grupo ficará responsável por um tópico da disciplina

• dividir os tópicos entre os grupos, sendo que pelo número de grupos, possivelmente, os tópicos serão repetidos);

• Atividade de cada grupo:• discutir os conteúdos matemáticos do tópico selecionado;• desenvolver uma atividade para sala de aula, com base em

um dos conteúdos apresentados;• Entregar a Matriz de Referência;

Avaliando IDEPB

Atividade – Matriz de Referência• Atividade de cada grupo:

• Associar os conteúdos das atividades com os descritores da matriz;

• Quais os conteúdos abordados na atividade?• Quais deles estão presentes na matriz?• Quais desses conteúdos não estão presentes na matriz?

Apresente possíveis motivos para esses conteúdos não serem avaliados pelo sistema.

• Cada grupo apresentará sua atividade, apontando os conteúdos trabalhados e associando com o currículo e os descritores da matriz;

Avaliando IDEPB

Atividades e ItensAvaliando IDEPB

Avaliando IDEPB

Avaliando IDEPB









• Atividades podem apresentar o desenvolvimento de diversas habilidades;

• O item avalia apenas uma habilidade;• Atividades são desenvolvidas com base em

diversos instrumentos e recursos didáticos;• O item é, geralmente, desenvolvido por meio

de questões de múltipla escolha;

Matriz de Referência• Apresenta habilidades que estão no currículo;• Podem apresentar descrições de habilidades

diferentes do que está apresentado no currículo, mas relacionado ao mesmo conteúdo;

• Apresenta habilidades possíveis de aferir em um teste de múltipla escolha;

Avaliando IDEPB

Resultado• Apresentaremos, a seguir, o percentual de

acerto por descritor para cada etapa de escolaridade:– Para cada descritor, temos o percentual de itens

que os alunos responderam corretamente no teste;

• Este resultado representa os dados gerais do projeto no 5º EF, 9º EF e 3º EM;

Avaliando IDEPB

5º EF - 2013Avaliando IDEPB

9º EF - 2013Avaliando IDEPB

3º EM - 2013Avaliando IDEPB

3º EM - 2013Avaliando IDEPB

EXEMPLOS DE ITENS POR DESCRITOR

5º ANO

Avaliando IDEPB

Avaliando IDEPBI. GeometriaD1 – Identificar a localização/movimentação de objetos em mapas,croquis e outras representações gráficas

Avaliando IDEPBII. Grandezas e MedidasD8 – Resolver problemas significativos utilizando unidades de medidaspadronizadas como km/m/cm/mm, kg/g/mg, L/ml.

Avaliando IDEPBII. Grandezas e MedidasD11 – Resolver problema envolvendo o cálculo do perímetro de figuras planas, desenhadas em malhas quadriculadas ou não.

Avaliando IDEPBIII. Números e Operações/ Álgebra e FunçõesD15 – Reconhecer a decomposição de números naturais na retanumérica

Avaliando IDEPBIII. Números e Operações/Álgebra e FunçõesD20 – Identificar diferentes representações de um mesmo número racional

Avaliando IDEPB

III. Números e Operações/Álgebra e FunçõesD24 – Resolver problema envolvendo noções de porcentagem (25%,50% e 100%)

Avaliando IDEPBIV. Estatística, Probabilidade e CombinatóriaD26 – Ler informações e dados apresentados em gráficos (particularmente em gráficos de colunas)


9º ANO

Avaliando IDEPB

Avaliando IDEPBI. GeometriaD10 – Reconhecer problemas utilizando razões trigonométricas no triângulo retângulo

Avaliando IDEPBII. Grandezas e medidasD12 – Resolver problema envolvendo o perímetro de figuras planas

Avaliando IDEPBIII. Números e Operações/ Álgebra e FunçõesD23 – Resolver problemas utilizando frações equivalentes

Avaliando IDEPBIV. Estatística, Probabilidade e CombinatóriaD37 – Resolver problema envolvendo informações apresentadas em

tabelas e/ou gráficos


3º ANO

Avaliando IDEPB

Avaliando IDEPBI. GeometriaD7 – Interpretar geometricamente os coeficientes da equação de umareta

Avaliando IDEPB

II. Grandezas e Medidas D11 – Resolver problema envolvendo perímetro de figuras planas

Avaliando IDEPBIII. Números e Operações/Álgebra e Funções D23 – Reconhecer a representação algébrica de uma função do 1º graudado o seu gráfico ou vice-versa

Avaliando IDEPBIV. Estatística, Probabilidade e Combinatória D32 – Resolver problema que envolva probabilidade de um evento

ESCALA DE PROFICIÊNCIA

Avaliando IDEPB

Escala de ProficiênciaFoi desenvolvida com o objetivo de traduzir medidas em diagnósticos qualitativos do desempenho escolar. Ela orienta, por exemplo, o trabalho do professor com relação as competências que seus estudantes desenvolveram, apresentando os resultados em uma espécie de régua na qual os valores obtidos são ordenados e categorizados em intervalos ou faixas que indicam o grau de desenvolvimento das habilidades para os estudantes que alcançaram determinado nível de desempenho.

Avaliando IDEPB

Escala de ProficiênciaOs estudantes que alcançaram um nível mais alto daEscala, por exemplo, mostram que possuem o domíniodas habilidades presentes nos níveis anteriores. Isso significa que o estudante da última série do Ensino Médio deve, naturalmente ser capaz de dominar habilidades em um nível mais complexo do que as de um estudante do 5º ano do Ensino Fundamental.

Avaliando IDEPB

Escala de Proficiência• Principais elementos da Escala de Proficiência

– Domínio– Competências– Régua numerada: proficiência– Níveis de proficiência– Gradação de cores: graus de dificuldade da

competência

Avaliando IDEPB

Atividade – Escala de Proficiência• Dividir a turma em grupos com 4 pessoas;• Entregar cada bloco de competências para os grupos;• Atividade de cada grupo:

– Discutir e associar o desenvolvimento de cada competência;

• Apresentar o gabarito e esclarecer possíveis dúvidas;• Entregar a escala de proficiência;

Avaliando IDEPB

Avaliando IDEPB

Avaliando IDEPB

Na primeira coluna são apresentados os grandes

domínios do conhecimento. Esses

domínios por sua vez são agrupamentos de

competências que, por sua vez, agregam as habilidades

presentes na Matriz de Referência de Matemática.

Avaliando IDEPB

Avaliando IDEPB

Avaliando IDEPB

Avaliando IDEPBIdentificam a

movimentação de objetos e pessoas

em mapas e croquis.

Identificam objeto localizado

dentro/fora, na frente/atrás

Dada uma trajetória entre duas localidades

no mapa, identifica a descrição textual que

representa esse deslocamento.

Realiza atividade de localização utilizando

sistema de coordenadas em um

plano cartesiano.

Localizam figuras geométricas por meio das coordenadas cartesianas de seus vértices utilizando

nomenclatura abscissa/ordenada..

Os alunos ainda não desenvolveram as

habilidades relacionadas a essa

competência.

Leitura na Escala de ProficiênciaAvaliando IBEPB

Leitura Horizontal: podemos ver os níveis de consolidação de cada competência avaliada, diferenciados pela gradação de cores.

Leitura Vertical: conseguimos através de uma determinada proficiência, identificar em que nível de consolidação se encontra cada uma das competências avaliadas, bem como a qual padrão de desempenho equivalente àquela proficiência.

PADRÕES DE DESEMPENHO

Avaliando IDEPB

Padrões de DesempenhoAvaliando IDEPB

Indicam o grau de cumprimento dos objetivos educacionais considerados essenciais e expressos na MATRIZ DE REFERÊNCIA para avaliação, bem como as metas de desempenho a serem alcançadas.

Os testes feitos pelos estudantes trazem uma medida de seu desempenho nas HABILIDADES avaliadas que é denominada PROFICIÊNCIA e organizada em uma Escala para fins de análise. Os Padrões apresentam uma caracterização das COMPETÊNCIAS e HABILIDADES cognitivas desenvolvidas pelos estudantes em importantes pontos da ESCALA DE PROFICIÊNCIA.


São categorias definidas a partir de cortes numéricos que agrupam os níveis da Escala de Proficiência, com base nas metas educacionais

estabelecidas pelo IDEPB. Esses cortes dão origem a quatro Padrões de Desempenho – Abaixo do básico, Básico, Adequado e Avançado,

os quais apresentam o perfil de desempenho dos estudantes.



Cortes dos Padrões de Desempenho de Matemática

• 5º ano do Ensino Fundamental– ABAIXO DO BÁSICO - Até 150 – BÁSICO - 150 a 200 – ADEQUADO - 200 a 250 – AVANÇADO - Acima de 250

Avaliando IDEPB

Marcar os pontos de corte na escala


• 9º ano do Ensino Fundamental– ABAIXO DO BÁSICO - Até 225 – BÁSICO - 225 a 275 – ADEQUADO - 275 a 325 – AVANÇADO - Acima de 325

Avaliando IDEPB



• 3ª série do Ensino Médio– ABAIXO DO BÁSICO - Até 250 – BÁSICO - 250 a 300 – ADEQUADO - 300 a 350 – AVANÇADO - Acima de 350

Avaliando IDEPB


Abaixo do Básico – 9º anoAvaliando IDEPB

Exemplos de itens por padrão de desempenho

Avaliando IDEPB

Abaixo do Básico

Avaliando IDEPB

5º anoAvaliando IDEPB



Básico

Avaliando IDEPB




Adequado

Avaliando IDEPB




Avançado

Avaliando IDEPB




RESULTADOS

Avaliando IDEPB

Resultados• PROFICIÊNCIA MÉDIA Apresenta a proficiência média da escola. Você pode comparar a proficiência com as médias da Paraíba, da sua Gerência Regional de Educação (GRE) e do seu município. O objetivo é proporcionar uma visão dasproficiências médias e posicionar sua escola em relação a essas médias.

Avaliando IDEPB

Resultados• PARTICIPAÇÃOInforma o número estimado de estudantes para a realização do teste e quantos, efetivamente, participaram da avaliação no estado, na sua GRE, noseu município e na sua escola.

Avaliando IDEPB

Resultados• PERCENTUAL DE ESTUDANTES POR PADRÃO DE

DESEMPENHOPermite que você acompanhe o percentual de estudantes distribuídos por Padrões de Desempenhona avaliação realizada pelo estado.

Avaliando IDEPB

Resultados• PERCENTUAL DE ESTUDANTES POR NÍVEL DEPROFICIÊNCIA E PADRÃO DE DESEMPENHOApresenta a distribuição dos estudantes ao longo dos intervalos de proficiência no estado, na GRE e na suaescola. Os gráficos permitem que você identifique o percentual de estudantes para cada nível de proficiência em cada um dos Padrões de Desempenho.Isso será fundamental para planejar intervenções pedagógicas, voltadas à melhoria do processo deensino e promoção da equidade escolar.

Avaliando IDEPB

Resultados

Avaliando IDEPB

Resultados disponíveis no Portal da Avaliação

• Percentual de acerto por descritor• Resultados por estudante

Avaliando IDEPB

Resultados

Avaliando IDEPB

Resultados• Entregar resultados para os grupos;Comparar os resultados de 2012 e 2013 em uma mesma escola. • O que podemos notar ao observar a proficiência

média dos estudantes nas avaliações desses dois ciclos?

• E em relação ao percentual de alunos em cada padrão de desempenho nesses dois ciclos? Encontramos diferenças? Quais seriam?

Avaliando IDEPB

Avaliando IBEPBEscola 5º anoParaíba 5º ano

ResultadosObserve a participação dos estudantes na escola.• Qual seria o percentual de participação na avaliação aplicada

na escola? Este percentual é significativo?• Em relação à participação, o número de alunos avaliados

corresponde ao número de alunos que frequentam a escola?• Quem são os alunos que não fizeram a avaliação?

• Como possibilitar a participação desses alunos nas próximas avaliações?

• Como melhorar a frequência desses alunos na escola?

Avaliando IDEPB

ResultadosObserve a proficiência média da sua escola em cada etapa de escolaridade• O que podemos observar ao associar a proficiência média aos

padrões de desempenho em cada etapa?• Quais são as habilidades desenvolvidas pelos alunos em cada

etapa de escolaridade, considerando o resultado da proficiência média?

• Quais seriam os conhecimentos mínimos esperados em cada etapa de escolaridade? (quais as habilidades que os alunos ainda não desenvolveram?)

Avaliando IDEPB

Utilização dos resultadosAvaliando IDEPB

Gestores Professores Estudantes


Gestores

REDE

ESCOLA

Planejamento e execução de políticas públicas.

Criação de metas de qualidade e equidade educacionais.

Implementação de medidas de responsabilização.

Políticas de incentivos diretos ou indiretos. Ações de formação continuada de

professores .

Elaboração do projeto da escola. Monitoramento da qualidade de ensino . Subsídio para avaliação institucional.


Professores Intervenção pedagógica. Elaboração de projetos especiais. Foco nos estudantes com dificuldades. Ações de recuperação escolar. Planejamento das ações de sala de aula. Visão proativa quanto ao desenvolvimento

de habilidades e competências ao longo da educação básica.


Estudantes Acompanhamento individual do desempenho

escolar pelos estudantes e seus familiares.

Informações sobre a qualidade dos serviços educacionais oferecidos .

OBRIGADA PELA ATENÇÃO!

Gabriela Leão

Avaliando IDEPB

Documents

Oficina de Apropriação de Resultados