4ª Oficina temáticaAvaliação: o que fazemos?Avaliação: o que fazemos?

Avaliação de resultados, Avaliação de resultados, satisfação e impactosatisfação e impacto

Agenda

Manhã

Horário Atividades

8:30 às 9:00 Boas Vindas e abertura

9:00 às 10:00 Análise coletiva dos resultados dos formulários preenchidosAnálise e sugestões sobre indicadores de gestão de pessoas e serviços

10:00 às 10:15 Intervalo

10:15 às 11:15 Análise e sugestões sobre indicadores de gestão de pessoas e serviço: plenária

11:15 às 12:00 Refletindo sobre a avaliação de resultados

Tarde

Horário Atividades

13:30 às 14:00 Refletindo sobre avaliação de resultados (fechamento)

14:00 às 15:00 Considerações sobre avaliação de resultados, satisfação e impacto

15:00 às 16:00 Definindo o foco da avaliação e os indicadores

16:00 às 16:15 Intervalo

16:15 às 17:30 Partilha em grupos, plenária e fechamento

A transparência e a avaliaçãoResultados, satisfação e impacto

O que a palavra avaliação nos lembra ?

A visão tradicional da avaliação (Marino, 2003)

Avaliação é imposta de fora para dentroAvaliação como controleAvaliação é tarefa muito complexa, cara e tediosaOs resultados da avaliação poucas vezes são incorporados no planejamentoMedo de apresentar o que “não funcionou”Os resultados desse programa não são quantificáveis, por isso não podem ser avaliados

Mas então o que é avaliação?

“Coleta sistemática de informações sobre ações, características e os resultados de um programa e a identificação,

esclarecimento e aplicação de critérios, passíveis de serem defendidos publicamente, para determinar o valor (mérito e

relevância), a qualidade, a utilidade, a efetividade ou importância do programa sendo avaliado”

“A avaliação é um instrumento de aprendizado, melhoria de desempenho e prestação de contas aos diversos

interessados de um programa” (Worten, Sandres e Fitzpatrick, 1977)

Os princípos da avaliação de programas

(AEA, CES e AfrEA)

UTILIDADE: reponde aos interessados, tem credibilidade, possui informações relevantes, é clara, gera interesse, é disseminada.VIABILIDADE: de operacionalização, política e de custoPROPRIEDADE: é fruto de um acordo, respeita os indivíduos e as relações, é completa e justa, é responsávelPRECISÃO: possui documentação, descreve a metodologia, possui informações válidas e confiáveis, tem sistematização e é imparcial

Quando avaliar?

sistematização

avaliação

gestão

implementação

elaboraçãoda

intervenção

contexto

idéiasdecisões

enovas perguntas

Marco zeroDiagnóstico

SomativaResultados Formativa

Processo

ImpactoEfeitos

O que estamos interessados?

Tipo de avaliação

Pergunta chave Foco

Avaliação de satisfação

Os projetos/serviços atendem a necessidade dos usuários? Como eles percebem os projetos e serviços? Quais pontos fortes e fracos?

Processos

Eficiência

Avaliação de resultados

Os resultados previstos pelos projetos, serviços estão sendo cumpridos e atendem a missão da organização?

Resultados

Eficácia

Avaliação de impacto

Os resultados atingidos estão gerando mudança/transformação social? Quais os efeitos produzidos pela ação da organização?

Impactos dos projetos/

serviços e da organização

O que é necessário saber

Qual a missão da organização (direcionamento). Que necessidades atendemos, o que queremos transformar?Quais são os nossos programas, projetos e serviços?Quais são os seus principais objetivos? Para que foram criados?

Avaliação de satisfação

Qual o nível de satisfação dos beneficiários com os serviços e projetos da organização?

Quais indicadores são utilizados para medir essa satisfação?

Como eles são medidos?

Avaliação de resultados

Quais as principais mudanças (quantitativas e qualitativas) provocadas pelos projetos serviços da organização?

Quais os indicadores utilizados para medir essas mudanças?

Como eles são medidos?

Avaliação de impacto

Impacto dos projetos/serviços

Quais os efeitos (no longo prazo) dos projetos e serviços da organização?

Que indicadores são utilizados para medir esses efeitos?

Como eles são medidos?

Avaliação de impacto

Impacto socioambiental da organização

Quais os efeitos ambientais das atividades da organização?

- Insumos consumidos ou economizados (energia, água, materiais)- Resíduos produzidos ou reciclados- Impactos ambientais

Que indicadores são utilizados para medir esses efeitos?

Como eles são medidos?