CICLO DE MDS - UFRGS · Título Convênio UFRGS - FEENG: ECO/CEGOV/ ADM.PÚBLICA FEDERAL Protocolo Proc. Convênio UFRGS – FEENG: 23078.038272/12-82 Data da Assinatura do Convênio

CICLO DE CAPACITAÇÃO

MDS

Termo de Cooperação 001/2013 Ciclo de Capacitação em Conceitos e Técnicas Para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas Sociais e Ações do MDS

RELATÓRIO DE EXECUÇÃO DO CURSO EM CONCEITOS E TÉCNICAS PARA AVALIAÇÃO DE PROGRAMAS

Campus do Vale - Prédio 43322 - Av. Bento Gonçalves, 9500 Porto Alegre - RS - 91509-900 - Phone: + 55 51 3308.9860

IP Videoconference CEGOV 143.54.129.46cegov.ufrgs.br



Universidade Federal do Rio Grande do Sul (UFR-GS)

O Centro de Estudos Internacionais sobre Gover-no (CEGOV) da Universidade Federal do Rio Grande do Sul (UFRGS) realiza estudos e pesquisas sobre a ação governamental, a partir de uma perspetiva comparada. O Centro reúne pesquisadores de distintas áreas da Uni-versidade e diversos núcleos de pesquisa tradicionais da UFRGS.

Reitor da UFRGSCarlos Alexandre Netto

Vice-Reitor da UFRGSRui Vicente Oppermann

Diretor do CEGOVMarco Cepik

Vice-Diretor do CEGOVGustavo Grohmann

Grupo de Trabalho do CEGOVAvaliação de Políticas Públicas

Coordenador do Grupo de TrabalhoLígia Mori Madeira

Centro de Estudos Internacionais sobre GovernoCampus do Vale, Prédio 43322 Av. Bento Gonçalves, 9500Porto Alegre - RS, Brasil, CEP 91509-900Tel:+55 51 3308-9860http://www.ufrgs.br/cegov/

Relatório do Curso de Indicadores para Diagnóstico do SUAS e do Plano Brasil sem Miséria Termo de Cooperação UFRGS-MDS 01/2013

Equipe Técnica CEGOV Aline Gazola Hellmann, Ana Carolina Ribeiro Ribeiro, Ana Julia Bonzanini Bernardi, Bruno Quevedo Sivelli, Gabriela Perin, Gianna Vargas Reis Salgado Dias, Giordano Benites Tronco, João Marcelo Conte Cornetet, Júlia da Motta, Thiago Borne Ferreira.

Projeto gráfico e diagramação Joana Oliveira de Oliveira, Liza Bastos Bischoff, Luiza Allgayer, Marina de Moraes Alvarez, Simone Rodrigues da Silva

Termo de Cooperação MDS-UFRGS 001/2013 Processo MDS nº 23078.038272/12-82 Título: CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓS-TICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDSUnidade Administrativa Responsável: Secretaria Avaliação e Gestão da InformaçãoUG/Gestão Repassadora: 550010/55000 – MDSUG/Gestão Recebedora: 153114/15235 – UFRGSData da Assinatura: 23/11/2012Data da Liberação do Crédito da primeira parcela no SIAFI: 16/05/2013Vigência do Termo Cooperação: 36 MESES

Convênio UFRGS-FEENG 027/2013

Título Convênio UFRGS - FEENG: ECO/CEGOV/ADM.PÚBLICA FEDERAL Protocolo Proc. Convênio UFRGS – FEENG: 23078.038272/12-82Data da Assinatura do Convênio UFRGS – FEENG: 30/07/2013 Vigência do Convênio UFRGS – FEENG: 30/07/2013 a 30/07/2015Protocolo Proc. tramitação recursos financeiros: 23078.038272/12-82Nome PROPLAN - CGPOF 24/12 PlanejamentoCódigo do Projeto: FAURGS: 6848-9Portal SICONV n. 783287/2013

RESUMO EXECUTIVO

RESUMO EDIÇÃO PILOTO (MDS07)

RESUMO EDIÇÃO REGULAR (MDS08)

RESUMO EDIÇÃO AVULSA (MDS09)

PROJETO PEDAGÓGICO

INSCRIÇÕES

6.1 PERFIL DOS SELECIONADOS

RESULTADOS DA EDIÇÃO PILOTO (MDS07)

RESULTADOS DA EDIÇÃO REGULAR (MDS08)

RESULTADOS DA EDIÇÃO AVULSA (MDS09)

AVALIAÇÃO DO CURSO EM CONCEITO E TÉCNICAS PARA AVALIAÇÃO DE PROGRAMAS

10.1 AVALIAÇÃO DA EDIÇÃO MDS0710.2 AVALIAÇÃO DA EDIÇÃO MDS0810.3 AVALIAÇÃO DA EDIÇÃO MDS09

DEPOIMENTOS

01

SUMÁRIO

0203040506

07080910

1 1

09

11

12

13

14

18

19

26

29

32

35

35

43

50

56

CONSIDERAÇÕES FINAIS

ANEXOSANEXO I - FICHA DE INSCRIÇÃO DO CURSO DE AVALIAÇÃO (MDS09) ANEXO II - EXERCÍCIOS DE FIXAÇÃO DO CURSO DE AVALIAÇÃO ANEXO III - QUESTÕES DOS FÓRUNS DO CURSO DE AVALIAÇÃO ANEXO IV - AVALIAÇÃO DE REAÇÃO DO CURSO DE AVALIAÇÃO

1213

63

65

65

72

88

90

LISTA DE FIGURASFigura 1 - Números das edições MDS07, MDS08 e MDS09 do curso de Avaliação

Figura 2 - Cronograma propositivo

Figura 3 - Carga horária do curso

Figura 4 - Conteúdo do curso

Figura 5 - Evolução do curso: exercícios, avaliações e certificação

Figura 6 - Certificado do Curso de Avaliação

Figura 7 - Panorama do Curso de Avaliação (Edição MDS07)



LISTA DE QUADROSQuadro 1 - Avaliação da estrutura do Curso de Avaliação MDS07 Quadro 2 - Avaliação da estrutura do Curso de Avaliação MDS08 Quadro 3 - Avaliação da estrutura do Curso de Avaliação MDS09

LISTA DE GRÁFICOSGráfico 1 - Participação do aluno em outros ciclos de capacitação Gráfico 2 - Frequência do sexo dos selecionados para edição MDS09 Gráfico 3 - Número de selecionados para o Curso de Avaliação MDS09 por estado Gráfico 4 - O aluno possui alguma deficiência? Gráfico 5 - Qual deficiência? Gráfico 6 - Nível de formação dos selecionados para o curso MDS09 Gráfico 7 - Formação dos selecionados para o curso MDS09 Gráfico 8 - Experiência com M&A dos selecionados Gráfico 9 - Maior dificuldade para realizar M&A Gráfico 10 - Presença do setor de M&A na instituição em que trabalham os selecionados para o Curso de Avaliação MDS09 Gráfico 11 - Formação complementar dos selecionados para o curso de avaliação MDS09Gráfico 12 - O aluno está cadastrado no CADSUAS

10

14

15

16

16

17

27

30

33

384653

1919

202121222223

23

2424

20

Gráfico 13 - Profissão do aluno selecionado para o Curso de Avaliação MDS09 Gráfico 14 - Formas por meio dos quais os alunos tomaram conhecimento do Curso de Avaliação MDS09 Gráfico 15 - Número de atividades realizadas semanalmente pelos alunos (Edição MDS07)Gráfico 16 - Participação no Curso de Avaliação (Edição MDS07) Gráfico 17 - Números de alunos que realizaram as atividades do Curso de Avaliação e nota média obtida pelos participantes (Edição MDS07) Gráfico 18 - Número de atividades realizadas semanalmente pelos alunos (Edição MDS08)Gráfico 19 - Participação no Curso de Avaliação (Edição MDS08) Gráfico 20 - Números de alunos que realizaram as atividades do Curso de Avaliação e nota média obtida pelos participantes (Edição MDS08) Gráfico 21 - Número de atividades realizadas semanalmente pelos alunos (Edição MDS09)Gráfico 22 - Participação no Curso de Avaliação (Edição MDS09) Gráfico 23 - Números de alunos que realizaram as atividades do Curso de Avaliação e nota média obtida pelos participantes (Edição MDS09) Gráfico 24 - Grau de instrução dos alunos concluintes da edição MDS07 Gráfico 25 - - Avaliação dos recursos da edição MDS07 Gráfico 26 - Participação nos fóruns na edição MDS07 Gráfico 27 - Os fóruns da edição MDS07 contribuíram para promover diálogo e troca de experiências? Gráfico 28 - Avaliação das aulas da edição MDS07 Gráfico 29 - Frequência com que os alunos utilizaram os recursos da edição MDS07 Gráfico 30 - Avaliação de pertinência da edição MDS07 Gráfico 31 - Avaliação geral da edição MDS07 Gráfico 32 - Houve sequência lógica na divisão do conteúdo dos cursos? Gráfico 33 - Faltou ser abordado algum conteúdo importante no Ciclo de Capacitação?Gráfico 34 - Avaliação geral do Ciclo de Capacitação Gráfico 35 - Você utilizou os conhecimentos adquiridos na etapa anterior do Ciclo de Capacitação?Gráfico 36 - Grau de instrução dos alunos concluintes da edição MDS08Gráfico 37 - Avaliação dos recursos da edição MDS08Gráfico 38 - Participação nos fóruns na edição MDS08Gráfico 39 - Os fóruns da edição MDS08 contribuíram para promover diálogo e troca de experiências? Gráfico 40 - Avaliação das aulas da edição MDS08 Gráfico 41 - Frequência com que os alunos utilizaram os recursos da edição MDS08 Gráfico 42 - Avaliação de pertinência da edição MDS08Gráfico 43 - Avaliação geral da edição MDS08Gráfico 44 - Houve sequência lógica na divisão do conteúdo dos cursos?Gráfico 45 - Faltou ser abordado algum conteúdo importante no Ciclo de Capacitação?Gráfico 46 - Avaliação geral do Ciclo de CapacitaçãoGráfico 47 - Você utilizou os conhecimentos adquiridos na etapa anterior do Ciclo de Capacitação?Gráfico 48 - Grau de instrução dos alunos concluintes da edição MDS09Gráfico 49 - Avaliação dos recursos da edição MDS09Gráfico 50 - Participação nos fóruns na edição MDS09Gráfico 51 - Os fóruns da edição MDS09 contribuíram para promover diálogo e troca de experiências? Gráfico 52 - Avaliação das aulas da edição MDS09Gráfico 53 - Frequência com que os alunos utilizaram os recursos da edição MDS09Gráfico 54 - Avaliação de pertinência da edição MDS09Gráfico 55 - Avaliação geral da edição MDS09

252627

282930

313233

34363737

3839394040414142

42434444

4546464747484849

49505152

5253545455

25

09CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

RESUMO EXECUTIVO

O Ciclo de Capacitação em Conceitos e Técnicas para Elaboração de Diag-nósticos, Monitoramento e Avaliação de Programas e Ações do MDS é um pro-grama de capacitação para trabalhadores do Sistema Único da Assistência Social (SUAS). O projeto, idealizado pela Secretaria de Avaliação e Gestão da Informação (SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe-cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV), da Universidade Federal do Rio Grande do Sul (UFRGS), prevê a oferta de três cursos de extensão na modalidade de Ensino a Distância, a saber:

• Curso de Indicadores para Diagnóstico dos programas do SUAS e do Plano Brasil sem Miséria

• Curso em Conceitos e Instrumentos para Monitoramento de Progra-mas

• Curso em Conceitos e Técnicas para Avaliação de Programas

Este documento apresenta os resultados da implementação do curso 03 – Conceitos e Técnicas para Avaliação de Programas, em suas edições piloto, regular e avulsa (ofertada separadamente do Ciclo), cujos objetivos foram introduzir os principais conceitos acerca do tema e capacitar o gestor para uma leitura qualifi-cada das pesquisas de avaliação feitas pela SAGI. O curso está dividido em quatro aulas: 1) Introdução à pesquisa de avaliação de Programas; 2) Delineamento de pesquisa; 3) Métodos e técnicas para coleta de dados; e 4) Análise, apresentação e disseminação dos resultados.

A execução desta etapa do projeto foi dividida em duas fases. A primeira tratou da elaboração do material instrucional, que inclui os seguintes itens: Ca-derno de Estudos, Guia do Aluno, seleção de textos e de vídeos de apoio e com-plementares, textos e exercícios obrigatórios, glossário, exercícios de fixação, Avaliação Final, questões de debate nos fóruns. Em seguida, os materiais foram configurados e disponibilizados no Ambiente Virtual de Aprendizagem (AVA). A segunda fase consistiu na execução do curso propriamente dito. Nas edições piloto e regular, os alunos que concluíram com êxito a etapa anterior do Ciclo (Curso de Monitoramento) foram automaticamente inscritos no Curso de Avalia-ção. Para o curso avulso foram abertas novas inscrições, sem pré-requisitos para cursar. No total, foram 7291 inscritos nas três edições.

Para a contagem dos alunos, são usadas, neste relatório, três categorias principais:

(1) alunos evadidos: alunos que nunca acessaram a Plataforma AVA;

(2) alunos desistentes: alunos que não acessaram a Plataforma AVA no último mês e que não fizeram a avaliação final;

(3) alunos cursantes: alunos selecionados - (alunos evadidos + alunos de-sistentes).

01

10 CEGOV

Além dessas categorias, entre os alunos cursantes, são usadas outras quatro de registro:

(3.1) alunos concluintes: alunos que realizaram todas as atividades, inde-pendentemente do aproveitamento final obtido;

(3.2) alunos aptos a receber certificado: alunos que realizaram todas as atividades e que obtiveram aproveitamento igual ou superior a 60%;

(3.3) alunos reprovados: alunos que realizaram todas as atividades, mas não que obtiveram aproveitamento suficiente para certificação;

(3.4) alunos não concluintes: alunos que acompanharam o curso, porém não realizaram a avaliação final.

Ao final, as três edições do Curso em Conceitos e Técnicas para Avaliação de Programas contaram com 4497 alunos cursantes, dos quais 2301 foram certi-ficados, conforme demonstra a Figura 01.

Figura 1 - Números das edições MDS07, MDS08 e MDS09 do curso de Avaliação

7291 4497 2301

SELECIONADOS CURSANTES CERTIFICADOS

Fonte: Elaboração própria.

Entre os desafios relacionados à implementação do curso, destacam-se tornar acessível um conteúdo complexo, como é o caso de indicadores sociais e modelo lógico; mobilizar a academia para um tema pouco explorado fora da gestão pública, como o M&A de programas; a evasão dos alunos; encontrar uma fórmula satisfatória de atuação dos tutores em um curso elaborado para ser auto instru-cional. O sucesso dos cursos foi medido por meio da razão entre a quantidade de alunos certificados pela quantidade de alunos cursantes, denominada como taxa de sucesso do curso, cujo resultado médio das três edições foi de 51,17%. A taxa de sucesso é demonstrativa do bom resultado da ação de qualificação, compro-vando a importância de ter sido aberta uma nova edição do Ciclo de Capacitação.


RESUMO EDIÇÃO PILOTO (MDS07)

Título do curso: Curso em Conceitos e Técnicas para Avaliação de Programas

Edição: Edição Avulsa MDS07

Período: 04 de fevereiro a 02 de março de 2015.

Local: AVA Moodle CEGOV (https://moodle.cegov.ufrgs.br/)

Formato: tutoria

Carga horária: 32 horas-aula

Coordenação da Equipe CEGOV: Aline Gazola Hellmann

Equipe: Ana Carolina Ribeiro Ribeiro, Ana Julia Bonzanini Bernardi, Bruno Quevedo Sivelli, Gabriel Thier, Gabriela Perin, Gianna Vargas Reis Salgado Dias, Giordano Tronco, Gustavo Margarites, João Marcelo Cornetet, Júlia da Motta, Luciana Leite Lima, Marília Patta Ramos e Thiago Borne Ferreira.

Total de alunos selecionados: 103Total de alunos cursantes: 70Total de alunos concluintes: 46Total de alunos aptos a receber certificado: 35Taxa de sucesso do curso (certificados/cursantes): 50%Avaliação geral do curso: 98,04% dos alunos que responderam a Avaliação do Curso julgaram o curso como “bom” ou “muito bom”. Foram encontradas poucas dificuldades técnicas e o conteúdo e recursos das aulas foram bem avaliados.

Considerações: Todos os recursos da edição MDS07 foram considerados per-feitamente adequados pela maior parte dos alunos concluintes. Apenas duas ca-tegorias ficaram ligeiramente abaixo dos 70% de aceitação total: “Ícones” e “Na-vegação”. Ainda assim, nenhum dos recursos recebeu mais de 2,3% de avaliações ruins.

02

CEGOV 12

RESUMO EDIÇÃOREGULAR (MDS08)


Edição: Edição Regular MDS08

Período: 30 de março de 2015 à 7 de maio de 2015.


Formato: tutoria



Equipe: Ana Carolina Ribeiro Ribeiro, Ana Julia Bonzanini Bernardi, Bruno Quevedo Sivelli, Gabriel Thier, Gabriela Perin, Gianna Vargas Reis Salgado Dias, Giordano Tronco, Gustavo Margarites, João Marcelo Cornetet, Júlia da Motta, Luciana Leite Lima, Marília Patta Ramos e Thiago Borne Ferreira.

Total de alunos selecionados: 2.839Total de alunos cursantes: 1913Total de alunos concluintes: 1.359Total de alunos aptos a receber certificado: 1.218Taxa de sucesso do curso (certificados/cursantes): 63,67%Avaliação geral do curso: 96,89% dos alunos que responderam a Avaliação do Curso julgaram o curso como “bom” ou “muito bom”. Foram encontradas poucas dificuldades técnicas e o conteúdo e recursos das aulas foram bem avaliados.

Considerações: Com relação aos recursos da edição MDS08, todos foram consi-derados perfeitamente adequados pela maior parte dos alunos concluintes. Ape-nas uma categoria (Ícones) ficou ligeiramente abaixo dos 70% de aceitação total. Ainda assim, nenhum dos recursos recebeu mais de 1,6% de avaliações ruins.

03

13ESTUDOS E PESQUISAS EM ECONOMIA CRIATIVA

RESUMO EDIÇÃO AVULSA (MDS09)


Edição: Edição Avulsa MDS09

Período: 11 de maio à 18 de junho de 2015.


Formato: tutoria



Equipe: Equipe técnica: Ana Carolina Ribeiro Ribeiro, Ana Julia Bonzanini Ber-nardi, Bruno Quevedo Sivelli, Gabriel Thier, Gabriela Perin, Gianna Vargas Reis Salgado Dias, Giordano Tronco, João Marcelo Cornetet, Júlia da Motta, Marília Patta Ramos e Thiago Borne Ferreira.

Total de alunos selecionados: 4.349Total de alunos cursantes: 2.514Total de alunos concluintes: 1.223Total de alunos aptos a receber certificado: 1.048Taxa de sucesso do curso (certificados/cursantes): 41,69%Avaliação geral do curso: 97,18% dos 1098 alunos que responderam a Avaliação do Curso julgaram o curso como “bom” ou “muito bom”. Foram encontradas pou-cas dificuldades técnicas e o conteúdo e recursos das aulas foram bem avaliados.

Considerações: Todos os recursos da edição MDS08 foram considerados per-feitamente adequados pela maior parte dos alunos concluintes. Ícones, Navega-ção, e Velocidade de Resposta foram os três recursos com maior porcentagem de avaliações negativas (todos em torno de 3%); mesmo assim, o número é baixo se comparado com a porcentagem de aprovação, que ultrapassou 96% em todos eles.

04

14 CEGOV

PROJETO PEDAGÓGICO

Título do curso: Curso de Conceitos e Instrumentos para Avaliação de Programas.

Carga horária: 32 horas-aula, calculadas tendo como base 5 minutos de leitura por lauda do Caderno de Estudos e textos de apoio, somados aos minutos de vi-sualização mínima de vídeos.

Objetivos: Introduzir os principais conceitos acerca do tema e capacitar o gestor para uma leitura qualificada das pesquisas de avaliação feitas pela SAGI.

Público-alvo: gestores e técnicos estaduais e municipais da assistência social.

Organização do tempo e do espaço: o curso é desenvolvido na modalidade Educação a Distância (EAD) através da Plataforma Moodle Institucional do CE-GOV, onde o próprio aluno define o momento em que poderá acessar a Platafor-ma e realizar os estudos, exercícios e avaliações. Considera-se que a duração de 32 dias seja suficiente para a realização dos estudos e avaliações propostas no curso. Para isso, é importante destinar pelo menos 1 hora por dia de estudo, em média.

Cronograma propositivo: depois do primeiro acesso ao curso, o gestor teria o prazo de 32 dias corridos (5 semanas) para finalizar os oito exercícios, a avaliação final e a avaliação de reação do curso. Isso significa a dedicação de pelo menos uma hora por dia. No Guia do Aluno, foi apresentado aos alunos uma proposta de cronograma de estudos (Figura 02).

05

Figura 2 - Cronograma propositivo


Segunda-feira Terça-feira Quarta-feira Quinta-feira Sexta-feira Sábado Domingo

SEMANA 1

SEMANA 2

SEMANA 3

SEMANA 4

SEMANA 5

AULA 1 AULA 1 AULA 1 AULA 1 AULA 1 AULA 1 AULA 1




AVALIAÇÃO FINAL

AVALIAÇÃO FINAL

AVALIAÇÃO FINAL

AVALIAÇÃO FINAL


20horas

10horas

2horas

VIDEOTECAEXERCÍCIOS

CADERNO DE ESTUDOSleia

+

AVALIAÇÃO FINAL

1aula

2 3 4aula aula aula

MÓDULO 2INTRODUÇÃO AVALIAÇÃOMÓDULO 1

FÓRUNS

1aula

2

3

4

aula

aula

aula

Introdução à pesquisa de avaliação de Programas

Desenho de pesquisa

Métodos e técnicas para coleta e análise de dados

Apresentação e disseminação dos resultados

aula temamódulo

MÓDULO 1: Fundamentos da avaliação de programas

MÓDULO 2: Apresentação de resultados e exemplos da SAGI

leituraobrigatória

Formato do curso: todas as edições foram tutoreadas.

Estratégias pedagógicas: o curso está organizado em módulos, e estes dividi-dos em aulas. Uma aula compreende o respectivo conteúdo e um exercício. Ao concluir todos os módulos, o aluno participará de uma Avaliação Final sobre to-dos os temas abordados no curso. Os conteúdos serão desenvolvidos através de vídeos, textos obrigatórios e materiais de apoio. Os exercícios e a Avaliação final são compostos por questões de múltipla escolha. A leitura do curso compreende:

• As leituras do Caderno de Estudos, a visualização dos vídeos, a par-ticipação;

• Nos fóruns e a realização dos exercícios de fixação das aulas (20h);

• A leitura dos textos complementares do “Leia Mais”, selecionados conforme o interesse do aluno, e de um Texto Obrigatório por aula, indi-cado na plataforma (10h);

• A realização da avaliação final (2h).

Figura 3 - Carga horária do curso


Estratégia de apresentação do conteúdo: Cada aula é composta por um texto base – o Caderno de Estudos -, textos complementares, textos do “Leia Mais”, leituras obrigatórias, vídeos e exercícios de fixação. Os alunos também têm acesso a fóruns de discussão, tutoriais das ferramentas informacionais, glossário com os conceitos e siglas mais relevantes para o curso, além de biblioteca com todos os textos citados no Caderno (os complementares, os textos do “Leia Mais” e os obrigatórios). A organização dos conteúdos das aulas é a seguinte:

16 CEGOV

20horas

10horas

2horas

VIDEOTECAEXERCÍCIOS

CADERNO DE ESTUDOSleia

+

AVALIAÇÃO FINAL

1aula

2 3 4aula aula aula

MÓDULO 2INTRODUÇÃO AVALIAÇÃOMÓDULO 1

FÓRUNS

1aula

2

3

4

aula

aula

aula

Introdução à pesquisa de avaliação de Programas

Desenho de pesquisa

Métodos e técnicas para coleta e análise de dados

Apresentação e disseminação dos resultados

aula temamódulo

MÓDULO 1: Fundamentos da avaliação de programas

MÓDULO 2: Apresentação de resultados e exemplos da SAGI

leituraobrigatória

Figura 4 - Conteúdo do curso


Materiais de apoio: Caderno de Estudos, Guia do Aluno, Guia do Moodle, leitu-ras complementares, vídeos, fóruns, ferramentas informacionais do MDS.

Critérios de avaliação e certificação: para receber certificado de participação no curso, é preciso acessar todos os módulos, realizar os exercícios referentes a cada uma das aulas, bem como a Avaliação Final (Figura 5). O aproveitamento mínimo de 60% na Avaliação Final é requisito obrigatório para concluir com êxito o curso e obter o certificado. Concluída a Avaliação Final, o aluno tem acesso à Avaliação de Reação.

EXERCÍCIO

AULA 1 AULA 2 AULA 3

EXERCÍCIO EXERCÍCIO EXERCÍCIO

AULA 4

AVALIAÇÃO FINAL(60%)

AVALIAÇÃO DE REAÇÃO

CERTIFICADO

Figura 5 - Evolução do curso: exercícios, avaliações e certificação


Certificado: concluídos os exercícios de fixação e obtido no mínimo 60% de aproveitamento na Avaliação Final, o aluno tem acesso automático ao certificado (Figura 06).


Figura 6 - Certificado do Curso de Avaliação


18 CEGOV

INSCRIÇÕES

O curso em Conceitos e Técnicas para Avaliação de Programas edição MDS09 foi ofertado de forma diferenciada das demais edições. O curso foi ofertado de forma avulsa, ou seja, a edição MDS09 não fez parte de um “Ci-clo de Capacitação em Conceitos e Técnicas para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas e Ações do MDS”. Dessa forma, os alunos contemplados nessa edição não haviam concluído o Curso de Indicado-res para Diagnóstico do SUAS e do Brasil Sem Miséria e o Curso em Conceitos e Técnicas para Monitoramento de Programas.

A explicação para a oferta diferenciada de tal edição se deu por dois motivos complementares: o primeiro é que 2015 foi o ano internacional da avaliação e o segundo é a importância do tema.

O ano de 2015 foi declarado o ano internacional da avaliação pelo EvalPartners, o movimento global para reforçar as capacidades nacionais de avaliação, e nesse ano várias ações foram realizadas para fortalecer tal obje-tivo, como por exemplo, o seminário da Rede Brasileira de Monitoramento e Avaliação voltado especificamente para o tema da Avaliação.

O segundo motivo é que a SAGI/MDS entende que a Avaliação de Programas e Políticas é um tema de vital importância para o aprimoramento da gestão pública e para que tal objetivo seja atingido é de suma importân-cia a qualificação dos gestores e servidores públicos no referido assunto. O Departamento de Avaliação (DA) da SAGI/MDS é responsável por produzir uma série de estudos avaliativos de programas e ações do Ministério de De-senvolvimento Social. Os produtos produzidos por tal departamento servem para subsidiar a tomada de decisão e ajudar a compreender a realidade mo-dificada a partir dos resultados das intervenções. Os documentos podem ser encontrados em: http://aplicacoes.mds.gov.br/sagirmps/ferramentas/docs/LIVRO_SAGI_.pdf

As inscrições foram realizadas da mesma forma feita para as edições anteriores do Ciclo de Capacitação. O CEGOV elaborou a ficha de inscrição e submeteu para a aprovação do MDS e, uma vez aprovada, divulgou a notícia da oferta do curso. O ministério, por sua vez, responsável pela divulgação, pu-blicou em seus canais de comunicação e incentivou a participação dos gestores na referida oportunidade de capacitação. A ficha de inscrição foi realizada e hospedada na plataforma JotForm e ao todo foram recebidas 5493 inscrições.

06


6.1 PERFIL DOS SELECIONADOS

A seção que segue tem por objetivo apresentar o perfil dos alunos selecionados para participar do Curso em Conceitos e Técnicas para Avaliação de Programas edição MDS09.

A primeira pergunta da ficha de inscrição, diferente das outras edi-ções, foi se os respondentes haviam participado de alguma edição do Ciclo de Capacitação do MDS. Percebe-se que, conforme o gráfico 1, 75,37% dos alunos não haviam participado de edições do Ciclo de Capacitação, sendo, en-tão, alunos novos. Por sua vez, 24,63% dos alunos que participaram da edição MDS09 já haviam participado, porém não concluído outras edições do Ciclo de Capacitação.

24,63%

75,37%

Sim

Não

89,88%

10,12%

FemininoMasculino

Gráfico 1 - Participação do aluno em outros ciclos de capacitação

Gráfico 2 - Frequência do sexo dos selecionados para edição MDS09




O segundo gráfico dessa seção, encontrado abaixo, diz respeito ao sexo dos alunos selecionados e está em consonância com os gráficos dessa natureza apresentados nas outras edições. Observa-se que há uma larga pre-dominância do sexo feminino nas capacitações ofertadas por meio da parceria CEGOV-SAGI.

20 CEGOV

O gráfico 3 mostra a distribuição geográfica por UF dos indivíduos selecio-nados. Observa-se que Bahia, Minas Gerais e São Paulo ocupam os três estados com o maior número de alunos enquanto Roraima, Amapá e Acre são os três estados que apresentam o menor número de alunos.

13 16 18 2239 39

74 79 84 95 98110 114 120

144 150 154 163 164188

202227

323

365

403

449

496

0

100

200

300

400

500

600

RR AP AC RO TO SE AM MS MT GO AL PB PI SC MA DF ES PR PA RN PE RJ RS CE SP MG BA

Gráfico 3 - Número de selecionados para o Curso de Avaliação MDS09 por estado

Gráfico 4 - O aluno possui alguma deficiência?


O gráfico abaixo é uma novidade em relação os relatórios antigos e ele de-monstra a frequência de alunos com deficiência. Esse dado é de suma importância para as equipes executoras, pois essas estão empenhadas em tornar os cursos aces-síveis para a totalidade da população brasileira. Percebe-se que 1,26% dos alunos selecionados informaram possuir algum tipo de deficiência.

98,74%

1,26%

Não

Sim



O gráfico abaixo demonstra o tipo de deficiência dos 1,26% alunos que responderam possuir alguma deficiência. Dessa análise, chama atenção os 13,85% respondentes que informaram ter deficiências visuais, pois é preciso pensar em recursos que facilitem o aprendizado desse grupo de indivíduos1 .

No que tange a escolaridade dos alunos percebe-se que 46,69% pos-suem ensino superior e que 44,45% possuem pós-graduação latu sensu. Em comparação com outras edições, percebe-se na edição MDS09 a quantidade de doutores e mestres é um pouco mais elevada (5,86%).

(1) A equipe desenvolvedora dos conteúdos e o Ministério de Desenvolvimento Social estão em-penhados em tornar o material desenvolvido acessível. Existem planos de trabalhos que preve-em o desenvolvimento de áudio descrição e da acessibilidade dos materiais do curso.

1,54% 1,54%

10,77%

13,85%

72,31%

Mental

Múltipla

Auditiva

Visual

Física

49,69%44,45%

4,87% 0,99%

Ensino Superior

Pós-Graduação

Mestrado

Doutorado

Gráfico 5 - Qual deficiência?

Gráfico 6 - Nível de formação dos selecionados para o curso MDS09



22 CEGOV

A área de formação dos alunos, conforme o gráfico 7, é muito se-melhante às apresentadas em outras edições: há uma grande ocorrência de pessoas formadas em serviços social seguido de uma expressiva quantidade de indivíduos formados em ciências sociais, psicologia, políticas públicas e gestão pública.

0,30%

0,85%1,49%

1,72%

2,37%

10,30%

11,61%

71,34%

Economia

Direito

Administração

Políticas Públicas, Gesão Pública eAdministração PúblicaCiências Sociais

Psicologia

Outro

Serviço Social

63,22%

4,69%

15,00%17,09%

Não possuo experiência emmonitoramento, nem emavaliação de programas.

Possuo experiência emavaliação de programas.

Possuo experiência emmonitoramento de

programas.

Possuo experiência emmonitoramento e avaliação de

programas.

0%

10%

20%

30%

40%

50%

60%

70%

Gráfico 7 - Formação dos selecionados para o curso MDS09

Gráfico 8 - Experiência com M&A dos selecionados



O gráfico 8 mensurou a experiência dos alunos sobre o assunto Moni-toramento e Avaliação. Percebe-se que a grande maioria dos alunos (63,22%) informou não possuir experiência nem em monitoramento, nem em avaliação de programas.


17,38%

7,59%

48,52%

9,66%

15,84%

1,01%

21,09%

8,69%

41,72%

8,62%

18,97%

0,90%

0%

10%

20%

30%

40%

50%

60%

Di�culdade emobter informações

Falta de incentivopara os gestores

Falta de pessoalcapacitado

Falta de recursos Questões de ordempolítica

Outro

Monitoramento Avaliação

Gráfico 9 - Maior dificuldade para realizar M&A


O gráfico 9 mostra a maior dificuldade, na percepção dos gestores, para realizar M&A em suas instituições. Observa-se que falta de pessoal capa-citado é entendido como a variável mais relevante no tema, tanto para moni-toramento quanto para avaliação.

Sobre a existência ou não de setores dedicados ao monitoramento e avaliação de programas, destaca-se que 41,39% informaram que as institui-ções em que trabalham não possuem setores dedicados ao M&A.

Gráfico 10 - Presença do setor de M&A na instituição em que trabalham os selecionados para o Curso de Avaliação MDS09


18,98%

41,39%39,64%

0%

5%

10%

15%

20%

25%

30%

35%

40%

45%

Não se aplica. Não. Sim.

Total

24 CEGOV

No gráfico abaixo destaca-se que a maioria dos alunos (81,01%) fez cursos na modalidade EAD e que apenas 21,34% dos alunos informaram que já participaram de cursos promovidos pelo MDS.

Gráfico 11 - Formação complementar dos selecionados para o curso de avaliação MDS09


21,34%

78,66%81,01%

18,99%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

Sim Não

Fez curso promovido pelo MDS Fez curso na modalidade EAD

Quando perguntados o horário em que os alunos pretendiam estudar, 16,12% informaram que pretendem estudar durante o horário de traba-lho enquanto 83,88% informaram que pretendem estudar fora do horário de trabalho.

Sobre o cadastro dos alunos no CADSUAS, destaca-se que apenas 39,02% dos alunos informaram estar registrados no sistema de cadastro do SUAS.

Gráfico 12 - O aluno está cadastrado no CADSUAS


60,98%

39,02%Não.

Sim.


Sobre a vida dos profissionais dos alunos, 51,56% informaram que são trabalhadores do SUAS. Além destes, destaca-se que também foram for-mados conselheiros da assistência social, técnicos do MDS e gestores munici-pais e estaduais da assistência social.

Gráfico 13 - Profissão do aluno selecionado para o Curso de Avaliação MDS09

Gráfico 14 - Formas por meio dos quais os alunos tomaram conhecimento do Curso de Avaliação MDS09



0,30%

0,85%1,49%

1,72%

2,37%

10,30%

11,61%

71,34%

Economia

Direito

Administração

Políticas Públicas, Gesão Pública eAdministração PúblicaCiências Sociais

Psicologia

Outro

Serviço Social

A última pergunta do questionário era relacionada a forma como o inscrito tomou conhecimento do Ciclo de Capacitação. Nesse quesito, desta-ca-se que 50,68% dos inscritos informaram que descobriram o Ciclo de Capa-citação por meio das redes sociais (Twitter ou Facebook) do ministério.

2,35%

7,13%

0,09%1,17%

0,09%

50,68%6,25%

14,44%

17,80%

Outro

Correio eletrônico

Jornal

Por ex-aluno

Rádio

Redes sociais (Twitter ou Facebook doMDS)

Relações pessoais

Relações pro�ssionais

Sites na Internet

26 CEGOV

07RESULTADOS DA EDIÇÃO PILOTO (MDS07)

Abaixo estão expostas informações relacionadas ao desempenho da edição piloto do curso, que foi realizada entre 04 de fevereiro de 2015 e 24 de fevereiro de 2015.

O gráfico abaixo representa a distribuição de atividades por semana realizada pelos alunos. Como já foi observado nos cursos anteriores, os alunos costumam aumentar o ritmo de realização de atividades conforme o prazo final se aproxima. No caso da edição piloto, na primeira semana de curso a soma de atividades realizadas pelos alunos foi de 35; já na última semana ela foi de 107.

Fonte: Elaboração própria.0 20 40 60 80 100 120

Semana 1

Semana 2

Semana 3

Semana 4

Dentre os 103 alunos selecionados, 17 nunca entraram na plataforma Moodle e dezesseis não a acessaram no último mês nem fizeram a Avaliação final (desistentes). Subtraindo-se os evadidos e desistentes, sobram 70 alunos

Gráfico 15 - Número de atividades realizadas semanalmente pelos alunos (Edição MDS07)




SELECIONADOS 103Evadidos 17

Desistentes 16

Cursantes 70

CURSANTES 70Aprovados 35

Reprovados 11

Não-concluintes 24

cursantes, dos quais metade foram aprovados, onze foram reprovados e 24 não chegaram a concluir o curso, mesmo tendo acessado a plataforma AVA até o último mês.

Gráfico 16 - Participação no Curso de Avaliação (Edição MDS07)


50%

16%

34%Aprovados

Reprovados

Não-concluintes

Portanto, quando considerados apenas os alunos cursantes, temos uma aprovação de 50%. Não concluintes somam um terço, e apenas 16% do total de alunos foram reprovados.

O gráfico 3 mostra quantos alunos realizaram cada uma das Ativida-des do curso. Dos 58 alunos que terminaram a primeira atividade, quarenta e três concluíram tanto a Avaliação Final quanto a Avaliação do Curso. Como esperado, o total de desistentes aumenta progressivamente a cada aula. Cabe salientar que, da Aula 3 para a Avaliação Final, ele foi mínimo: isso demonstra que aqueles que chegam até a metade do curso estão determinados a chegar até o fim.

28 CEGOV

Ao se analisar a nota média dos alunos em cada Atividade, nota-se que o nível de dificuldade de todas foi similar. Por outro lado, a Avaliação Fi-nal foi consideravelmente mais difícil: o desempenho médio dos alunos nessa avaliação foi quase 1 ponto pior do que nos exercícios de fixação das aulas.

ATIVIDADES MÉDIAAula 1 7,84

Aula 2 7,98

Aula 3 7,96

Aula 4 7,87

Av Final 6,91

Média do curso 7,712

58

52

48

47

46

43

0 10 20 30 40 50 60 70

Aula 1

Aula 2

Aula 3

Aula 4

Av. Final

Av. do Curso

Gráfico 17 - Números de alunos que realizaram as atividades do Curso de Avaliação e nota média obtida pelos participantes (Edição MDS07)



08RESULTADOS DA

EDIÇÃO REGULAR (MDS08)

O período do curso se deu entre 30 de março de 2015 e 7 de maio de 2015, já com a extensão do prazo final em 8 dias, uma vez que o término era previsto para o dia 30 de abril de 2015. O gráfico 4 abaixa demonstra a disper-são do volume de atividades realizadas semanalmente pelos alunos. Pode-se perceber um aumento progressivo no volume de atividades realizadas, que teve seu ápice na semana 5, quando os alunos ainda não haviam sido comu-nicados da extensão do prazo. Na semana 6, pode-se observar os resultados e impacto da semana de extensão no curso, uma vez que 1313 atividades foram realizadas neste período.


0 500 1000 1500 2000 2500

Semana 1

Semana 2

Semana 3

Semana 4

Semana 5

Semana 6


30 CEGOV

De acordo com a categorização apresentada no início deste relatório apresentamos a seguir um panorama geral da Edição MDS 08 quanto ao nú-mero de participantes:




Desistentes 230

Cursantes 1913


Reprovados 141

Não-concluintes 554



64%7%

29%

Aprovados

Reprovados

Não-concluintes

Conforme demonstrado acima, dentro das 1.359 pessoas que conclu-íram a avaliação final, somente 141 foram reprovadas (7%). Nesse sentido, percebe-se um índice de aprovação de 64% dos alunos na avaliação final.

Complementarmente, o gráfico 20 abaixa demonstra o nú-mero de alunos que realizaram as atividades ao longo do curso. Lembrando a necessidade de que as atividades sejam feitas na ordem proposta, para que o exercício da aula seguinte seja liberado, pode-se observar que a maior queda na realização do volume de atividades, portanto de evadidos, se deu entre a aula 1 e a aula 2 com uma queda de 82 alunos.




1560

1478

1434

1401

1359

1287

0 200 400 600 800 1000 1200 1400 1600 1800

Aula 1

Aula 2

Aula 3

Aula 4

Av. Final

Av. do Curso


Aula 2 7,72

Aula 3 7,93

Aula 4 8,02

Av Final 7,32


Em relação às médias encontradas pelos alunos a maior delas se deu na aula 1, ficando em 8,06. A média do curso ficou em 7,81 distanciando-se apenas de 0,49 pontos da avaliação final, o que tende a demonstrar que os exercícios propostos ao longo do curso estiveram de acordo com a exigência da avaliação final.

32 CEGOV

RESULTADOS DA EDIÇÃO AVULSA (MDS09)

O período do curso avulso de Avaliação autonomeado edição MDS09 iniciou-se em 11 de maio de 2015 com término previsto para 11 de junho de 2015. O curso foi prorrogado em 7 dias, finalizando-se na data de 18 de junho de 2015. No gráfico 21 abaixo pode-se observar a dispersão do número de atividades realizadas pelos alunos semanalmente. Observa-se que o maior volume de tarefas foi realizado na semana 5 (semana em que o curso estava previsto para ser finalizado), seguido pela semana 4. Também pode-se obser-var o impacto da extensão do curso na semana 6, que possibilitou que 908 atividades a mais fossem realizadas.

09


0 500 1000 1500 2000

Semana 1

Semana 2

Semana 3

Semana 4

Semana 5

Semana 6



De acordo com a categorização apresentada no início deste relatório apresentamos a seguir um panorama geral da Edição MDS 09 quanto ao nú-mero de participantes:





Desistentes 724

Cursantes 2514


Reprovados 176

Não-concluintes 1290


42%

7%

51%

Aprovados

Reprovados

Não-concluintes

Dentre os cursantes, houve uma taxa de 51% de não concluintes – não realizaram a atividade final. Entre os que realizaram a atividade final, deu-se uma taxa de 7% de reprovados, de forma que o número final de aprovados no curso ficou em 42%, com 1048 alunos aptos para a aprovação e recebimento do certificado.

O Gráfico 23 abaixo demonstra o número de alunos que reali-zaram as atividades ao longo do curso. Podemos observar uma redução gradu-al no número de alunos, ao longo das aulas, sendo este mais acentuado entre a Aula 1 e a Aula 2.

34 CEGOV

1531

1367

1313

1269

1222

1104

0 200 400 600 800 1000 1200 1400 1600 1800

Aula 1

Aula 2

Aula 3

Aula 4

Av. Final

Av. do Curso




Aula 2 7,72

Aula 3 7,79

Aula 4 7,96

Av Final 7,09


Em relação às médias obtidas em cada aula observa-se um padrão nas notas que se mantiveram acima de 7,09, demonstrando consistência no grau de dificuldade exigida ao longo do curso, inclusive na Avaliação final.


10AVALIAÇÃO

DO CURSO EM CONCEITO E

TÉCNICAS PARA AVALIAÇÃO DE

PROGRAMAS

A avaliação do curso (ou avaliação de reação) consiste em um for-mulário disponibilizado no próprio Ambiente Virtual de Aprendizagem. Sua finalidade é avaliar a estrutura do Curso, a qualidade e pertinência de seus materiais, a navegação no AVA e aspectos gerais em relação ao andamento das aulas. O objetivo é colher o feedback dos alunos com vistas ao aperfeiçoamen-to deste e de outros cursos que venham a ser realizados. A avaliação é preen-chida de maneira anônima pelos alunos. Abaixo, são analisados os resultados da avaliação de reação das edições MDS07, MDS08 e MDS09.

10.1 AVALIAÇÃO DA EDIÇÃO MDS07

Caráter para obtenção do certificado: obrigatório

Estrutura da avaliação: A avaliação do curso foi dividida em 06 te-máticas, são elas: Identificação funcional (A); Avaliação do Ambiente Virtual (B); Estrutura do curso (C); Sistemática de avaliação de aprendizagem (D); Conteúdo (E); e Avaliação do Ciclo de Capacitação (F).

Formato da avaliação: descritores variam conforme questão: pou-cas vezes/ muitas vezes; nunca, 3 vezes ou menos, 4 vezes ou menos; sim/não; inadequado, pouco adequado, relativamente adequado, perfeitamente adequado; nunca contribuiu, contribuiu poucas vezes, contribuiu na maioria das vezes, sempre contribuiu; insatisfatório, regular, bom, muito bom; não concordo, concordo parcialmente, concordo plenamente.

Número de questões: 45

Número de alunos que a concluíram: 43

A seguir, expõem-se os resultados da avaliação do curso pelos alunos da Edição MDS07.

36 CEGOV

A) IDENTIFICAÇÃO FUNCIONAL

Em relação ao grau de instrução dos alunos, verificou-se que metade dos concluintes possui graduação com especialização, e outros 35% possuem apenas graduação. Mestres e doutores somam 9,3% do total. Alunos com dou-torado e alunos com apenas o Ensino Médio completo, as duas opções nos extremos opostos do espectro de qualificação educacional, representam cada uma 2,33% dos alunos capacitados.


Gráfico 24 - Grau de instrução dos alunos concluintes da edição MDS07

2,33%

34,88%

53,49%

6,98%2,33%

Ensino Médio

Graduação

Especialização

Mestrado

Doutorado

B) AVALIAÇÃO DO AMBIENTE VIRTUAL

Em relação ao Ambiente Virtual de Aprendizagem (AVA), 9,30% dos alunos informaram terem tido dificuldades para acessar a plataforma e ape-nas 4,65% informou que precisou de apoio técnico para tirar dúvidas de con-teúdo ou da plataforma. Dos alunos que relataram problemas,

• Ninguém teve problemas de senha ‘muitas vezes’

• 50% teve problemas com a Web ‘muitas vezes’

Todos os recursos da edição MDS07 foram considerados perfeita-mente adequados pela maior parte dos alunos concluintes. Apenas duas ca-tegorias ficaram ligeiramente abaixo dos 70% de aceitação total: “Ícones” e “Navegação”. Ainda assim, nenhum dos recursos recebeu mais de 2,3% de avaliações ruins.




Gráfico 25 - Avaliação dos recursos da edição MDS07

0,0%

2,3%

0,0%

2,3%

0,0%

2,3%

23,3%

23,3%

30,2%

27,9%

16,3%

18,6%

76,7%

74,4%

69,8%

69,8%

83,7%

79,1%

0,0% 10,0% 20,0% 30,0% 40,0% 50,0% 60,0% 70,0% 80,0% 90,0% 100,0%

Layout do Moodle

Texto de apresentação

Navegação

Ícones

Velocidade das respostas

Layout do Caderno de Estudos

Pouco Inadequado ou Inadequado Relativamente adequado Perfeitamente adequado

Os dados relativos aos fóruns mostram que apenas metade dos alu-nos fizeram uso dessa ferramenta, e pouco mais de dez por cento participa-ram dos fóruns de quatro ou mais aulas. Ou seja, a grande maioria (88%) não participou de todos os fóruns, como foi recomendado.


Gráfico 26 - Participação nos fóruns na edição MDS07

51,16%

37,21%

11,63%

0%

10%

20%

30%

40%

50%

60%

Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais

38 CEGOV

Aos olhos de mais da metade dos concluintes, os fóruns nunca contri-buíram ou contribuíram poucas vezes para promover diálogo e troca de expe-riências entre alunos. Apenas 16,28% afirmaram que os fóruns contribuíram sempre para isso.



27,91%30,23%

25,58%

16,28%

0%

5%

10%

15%

20%

25%

30%

35%

Nunca contribuíram Contribuíram poucasvezes

Contribuíram namaiorias das vezes

Sempre contribuíram

Por fim, sobre o período em que o aluno utilizou o Ambiente Virtual de Aprendizagem, verificou-se que:

• 76,74% dos alunos informaram que utilizaram a plataforma após a jornada de trabalho

• 23,26% dos alunos informaram que utilizaram a plataforma durante a jornada de trabalho

C) ESTRUTURA DO CURSO

A maior parte dos alunos da edição MDS07 responderam que foram bem informados sobre os objetivos e o cronograma de desenvolvimento do curso. Porém, quase 10% consideraram que faltou informação sobre a dinâ-mica de estudo e a avaliação de desempenho.


Quadro 1 - Avaliação da estrutura do Curso de Avaliação MDS07

ITEM DA PERGUNTA “EM RELAÇÃO AO CURSO, VOCÊ CONSIDERA QUE FOI

BEM INFORMADO SOBRE”:SIM NÃO

Objetivos do curso 97,67% 2,33%

Cronograma de desenvolvimento 95,35% 4,65%

Dinâmica de estudo 90,70% 9,30%

Avaliação de desempenho 90,70% 9,30%




D) SISTEMÁTICA DE AVALIAÇÃO DE APRENDIZAGEM

Todas as aulas do curso tiveram ótima aceitação por parte dos alunos concluintes. A porcentagem de alunos que afirmou considerar as aulas boas ou muito boas foi maior que 90% em todas elas. A aula com pior avaliação foi a Aula 4, que mesmo assim obteve 58% de “Muito bom” e 34% de “bom”.

4,7% 7,0% 2,3% 4,7%

32,6% 30,2%27,9%

34,9%

62,8% 62,8% 67,4%58,1%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Aula 1 Aula 2 Aula 3 Aula 4

Insatisfatório Regular Bom Muito BomFonte: Elaboração própria.

Gráfico 28 - Avaliação das aulas da edição MDS07

E) CONTEÚDO

Os alunos da edição MDS07 informaram que utilizaram poucas vezes os recursos extras disponibilizados pelo curso. Os tutorias e vídeos nunca fo-ram utilizados por quase 40% dos concluintes, e os recursos Saiba Mais, por 30%. Apesar de ser o tipo de recurso mais utilizado, os textos do Leia + foram utilizados menos de quatro vezes durante todo o período de capacitação por mais de 90% dos concluintes.

Gráfico 29 - Frequência com que os alunos utilizaram os recursos da edição MDS07

9,3%

30,2%

37,2%

83,7%

62,8%

48,8%

7,0%

7,0%

14,0%

0,0% 20,0% 40,0% 60,0% 80,0% 100,0%

Leia +

Saiba Mais

Tutoriais e Vídeos

Nunca 3 vezes ou menos 4 vezes ou maisFonte: Elaboração própria.

40 CEGOV

Mais de 95% dos alunos concordaram, ao menos parcialmente, com as afirmações relativas à pertinência do curso. Mais de 80% disseram con-cordar plenamente com adequabilidade dos exercícios e da prova final com o conteúdo ensinado. Todos os alunos concordaram, ao menos parcialmente, que buscaram no seu dia-a-dia por situações onde os conhecimentos do cur-so fossem aplicáveis. Apenas 2,3% dos respondentes não concordaram que o curso facilitou a sua compreensão sobre as ferramentas SAGI. Por fim, mais de dois terços dos concluintes concordaram plenamente que os conteúdos fo-ram associados às suas experiências práticas e conhecimentos anteriores.


Gráfico 30 - Avaliação de pertinência da edição MDS07

2,3%

4,7%

0,0%

2,3%

4,7%

27,9%

27,9%

30,2%

27,9%

14,0%

69,8%

67,4%

69,8%

69,8%

81,4%

0,0% 10,0% 20,0% 30,0% 40,0% 50,0% 60,0% 70,0% 80,0% 90,0% 100,0%

Associei os conteúdos do curso aosmeus conhecimentos anteriores.

Associei os conteúdos do cursoàs minhas experiências práticas.

Procurei, no meu dia-a-dia, situações em quefosse possível

aplicar o conteúdo do curso

Os conteúdos do curso facilitaram a compreensão eutilização das

ferramentas do Portal SAGI

Os exercícios e a prova �nal estão claros e de acordo

com o conteúdo ensinado

Não concordo Concordo parcialmente Concordo plenamente

A aprovação da edição MDS07 foi quase geral: 74,43% dos respon-dentes acharam o curso muito bom e apenas 2,33% o acharam ruim.


Gráfico 31 - Avaliação geral da edição MDS07

2,33%

74,42%

23,26%

Bom

Muito Bom

Ruim


F) AVALIAÇÃO DO CICLO DE CAPACITAÇÃO

O ciclo de capacitação como um todo foi muito bem avaliado pelos alunos. Todos concordaram, ao menos parcialmente, que houve sequência lógica na divisão do conteúdo dos cursos, e apenas 7% sentiram que algum conteúdo importante ficou de fora do ciclo.



Gráfico 32 - Houve sequência lógica na divisão do conteúdo dos cursos?

Gráfico 33 - Faltou ser abordado algum conteúdo importante no Ciclo de Capacitação?

11,63%

88,37%

Concordo parcialmente

Concordo plenamente

93,02%

6,98%

Não

Sim

42 CEGOV

Quase 84% afirmaram que usaram conteúdos adquiridos na etapa anterior do ciclo nesta nova etapa. Por fim, não houve desaprovação na ava-liação geral do Ciclo: todos os alunos concluintes o consideraram muito bom (76,74%) ou bom (23,26%).


Gráfico 34 - Avaliação geral do Ciclo de Capacitação

23,26%

76,74%

Bom

Muito Bom


Gráfico 35 - Você utilizou os conhecimentos adquiridos na etapa anterior do Ciclo de Capacitação?

16,28%

83,72%

Não

Sim





Estrutura da avaliação: A avaliação do curso foi dividida em 06 te-máticas, são elas: Identificação funcional (A); Avaliação do Ambiente Virtual (B); Estrutura do curso (C); Sistemática de avaliação de aprendizagem (D); Conteúdo (E); e Avaliação do Ciclo de Capacitação (F).






Em relação ao grau de instrução dos alunos, verificou-se que quase 60% dos concluintes possui graduação com especialização, enquanto outros 33% possuem apenas graduação. Mestres somam 7% do total, e doutores, me-nos de 1%. O número de alunos apenas com ensino médio foi irrisório (menos de 0,1%).



Ensino Médio

Graduação

Especialização

Mestrado

Doutorado

0,08%

32,97%

58,94%

7,15% 0,86%

44 CEGOV



Os dados relativos aos fóruns mostram que apenas metade dos alu-nos concluintes fez uso dessa ferramenta, e pouco mais de dez por cento par-ticipou dos fóruns em quatro ou mais aulas. Ou seja, a grande maioria (88%) não participou de todos os fóruns.


0,7%

1,0%

1,2%

1,6%

1,1%

1,6%

27,4%

24,1%

27,1%

28,6%

23,6%

22,9%

71,9%

74,9%

71,6%

69,8%

75,3%

75,4%

0,0% 10,0% 20,0% 30,0% 40,0% 50,0% 60,0% 70,0% 80,0% 90,0% 100,0%

Layout do Moodle


Navegação

Ícones


Layout do Cadernode Estudos


49,38%

39,27%

11,35%

0%

10%

20%

30%

40%

50%

60%




Em relação ao Ambiente Virtual de Aprendizagem (AVA), 4,12% dos alunos informaram terem tido dificuldades para acessar a plataforma e apenas 9,56% informou que precisou de apoio técnico para tirar dúvi-das de conteúdo ou da plataforma. Dos alunos que relataram problemas,

• 16,98% teve problemas de senha ‘muitas vezes’

• 30,19% teve problemas com a Web ‘muitas vezes’

Com relação aos recursos da edição MDS08, todos foram consi-derados perfeitamente adequados pela maior parte dos alunos concluin-tes. Apenas uma categoria (Ícones) ficou ligeiramente abaixo dos 70% de aceitação total. Ainda assim, nenhum dos recursos recebeu mais de 1,6% de avaliações ruins.



Gráfico 39 - Os fóruns da edição MDS08 contribuíram para promover diálogo e troca de experiências?




ITEM DA PERGUNTA “EM RELAÇÃO AO CURSO, VOCÊ CONSIDERA QUE FOI BEM

INFORMADO SOBRE”:SIM NÃO



Dinâmica de estudo

97,51% 2,49%


31,03% 29,94%

24,57%

14,46%

0%

5%

10%

15%

20%

25%

30%

35%

Nunca contribuíram Contribuíram poucasvezes




• 69,91% dos alunos informara que utilizaram a plataforma após a jor-nada de trabalho

• 30,09% dos alunos informara que utilizaram a plataforma durante a jornada de trabalho


Os alunos da edição MDS08 responderam que foram bem informados sobre os objetivos do curso, o cronograma de desenvolvimento, a dinâmica de estudo e sobre a avaliação de desempenho.

46 CEGOV


Todas as aulas do curso foram consideradas satisfatórias pelos alunos concluintes e obtiveram mais de 90% de Muito Bom/Bom. Mesmo assim, ne-nhuma das aulas atingiu 60% de “Muito bom”.


E) CONTEÚDO

Os alunos da edição MDS08 informaram que utilizaram poucas ve-zes os recursos extras disponibilizados pelo curso. Tanto os tutorias e vídeos quanto os recursos Saiba Mais nunca foram utilizados por um terço dos con-cluintes. Apesar de ser o tipo de recurso mais utilizado, os textos do Leia + fo-ram utilizados menos de quatro vezes durante todo o período de capacitação por quase 90% dos concluintes.


3,8% 4,1% 4,4% 5,7%

40,1% 39,3% 37,7% 37,7%

55,9% 56,3% 57,6% 56,2%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%


Insatisfatório Regular Bom Muito BomFonte: Elaboração própria.

11,3%

33,1%

32,2%

77,3%

60,1%

57,6%

11,4%

6,8%

10,2%

0,0% 20,0% 40,0% 60,0% 80,0% 100,0%

Leia +

Saiba Mais

Tutoriais e Vídeos

Nunca 3 vezes ou menos 4 vezes ou maisFonte: Elaboração própria.




Quase a totalidade dos alunos concordaram, ao menos parcialmente, com as afirmações relativas à pertinência do curso. Mais de 75% disseram concordar plenamente com adequabilidade dos exercícios e da prova final com o conteúdo ensinado. Quase dois terços concordaram plenamente que busca-ram no seu dia-a-dia por situações onde os conhecimentos do curso fossem aplicáveis. Apenas 1,2% dos respondentes não concordaram que o curso faci-litou a sua compreensão sobre as ferramentas SAGI. Por fim, cerca de 70% dos concluintes concordaram plenamente que os conteúdos foram associados às suas experiências práticas e aos seus conhecimentos anteriores.



Quanto à avaliação geral da edição, cerca de 97% dos respondentes acharam o curso Muito Bom ou Bom. Menos de 0,1% o acharam ruim, e nin-guém considerou o curso Muito Ruim.



0,7%

1,3%

1,6%

1,2%

1,3%

28,1%

29,7%

33,4%

31,4%

23,3%

71,2%

69,0%

65,0%

67,3%

75,3%

0,0% 10,0% 20,0% 30,0% 40,0% 50,0% 60,0% 70,0% 80,0% 90,0% 100,0%

Associei os conteúdos do curso aos meus conhecimentos anteriores.

Associei os conteúdos do curso às minhas experiências práticas.

Procurei, no meu dia-a-dia, situações em que fosse possível aplicar o conteúdo do curso

Os conteúdos do curso facilitaram a compreensão e utilização da ferramentas do Portal SAGI.

Os exercícios e a prova �nal estão claros e de acordo com o ensinado


Ruim

Bom

Muito Ruim

Muito Bom

Regular

0,08% 3,03%

29,63%

67,26%

48 CEGOV

F) AVALIAÇÃO DO CICLO DE CAPACITAÇÃO

O ciclo de capacitação como um todo foi muito bem avaliado pelos alunos. Quase todos concordaram, ao menos parcialmente, que houve sequ-ência lógica na divisão do conteúdo dos cursos, e menos de 7% sentiram que algum conteúdo importante ficou de fora do ciclo.




Gráfico 45 - Faltou ser abordado algum conteúdo importante no Ciclo de Capacitação?

Perto de 80% dos respondentes afirmaram ter usado conteúdos ad-quiridos na etapa anterior do ciclo nesta nova etapa. Por fim, não houve de-saprovação na avaliação geral do Ciclo: todos os alunos concluintes o conside-raram Muito Bom (grande maioria, com 69%), Bom (29%) ou regular (2%).

Não concordo

Concordo parcialmente

Concordo plenamente

Muito Ruim

Muito Bom

Regular

0,23%

12,13%

87,64%

Não

Sim

93,70%

6,30%






Gráfico 47 - Você utilizou os conhecimentos adquiridos na etapa anterior do Ciclo de Capacitação?

Muito Ruim

Ruim

Regular

Bom

Muito Bom

2,18%

28,85%

68,97%

Não

Sim

22,32%

77,68%



Estrutura da avaliação: A avaliação do curso foi dividida em 05 te-máticas, são elas: Identificação funcional (A); Avaliação do Ambiente Virtual (B); Estrutura do curso (C); Sistemática de avaliação de aprendizagem (D); e Conteúdo (E);


50 CEGOV


0,46%

41,99%

46,08%

9,65%1,82%

Ensino Médio

Graduação

Especialização

Mestrado

Doutorado





Em relação ao grau de instrução dos alunos, verificou-se um número aproximado de alunos que possuem apenas graduação (42%) e alunos com graduação e especialização (46%). Quase 10% dos alunos concluintes pos-suem mestrado. Alunos com doutorado somam menos de 2%, e alunos com apenas o Ensino Médio completo, menos de 1%.


Em relação ao Ambiente Virtual de Aprendizagem (AVA), 10,84% dos alunos informaram terem tido dificuldades para acessar a plataforma e ape-nas 14,57% informou que precisou de apoio técnico para tirar dúvidas de con-teúdo ou da plataforma. Dos alunos que relataram problemas,

• 23,53% teve problemas de senha ‘muitas vezes’

• 52,10% teve problemas com a Web ‘muitas vezes’

Todos os recursos da edição MDS09 foram considerados perfeita-mente adequados pela maior parte dos alunos concluintes. Ícones, Navega-ção, e Velocidade de Resposta foram os três recursos com maior porcentagem



de avaliações negativas (todos em torno de 3%); mesmo assim, o número é baixo se comparado com a porcentagem de aprovação, que ultrapassou 96% em todos eles.

O número de concluintes que nunca acessaram o fórum foi menor nesta edição do que nas outras duas: se antes metade dos alunos nunca havia acessado os fóruns, agora este número cai para um terço do total.



• 71,40% dos alunos informara que utilizaram a plataforma após a jor-nada de trabalho

• 28,60% dos alunos informara que utilizaram a plataforma durante a jornada de trabalho




Os alunos da edição MDS09 responderam que foram bem informados sobre os objetivos do curso, o cronograma de desenvolvimento, a dinâmica de estudo e sobre a avaliação de desempenho.

1,7%

0,8%

2,9%

3,1%

2,9%

0,8%

31,8%

21,7%

32,2%

31,1%

24,6%

19,9%

66,5%

77,5%

64,8%

65,8%

72,5%

79,3%

0,0% 10,0% 20,0% 30,0% 40,0% 50,0% 60,0% 70,0% 80,0% 90,0% 100,0%

Layout do Moodle


Navegação

Ícones


Layout do Caderno de Estudos


52 CEGOV




Todas as aulas do curso foram avaliadas de modo similar pelos res-pondentes, obtendo mais de 90% de avaliação Muito Bom/Bom. Nenhuma dos alunos considerou qualquer uma das aulas como insatisfatórias.


Gráfico 51 - Os fóruns da edição MDS09 contribuíram para promover diálogo e troca de experiências?

33,70%

45,99%

20,31%

0%

5%

10%

15%

20%

25%

30%

35%

40%

45%

50%


24,59%

29,96% 28,87%

16,58%

0%

5%

10%

15%

20%

25%

30%

35%

Nunca contribuíram Contribuírampoucas vezes




E) CONTEÚDO

Os alunos da edição MDS09 informaram ter utilizado poucas vezes os recursos extras disponibilizados pelo curso. Os tutorias e vídeos nunca fo-ram utilizados por quase 26% dos concluintes, e os recursos Saiba Mais, por 28,5%. Apesar de ser o tipo de recurso mais utilizado, os textos do Leia + fo-ram utilizados menos de quatro vezes durante todo o período de capacitação por mais de 90% dos concluintes.



ITEM DA PERGUNTA “EM RELAÇÃO AO CURSO, VOCÊ CONSIDERA QUE FOI BEM

INFORMADO SOBRE”:SIM NÃO



Dinâmica de estudo 95,63% 4,37%


Mais de 97% dos alunos concordaram, ao menos parcialmente, com as afirmações relativas à pertinência do curso. Quase 80% disseram concor-dar plenamente com adequabilidade dos exercícios e da prova final com o conteúdo ensinado, e quase todos concordaram, ao menos parcialmente, ter buscado no seu dia-a-dia por situações onde os conhecimentos do curso fos-



3,5% 3,1% 3,0% 3,4%

35,4% 34,2% 33,0% 33,8%

60,8% 62,4% 63,9% 62,6%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%


Insatisfatório Regular Bom Muito Bom

54 CEGOV

sem aplicáveis. Apenas 2% dos respondentes não concordaram que o curso facilitou a sua compreensão sobre as ferramentas SAGI. Por fim, mais de dois terços dos concluintes concordaram plenamente que os conteúdos foram as-sociados às suas experiências práticas e conhecimentos anteriores.

A aprovação da edição MDS09 foi quase geral: quase 70% dos res-pondentes acharam o curso muito bom. Apenas 2,5% o acharam regular, e nenhum respondente o achou Ruim ou Muito Ruim.





7,6%

28,5%

26,0%

77,1%

61,8%

63,6%

15,3%

9,7%

10,5%

0,0% 20,0% 40,0% 60,0% 80,0% 100,0%

Leia +

Saiba Mais

Tutoriais e Vídeos

Nunca 3 vezes ou menos 4 vezes ou mais

0,6%

1,1%

2,5%

2,1%

1,1%

24,7%

30,5%

31,5%

32,2%

20,4%

74,7%

68,4%

66,0%

65,7%

78,5%

0,0% 10,0% 20,0% 30,0% 40,0% 50,0% 60,0% 70,0% 80,0% 90,0% 100,0%

Associei os conteúdos do curso

Associei os conteúdos do curso

Procurei, no meu dia-a-dia, situações em que fosse possível aplicar o conteúdo do curso.

às minhas experiências práticas.

aos meus conhecimentos anteriores.

Os conteúdos do curso facilitaram a compreensão e utilização das ferramentas do Portal SAGI.

Os exercícios e a prova �nal estão claros e de acordo com o conteúdo ensinado.




0,00% 2,55%

27,60%

69,58%

Muito Ruim

Ruim

Regular

Bom

Muito Bom


56 CEGOV

11 DEPOIMENTOS

A seção que segue apresentará alguns depoimentos dos alunos. Tais percepções foram captadas por meio da avaliação do curso. De maneira geral os alunos estão satisfeitos com o curso oferecido e seus depoimentos variam entre críticas, agradecimentos, sugestões, parabenizações, etc. Abaixo se-guem os principais depoimentos, expostos de forma anônima, em cada uma das edições.

11.1 DEPOIMENTOS EDIÇÃO PILOTO (MDS07)

“O período do curso coincidiu com datas em que alguns setores estão em inicio de reestruturação e com o evento do carnaval, ficou corrido,”

“Parabéns a todos vocês!!! Até agora, este ciclo de capacitação foi o melhor curso EAD do qual participei.”

“O prazo para execução de atividades poderia ser maior.”

“Agradeço a todos por me proporcionar um aprendizado no wual leva-rei minha vida profissional.”

“Agradeço profundamente toda a equipe por esta qualificação profis-sional, porque certamente vai influenciar na gestão do meu local de trabalho. Um abraço a todos.”

“Curso muito bom! Continuem oferecendo para garantir a capacita-ção de técnicos.”

“Por vezes achei complexo os textos obrigatórios e desconectados do caderno de aula.”

“Obrigada a todos que fizeram parte deste Projetos de Cursos/For-mação/Capacitação. Sugestão que não fique somente nestes 3 cursos. Mas também como elaborar Projetos Técnicos Básicos e Projetos Sociais. Outra Sugestão é Capacitação no SINCONV.”


“Aprendi muito com o curso, e gostaria de agradecer a oportunidade de fazer parte do grupo. Muito obrigado espero que tenham outras neste mes-mo nível com muita qualidade.”

“Agradeço a Secretaria de Avaliação e Gestão da Informação (SAGI--MDS), em cooperação com o Centro de Estudos Internacionais sobre Gover-no da Universidade Federal do Rio Grande do Sul (CEGOV-UFRGS), por terem lançado o Ciclo de Capacitação em Conceitos e Técnicas para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas e Acões do MDS. E pelo privilégio em participar e concluir os três cursos com êxito.Só tenho a agradecer a oportunidade de ter participado do curso e aguardo ansiosamente n ovas oportunidades.”

“Achei essa ultima etapa muito difícil com poucos recursos para se-rem analisados.”

“Deixo aqui duas sugestões para os próximos cursos: 1 - avaliar a pos-sibilidade de estender o prazo considerando o volume de textos complemen-tares que são recomendados a leitura e que não dá tempo de ler. 2 - avaliar a possibilidade de que ao final do Ciclo emitir um certificado somando toda a carga horária, de modo que possamos utilizar para contagem de pontos para a progressão da carreira.”

“Agradeço a oportunidade de acessar mais informações que pode-rão melhorar meu trabalho e melhor beneficiar emu público.Agradeço a toda equipe, a oportunidade oferecida em adquirir conhecimentos que contribuem na minha atuação profissional e a valorizam o desempenho de um serviço público com excelência. Abraços”

“Muito bom o curso. Aprendi muito e tenho todo o material do curso, para futuras consultas em caso de dúvidas.”

“É uma ótima capacitação” Quero sempre participar, obrigada”

“Que outros cursos venham, fazendo novas abordagens, pois para os profissionais que estão em municípios pequenos, pobres e distantes das gran-des cidades, esses momentos são enriquecedores e de fundamental importân-cia para aprimorar a nossa prática profissional.”

“O Ciclo de Capacitação sem duvidas nos apresenta uma realidade até então desconhecida para grande maioria, e digo: faço parte dela! No entanto, aponto algumas considerações que melhorariam ainda mais nosso conheci-mento: - Disponibilizar o material de estudo em meio impresso. O mesmo apos o termino certamente nos serviria de manual de consulta. O novo sem-

58 CEGOV

pre nos traz duvidas! Revisar o conteúdo facilitaria...; - Feedback das questões que não acertamos tanto nos exercícios de fixação, como na avaliação final; - Disponibilizar material de vídeo e áudio em mídia. Assim poderíamos com-partilhar conteúdo com demais profissionais.”

11.2 DEPOIMENTOS EDIÇÃO REGULAR (MDS08)

“Muito obrigado pela ótima oportunidade de aprendizado”

“Gostaria de registrar o desejo de realizar novos cursos, pois para os profissionais de pequenos municípios como eu é difícil ter acesso a capacita-ção gratuitas de maneira que ficamos estagnados. Considerando que o custeio de cursos muitas das vezes se desencontra coma realidade salarial que temos.”

“Foi maravilhoso participar do ciclo, espero que venha outros ciclos de capacitações para aprendermos um pouco mais.”

“Quero agradecer a oportunidade de participar do curso, foi um pou-co difícil, devido a má qualidade da internet no município mas pude concluir todas as etapas do curso.”

“Quero agradecer mais uma vez pela oportunidade de proporcionar um curso relevante ao nosso aprendizado e melhor desenvolvimento de nos-sas práticas cotidianas. Pois a cada dia surge uma situação nova e mais de-mandas a atender. Dessa forma a cada ciclo somos imbuídos de conhecimen-tos que nos levam á soluções muitas vezes de nossos questionamentos.”

“muito obrigado pelo conhecimento que me foi ofertado.”

“Quero deixar meus Parabéns aos Organizadores deste Excelente Curso.”

“Foi ótima a participação neste ciclo de capacitações, proveitoso e gra-tificante.”

“Gostaria de agradecer aos idealizadores do ciclo, pois inciativas como estas são muito importantes para melhorar as políticas públicas brasileiras.”

“Quero mais uma vez agradecer pela oportunidade de crescimento profissional.”

“Gostaria de parabenizar a todos por todos materiais didáticos dos Ciclos de Capacitações e pela belíssima atuação da equipe técnica: coordena-dores e tutores.”


“Infelizmente este foi um dos módulos que menos tive tempo de par-ticipar, devido a demanda do meu trabalho, como só utilizo o pc do trabalho me prejudicou muito no desempenho das atividades e avaliação.”

“Obrigada pelo curso. Está sendo muito importante”

“Agradeço ter participado do curso e espero ser chamada para outros.continuem propiciando cursos como esse nos ajuda com nossa formação per-manente e constante atualização.”

“Grata pela oportunidade de participação.”

“Este curso foi muito rico em conteúdos, sugiro que haja um seminá-rio ou uma oficina de capacitação onde possamos aprofundar um pouco mais estes conteúdos, ou ainda, um curso de especialização que aborde as ferra-mentas: planejamento, monitoramento e avaliação.”

“Está tudo bem , o curso foi ótimo, apesar do curto espaço de tempo para aprender tanta informação.”

“Gostaria que houvesse outros cursos semelhantes a este. Só fazendo um feed back: Eu gostaria que nos próximos cursos não se entendesse tanto tempo os intervalos dos cursos, me refito a este que foram 3 em 1. Pois difi-culta a programação em cronograma e as vezes ficamos meio confuso. Tive sorte que o tutor me enviou um e-mail, pois não fiquei na dúvida se teria esse último curso ou não, ainda bem que teve, pois achei dos 3 esse último o melhor!! Valeu.”

“Agradeço a oportunidade pela capacitação e espero em breve estar aplicando esses conteúdos na política de Assistência social, pois acredito que poderei contribuir muito, caso tenha oportunidade de exercer a prática profis-sional nessa política pública. Porém é importante ressaltar que esses conhe-cimentos serão uteis em qualquer área de atuação, pois possibilita dar visibi-lidades ao trabalho e buscar estratégias para novas formas de implementar serviços. Novamente obrigada pela oportunidade. Lamento apenas não ter tido a disponibilidade de tempo para fazer todas as leituras, pois a dedicação maior, foi feita fora do horário de trabalho e no momento tenho estudado para concursos, além de estar cursando uma Especialização na área Educacio-nal. Parabéns a todos/as que sonharam e planejaram esses cursos, a equipe tem trabalhado muito bem para qualificar gestores e profissionais do SUAS.”

“Agradeço tanto ao MDS quanto à UFRGS pela oportunidade de apri-morar meus conhecimentos que certamente se reverterão em uma práxis pro-fissional qualificada.”

“Parabéns pela iniciativa. Cursos EAD proporcionam acesso ao conhe-cimento de todos que se interessam.”

60 CEGOV

“Gostaria do material impresso, bem como certificado enviado por vocês em papel timbrado.”

“Lamento pela participação ter sido restrita nesta edição. Agradeço pelo adiamento do final do curso, porque foi possível recuperar parcialmente a participação.”

“Adorei os cursos, sendo de grande valia para o melhoramento da prá-tica profissional e a garantia dos serviços sociassistênciais.”

“Agradeço as informações adquiridas. Os materiais são excelentes e com certeza irei consultá-los sempre que necessários. Obrigada!”

“Somente tenho a agradecer pela oportunidade, espero poder ter a oportunidade de realizar outros cursos tão excelentes quanto esses!!!!”

“Agradeço a iniciativa do MDS, o curso foi bem formulado e os tutores ajudaram bastante nessa jornada. O MDS facilitou o contato de profissionais do SUAS que nem conheciam em suas práticas todos os mecanismos a nossa disposição. Fico Feliz de ter participado desse grandioso e gratificante Curso.”

“Agradeço a Equipe desse Curso, foi de grande contribuição todas in-formações aqui adquiridas. Espero que tenha outros cursos. Gosto muito de participar, sinto-me mais preparada para realizar meu trabalho. Abraços!”

“Pouco tempo de curso para a quantidade de textos a serem lidos, principalmente para quem, como eu, faz o curso em horários fora de traba-lho.”

“Só tenho a agradecer toda a equipe pelo curso e espero que posso participar dos próximos que virão.”

“Nesta etapa não consegui participar ativamente dos fóruns, mas ha-verá oportunidade para outros momentos de debates. Agradeço a disponibi-lidade dos envolvidos na realização deste curso. Tudo de bom à eles e à todos os colegas de turma.”

11.3 DEPOIMENTOS EDIÇÃO AVULSA (MDS09)

“Penso que poderiam estender o tempo do curso, fora isso foi muito bom. Gostei do material disponibilizado, baixei todos para posteriormente utilizá-los.”

“O curso foi proveitoso e de esclarecimentos no ambiente de traba-lho.”


“Acho injusto quem atinge 5 não receber certificado.”

“Poderiam retirar o material do curso que fiz ano passado isso con-fundi com o deste ano. Os avisos de alguma coisa na avaliação do curso seja em português”

“O curso é maravilhoso e sua estrutura é bem desenvolvida. Por ques-tões alheias ao curso não tive um melhor aproveitamento; porém farei a re-leitura do material e buscarei aplicar os conceitos em meu cotidiano profis-sional.”

“O tempo para desenvolvimento do curso foi muito curto, talvez um tempo maior fosse mais tranquila a aprendizagem”

“Agradeço a oportunidade em ser selecionada para participar desse curso, uma vez que foi de grande utilidade para aperfeiçoar as atividades que venho desempenhando ao meu cotidiano.”

“Toda a organização do curso foi de fácil compreensão e ótima elabo-ração, onde contribuiu para a absorção de vários aspectos teóricos acerca da área.”

“O curso foi ótimo, só lamento a duração do mesmo poderia ser maior inclusive a carga horaria”

“O diferencial deste curso EAD, no meu entender, está no fato de reu-nir várias informações e em vários formatos possibilitando ampliar o conhe-cimento para além do resumo do curso, tais como:textos obrigatórios, com-plementares, vídeos, etc. Mesmo que nem todos tenham sido lidos durante o período do curso, podem ser salvos e consultados sempre que necessário.”

“Curso excelente, foi de facil acesso, e muito proveitoso. agradeço a oportunidade e espero participar de mais cursos ofertados pelo portal. Para-bens a equipe organizadora e a tutoria a distancia. Muito Obrigado.”

“Agradeço a oportunidade e destaco que o material me auxiliará tam-bém posteriormente a este curso. Obrigada!!!”

“Parabenizo a iniciativa do MDS em promover este ciclo de capacita-ção porque muitos Gestores e Técnicos que não têm oportunidade de fazerem capacitação presencial podem se capacitar para exercer com mais qualidade as atividades nos locais onde atuam.”

“Adorei fazer o curso, com boas metodologias e fácil compreensão.”

62 CEGOV

“Parabéns aos organizadores do curso. Gostei muito do fato de terem disponibilizado as bibliografias na íntegra. Esta ação facilita o uso de referên-cias teóricas nos documentos emitidos por profissionais em geral.”

“Parabéns, esses cursos são de grande importância!!!!!!”

“Gostaria de agradecer a oportunidade e salientar a qualidade dos atores acessados. Parabéns a toda a equipe idealizadora do projeto!”

“Adorei o curso. Espero que CEGOV desenvolva outras capacitações neste âmbito. Ficarei atenta sempre, pois estou aguardando um próximo. Obrigado a todos pela experiência adquirida, foi de grande relevância para minha profissão, e para meus os meus conhecimentos.”

“Fico triste de não poder ter aproveitado mais, pois tive muita dificul-dades com a internet”

“Muito bom o material disponibilizados e a comunicação da equipe interna do ambiente virtual.”

“Gostei bastante do curso. Desde o layout da plataforma (principal-mente se comparado com outros cursos EAD) até o conteúdo das aulas. Os cadernos de estudos foram muito bem elaborados e a bibliografia indicada de grande ajuda, não apenas para o momento do curso, mas também para estudos posteriores. As aulas foram bem didáticas e contemplaram bem os objetivos propostos do curso. Os formuladores estão de parabéns e gostaria muito de ser informada sobre novos cursos. Gostaria de sugerir que houvesse um curso mais explicativo sobre o portal da sagi e os dados disponíveis. São muitas informações que muitas vezes não são utilizadas por não conhecer-mos sua disponibilidade e também de dificuldade de uso do site.”

“Agradeço a oportunidade de participar deste curso, envolve mais com os conteúdos explicados pelos autores e executado pela SAGI/MDS. Des-de já meus agradecimentos”

“Agradeço pela a chance de participar do curso, lembrando que na prova final não respondi a prova devido a um erro na pagina onde tive apenas a primeria para o preenchimento indo automaticamente a segunda fechada e não foi possivel o preenchimento. Mais em se o curso foi muilto bom mesmo e agradeço a todos vocês se poderem reabrir a prova final para que eu possa ter novamente uma nova chance para o prenchimento agradeço.”

“Adorei as leituras complementares , baixei todos os textos e mante-nho as leituras , tanto que até fiquei distante do ambiente virtual em alguns momentos.”

“O curso tem uma dinâmica bem pratica. O conteúdo tem linguagem de fácil acesso e boa compreensão.”


CONSIDERAÇÕESFINAIS

Finalizadas as três turmas do Curso em Conceitos e técnicas para avaliação de programas, sendo as edições piloto, regular e avulsa – conclui-se que os cursos atingiram os objetivos principais propostos, com uma média de sucesso na aprovação dos alunos na faixa de 52% (média de sucesso, sendo esta de cursantes/certificados entre o MDS07, MDS08 e MDS09). Uma vez que este se caracterizava como o terceiro curso dos três previstos no Ciclo de Capacitação em Conceitos e Técnicas para Elaboração de Diagnósticos, Moni-toramento e Avaliação de Programas e Ações do MDS, se deram poucas modi-ficações no AVA, que vinha sendo otimizado nas últimas etapas.

Das principais modificações em relação aos cursos anteriores do Ciclo, pode-se destacar primeiramente a maior interação do papel do tutor central com os alunos, implementando mensagens de e-mails e texto diretamente aos alunos que não haviam entrado na plataforma, buscando uma maior taxa de retorno. Da mesma forma, todos os tutores envolvidos dentro deste curso eram parte da equipe interna do projeto, com uma maior familiaridade tanto com os conteúdos, quanto com a plataforma. Em segundo lugar, acordou-se em realizar o envio do Manual do Moodle por e-mail, com o Guia do Aluno, para melhor orientar os primeiros acessos dos alunos. Nesse sentido, pode-se observar que a média dos alunos entre os três cursos que se considerou bem informado sobre os objetivos do curso foi de 98,74%, bem como 94,52% se disseram bem informados sobre o cronograma desenvolvido, 94,62% sobre a dinâmica de estudo e 94,79% sobre a avaliação de desempenho – indicando que a comunicação ocorreu de maneira efetiva.

As três edições do curso foram bem avaliadas, tanto pelos alunos quanto pelas equipes CEGOV e SAGI/MDS. Na avaliação geral realizada pelos alunos, a média daqueles que consideraram os cursos como muito bom foi de 70,43%, e os que consideraram bom foi de 26,83%. De modo geral, a maioria dos alunos dos três cursos avaliou os recursos do curso (Caderno de Estudos, textos de apresentação, layout, entre outros) como perfeitamente adequados e concordou com a pertinência dos conteúdos e instrumentos de avaliação empregados. Espelhada nessa avaliação, a Equipe percebeu um número me-nor de queixas e/ou dificuldades com relação aos instrumentos de avaliação, o que evidencia uma melhor adequação do formato às expectativas dos alunos. Da mesma forma, a ampla maioria informou ter associado os conteúdos às suas experiências profissionais e também disse ter aplicado os conhecimentos aprendidos no trabalho cotidiano.

12

64 CEGOV

No entanto, é importante destacar a dificuldade enfrentada por al-guns alunos para entrar na Plataforma, o que evidencia a falta de habilidades básicas de informática. Antes mesmo do início de ambas as edições do Curso, por meio do e-mail institucional do Ciclo, foram relatados problemas de aces-so à web, inserção de usuário e senha, entre outros. Por tratar-se de um curso na modalidade EAD, conhecimentos e habilidades mínimas são pré-requisitos essenciais. Ademais, percebe-se que a internet de má qualidade se mostrou problemática para alguns alunos, com dificuldade de acessar os vídeos ou de fazer download de materiais.


ANEXOS13

ANEXO I - FICHA DE INSCRIÇÃO DO CURSO DE AVALIAÇÃO (MDS09)

66 CEGOV


68 CEGOV


70 CEGOV


72 CEGOV

ANEXO II - EXERCÍCIOS DE FIXAÇÃO DO CURSO DE AVALIAÇÃO

AULA 0119/01/2016 Moodle Quiz XHTML Export

file:///C:/Users/dmoreira2/Downloads/questionarioMDS08Aula%201%20Obrigat%C3%B3rias201601191614.html 1/1

01Fixa01

Tendo como base o texto “Sistema de Monitoramento e Avaliação de Programas Sociais: revisitando mitose recolocando premissas para sua maior efetividade na gestão”, analise as seguintes afirmações:

I Independente do órgão ao qual está vinculado o Sistema de Monitoramento e Avaliação, o foco avaliativo semprerecairá sobre a produção de estudos de custoefetividade e os impactos dos programas públicos para orientar aalocação e a disputa dos recursos públicos disponíveis.

II – Dentre as finalidades dos sistemas de monitoramento e avaliação, está o aumento da transparência pública.

III – O interesse de técnicos e gestores em utilizar um sistema de monitoramento e avaliação depende daadequação de seus instrumentos à realidade dos técnicos e gestores.

Quais afirmações estão corretas?

I e II.

II e III.

I e III.

Todas.

01Fixa02

Analise as afirmações com base no texto “Sistema de Monitoramento e Avaliação de Programas Sociais:revisitando mitos e recolocando premissas para sua maior efetividade na gestão”:

I Monitoramento e Avaliação são processos analíticos organicamente articulados, que se Complementam no tempo,com o propósito de subsidiar o gestor público de informações mais sintéticas e tempestivas sobre a operação doprograma – resumidas em painéis ou sistemas de indicadores de monitoramento – e informações mais analíticassobre o funcionamento desse, levantadas nas pesquisas de avaliação.

II – Pesquisas de avaliação devem produzir informações que possam contribuir para o aprimoramento contínuo ou ainovação incremental da ação pública.

III – Para garantir a veracidade das informações produzidas, as pesquisas de avaliação devem ser conduzidas porequipes externas, sem considerar as necessidades dos técnicos e gestores do programa.

Quais afirmações estão corretas?

I e II.

II e III.

I e III.

Todas.

Enviar


19/01/2016 Moodle Quiz XHTML Export

file:///C:/Users/dmoreira2/Downloads/questionarioMDS08Aula%201201601191556.html 1/3

0101

Para a resolução do problema da evasão escolar, um gestor da educação organizou um conjunto de atividades comorçamento, cronograma e metas estabelecidas.

O gestor elaborou:

Uma política.

Um programa.

Um projeto.

Um plano.

0102

Sobre as pesquisas de avaliação é incorreto afirmar:

Utiliza métodos válidos cientificamente.

É uma análise pragmática das características essenciais de um programa.

Podem investigar contexto, públicosalvo, desenho, implementação, custos de operação, resultados de curtoprazo, impactos sociais e de mais longo prazo de um programa.

Os métodos empregados durante uma pesquisa de avaliação são os mesmos do processo de monitoramento.

0103

Analise as afirmativas abaixo:

I – Monitoramento e avaliação são atividades diferentes e que não podem ser realizadas concomitantemente.

II – O monitoramento é realizado através de informações sintéticas e tempestivas sobre a operação do programa.

III – Para avaliar um programa, são utilizadas informações sobre seu funcionamento, levantadas por pesquisas deavaliação.

Estão corretas:

Apenas a I.

Apenas a II.

As afirmativas II e III.

Todas as afirmativas estão corretas.

74 CEGOV



0104

Sobre os objetivos da avaliação, é incorreto afirmar que:

A avaliação tem como objetivo propiciar a compreensão das políticas, visando o seu aprimoramento.

As pesquisas de avaliação são uma forma de substituir o processo de tomada de decisão.

Dentre os objetivos da avaliação, está a melhoria na alocação apropriada de recursos.

As pesquisas de avaliação permitem que as decisões sejam tomadas de maneira mais consciente.

0105

Um pesquisador, ao realizar uma pesquisa de avaliação, deve recorrer a um recurso metodológico utilizado paramedir determinado aspecto da realidade social. Esse recurso recebe o nome de:

Monitoramento.

Avaliação.

Implementação.

Indicadores.

0106

Uma gestora da área de assistência social identificou a necessidade de avaliar um programa em sua cidade. Paraisso, realizouse uma pesquisa de avaliação. A equipe da pesquisa foi formada por servidores da assistência social epor consultores contratados exclusivamente para esse objetivo.

Conforme o critério do agente que avalia, podemos afirmar que essa foi uma avaliação:

Interna.

Mista.

Externa.

Participativa.

0107

Um município quer avaliar se a relação entre os custos e os resultados atingidos por um programa está adequada.Para isso, o município deve realizar uma avaliação de:




0104

Sobre os objetivos da avaliação, é incorreto afirmar que:

A avaliação tem como objetivo propiciar a compreensão das políticas, visando o seu aprimoramento.

As pesquisas de avaliação são uma forma de substituir o processo de tomada de decisão.

Dentre os objetivos da avaliação, está a melhoria na alocação apropriada de recursos.

As pesquisas de avaliação permitem que as decisões sejam tomadas de maneira mais consciente.

0105

Um pesquisador, ao realizar uma pesquisa de avaliação, deve recorrer a um recurso metodológico utilizado paramedir determinado aspecto da realidade social. Esse recurso recebe o nome de:

Monitoramento.

Avaliação.

Implementação.

Indicadores.

0106

Uma gestora da área de assistência social identificou a necessidade de avaliar um programa em sua cidade. Paraisso, realizouse uma pesquisa de avaliação. A equipe da pesquisa foi formada por servidores da assistência social epor consultores contratados exclusivamente para esse objetivo.

Conforme o critério do agente que avalia, podemos afirmar que essa foi uma avaliação:

Interna.

Mista.

Externa.

Participativa.

0107

Um município quer avaliar se a relação entre os custos e os resultados atingidos por um programa está adequada.Para isso, o município deve realizar uma avaliação de:



Demanda.

Eficiência.

Processo.

Desenho.

0108

Existem diversos tipos de constrangimentos que prejudicam a realização de uma avaliação de programas. Aausência de profissionais qualificados para acompanhar a execução da pesquisa e conduzir o aproveitamento deseus resultados é um constrangimento de que tipo?

De tempo.

Político.

De recursos humanos.

De informação.

Enviar

76 CEGOV



02Fixa02

A partir do texto “Avaliação de Programas Sociais no Brasil: repensando práticas e metodologias daspesquisas avaliativas”, assinale a alternativa incorreta.

O delineamento quasiexperimental é inspirado no formato clássico das Ciências Naturais, com o objetivo deidentificar estruturas e intensidades de relações causais.

A escolha do desenho de pesquisa depende dos objetivos específicos almejados pelo pesquisador.

O delineamento quasiexperimental garante maior grau de cientificidade às pesquisas de avaliação.

Aspectos como a natureza do programa, o estágio em que ele se encontra, os recursos e o tempo disponíveisorientam as definições metodológicas na realização de uma pesquisa.

02Fixa02

Analise as afirmativas abaixo com base no texto “Avaliação de Programas Sociais no Brasil: repensandopráticas e metodologias das pesquisas avaliativas”:

I – Por exigir um grupo de controle, o desenho quasiexperimental apresenta um problema ético: como definir ejustificar quem será beneficiário e quem vai ficar de fora do programa.

II – Dada a multiplicidade de contextos e desenhos institucionais, não se pode definir que um desenho de pesquisaespecífico seja superior em qualquer situação.

III – O uso de abordagens de natureza quantitativa exclui a possibilidade de utilização de técnicas qualitativas.

Quais afirmativas estão corretas?

Apenas a I.

I e II.

II e III.

Todas.

Enviar




0201

Selecione a alternativa que explicita a sequência de um processo de pesquisa:

Planejamento, execução da pesquisa, análise dos dados coletados, redação do relatório final.

Formulação, implementação e avaliação dos resultados.

Execução da pesquisa, análise dos dados coletados, avaliação, redação do relatório final.

Planejamento (projeto), implementação, análise dos dados coletados, avaliação dos resultados.

0202

Os delineamentos de pesquisa de avaliação de programas podem ser:

Explicativos e descritivos.

Expost ou exante.

Formativos e Somativos.

Internos ou externos.

0203

Um gestor pretende conhecer mais sobre a percepção que os beneficiários de um programa de transferência derenda têm sobre o programa. Com esse objetivo, elaborouse uma pesquisa que relatava o modo como osbeneficiários compreendiam sua relação com o programa.

Podese afirmar que essa pesquisa tinha um delineamento:

Explicativo.

Descritivo.

Avaliativo.

Compreensivo.

0204

Constatouse que os beneficiários de um programa de transferência de renda estavam com dificuldades em cumpriras condicionalidades do programa. Com o objetivo de explicar quais eram as causas desse problema, elaborouseuma pesquisa de avaliação.

78 CEGOV



0201

Selecione a alternativa que explicita a sequência de um processo de pesquisa:

Planejamento, execução da pesquisa, análise dos dados coletados, redação do relatório final.

Formulação, implementação e avaliação dos resultados.

Execução da pesquisa, análise dos dados coletados, avaliação, redação do relatório final.

Planejamento (projeto), implementação, análise dos dados coletados, avaliação dos resultados.

0202

Os delineamentos de pesquisa de avaliação de programas podem ser:

Explicativos e descritivos.

Expost ou exante.

Formativos e Somativos.

Internos ou externos.

0203

Um gestor pretende conhecer mais sobre a percepção que os beneficiários de um programa de transferência derenda têm sobre o programa. Com esse objetivo, elaborouse uma pesquisa que relatava o modo como osbeneficiários compreendiam sua relação com o programa.


Explicativo.

Descritivo.

Avaliativo.

Compreensivo.

0204

Constatouse que os beneficiários de um programa de transferência de renda estavam com dificuldades em cumpriras condicionalidades do programa. Com o objetivo de explicar quais eram as causas desse problema, elaborouseuma pesquisa de avaliação.




Avaliativo.

Descritivo.

Explicativo.

Compreensivo.

0205

Com o objetivo de avaliar os resultados de um programa, uma pesquisa foi conduzida para quantificar essesresultados junto ao públicoalvo do programa. Qual era a abordagem metodológica dessa pesquisa?

Explicativa.

Descritiva.

Quantitativa.

Qualitativa.

0206

As abordagens metodológicas podem ser divididas em:

Somativa e Formativa.

Experimental e não experimental.

Qualitativa e Quantitativa.

Descritiva e estatística.

0207

Para realização de uma pesquisa de avaliação, foi estabelecida uma amostra para definir quais seriam osbeneficiários que seriam pesquisados. A intenção dessa amostra era permitir que, a partir de um número reduzidopesquisado, pudessem ser generalizados os resultados da pesquisa para toda a população de beneficiários doprograma.

Podemos afirmar que essa amostra era do tipo:

Nãoprobabilística.





Avaliativo.

Descritivo.

Explicativo.

Compreensivo.

0205

Com o objetivo de avaliar os resultados de um programa, uma pesquisa foi conduzida para quantificar essesresultados junto ao públicoalvo do programa. Qual era a abordagem metodológica dessa pesquisa?

Explicativa.

Descritiva.

Quantitativa.

Qualitativa.

0206

As abordagens metodológicas podem ser divididas em:

Somativa e Formativa.

Experimental e não experimental.

Qualitativa e Quantitativa.

Descritiva e estatística.

0207

Para realização de uma pesquisa de avaliação, foi estabelecida uma amostra para definir quais seriam osbeneficiários que seriam pesquisados. A intenção dessa amostra era permitir que, a partir de um número reduzidopesquisado, pudessem ser generalizados os resultados da pesquisa para toda a população de beneficiários doprograma.

Podemos afirmar que essa amostra era do tipo:

Nãoprobabilística.



Probabilística.

Experimental.

Quantitativa.

0208

Sobre amostra, analise as afirmativas abaixo:

I – É uma técnica de seleção da população a ser pesquisada.

II – É de grande valia para pesquisas em que o universo pesquisado é muito grande.

III – Qualquer tipo de amostra permite a generalização de seus resultados.

Estão corretas:

As afirmativas I e II.

As afirmativas II e III.

As afirmativas I e III.

Todas as afirmativas.

Enviar

80 CEGOV



0301Fixa

A partir do texto “Estudos Avaliativos com Base na Integração de Registros Administrativos”, assinale aalternativa incorreta.

Para a utilização de registros administrativos em pesquisas de avaliação, é fundamental que a confiabilidadedas informações esteja garantida.

A integração de diferentes registros administrativos possibilita o acesso sistemático a uma gama maior deinformações.

O processo de integração de registros administrativos envolve um conjunto de procedimentos metodológicos.

Em um contexto em que políticas e programas de cunho redistributivo, afirmativo ou compensatório seestruturam e avançam pelo território nacional, criando sinergias – planejadas ou não – que têm impactadopositivamente em várias dimensões das condições de vida da população, o mais importante é dimensionarresultados e impactos advindos de um ou outro programa social isolado.

0302Fixa

Analise as afirmativas abaixo com base no texto Analise as afirmativas abaixo com base no texto “EstudosAvaliativos com Base na Integração de Registros Administrativos: a Experiência de Integração doCadastro Único para Programas Sociais, Programa Bolsa Família e Sistema de Vigilância Alimentar eNutricional”:

I – Os estudos quasiexperimentais têm se demonstrado incapazes de captar o efeito conjugado de ações integradasde programas sociais. A integração de registros administrativos apresenta potencialidades que podem suprir essalacuna.

II A integração de registros administrativos é uma estratégia adequada para avaliar os resultados de programascom alto grau de articulação intersetorial.

III – A constituição de bases de dados pela integração de registros administrativos representa um passo importantena produção de informação e conhecimento mais específicos para o aprimoramento de Políticas e Programas Sociais,adequado ao nível de complexidade dos seus desenhos e arranjos operacionais.


I e II.

I e III.

II e III.

Todas.

Enviar




0301

Analise as seguintes afirmações sobre método de pesquisa:

I É o macro entendimento escolhido pelo pesquisador sobre como a sua pesquisa deve ser realizada.

II – A escolha do método depende da pergunta que o pesquisador pretende responder com a pesquisa.

III – Por ser um procedimento mais amplo, uma técnica de coleta de dados comporta vários métodos.

Estão corretas:

Apenas a afirmativa I.

Apenas a afirmativa II.



0302

Qual das alternativas abaixo não é uma técnica de coleta de dados?

Entrevista Semiestruturada.

Entrevista Estruturada.

Etnografia.

Grupo Focal.

0303

Ao realizar uma pesquisa de avaliação de um programa de transferência de renda estadual, o pesquisador optoupela análise exaustiva de uma cidade específica para a compreensão de uma realidade social mais ampla. Opesquisador utilizou o método de:

Estudo de Caso.

Levantamento de Campo.

Grupo Focal.

Questionário.

0304

82 CEGOV



0301

Analise as seguintes afirmações sobre método de pesquisa:

I É o macro entendimento escolhido pelo pesquisador sobre como a sua pesquisa deve ser realizada.

II – A escolha do método depende da pergunta que o pesquisador pretende responder com a pesquisa.

III – Por ser um procedimento mais amplo, uma técnica de coleta de dados comporta vários métodos.

Estão corretas:

Apenas a afirmativa I.

Apenas a afirmativa II.



0302

Qual das alternativas abaixo não é uma técnica de coleta de dados?

Entrevista Semiestruturada.


Etnografia.

Grupo Focal.

0303

Ao realizar uma pesquisa de avaliação de um programa de transferência de renda estadual, o pesquisador optoupela análise exaustiva de uma cidade específica para a compreensão de uma realidade social mais ampla. Opesquisador utilizou o método de:

Estudo de Caso.


Grupo Focal.

Questionário.



No método________, o pesquisador deve se integrar ao grupo em estudo, observando e vivenciando seu modo devida. Nesse método, é comum o uso da técnica de ________.

Assinale a alternativa que preencha corretamente as lacunas acima:

Do Estudo de Caso – Grupo Focal

Do Estudo de Caso Entrevista

Etnográfico – Questionário

Etnográfico – Observação Participante

0305

Qual técnica se baseia na interação entre os indivíduos pesquisados para identificar suas percepções sobredeterminado tema?

Entrevista.

Grupo Focal.

Questionário.

Estudo de Caso.

0306

Para a quantificação dos resultados de um programa, o pesquisador necessita de uma técnica de coleta de dadosque facilite quantificação de dados. Qual das técnicas abaixo é a mais adequada para essa finalidade?


Entrevista Não Estruturada.


Grupo Focal.

0307

Com o objetivo de investigar a opinião dos beneficiários sobre um programa, o pesquisador reúne algunsbeneficiários e promove uma discussão entre esses beneficiários sobre temas relevantes para a pesquisa. O nomedessa técnica de coleta de dados é:

Entrevista.




No método________, o pesquisador deve se integrar ao grupo em estudo, observando e vivenciando seu modo devida. Nesse método, é comum o uso da técnica de ________.

Assinale a alternativa que preencha corretamente as lacunas acima:

Do Estudo de Caso – Grupo Focal

Do Estudo de Caso Entrevista

Etnográfico – Questionário

Etnográfico – Observação Participante

0305

Qual técnica se baseia na interação entre os indivíduos pesquisados para identificar suas percepções sobredeterminado tema?

Entrevista.

Grupo Focal.

Questionário.

Estudo de Caso.

0306

Para a quantificação dos resultados de um programa, o pesquisador necessita de uma técnica de coleta de dadosque facilite quantificação de dados. Qual das técnicas abaixo é a mais adequada para essa finalidade?


Entrevista Não Estruturada.


Grupo Focal.

0307

Com o objetivo de investigar a opinião dos beneficiários sobre um programa, o pesquisador reúne algunsbeneficiários e promove uma discussão entre esses beneficiários sobre temas relevantes para a pesquisa. O nomedessa técnica de coleta de dados é:

Entrevista.19/01/2016 Moodle Quiz XHTML Export


Observação Participante.


Grupo Focal.

0308

Dentre os métodos de coleta de dados abaixo, assinale o mais adequado para uma pesquisa de abordagemquantitativa:

Estudo de Caso.

Etnografia.

História de Vida.


Enviar

84 CEGOV



0401Fixa

Analise as afirmações com base no texto “Da Complexidade das Políticas Públicas à Especificação dePesquisa de Avaliação de Programas Sociais: breves apontamentos à luz da experiência da SAGI/MDS”:

I – Dentre as diretrizes da SAGI, está a entrega de produtos que estejam ajustados às necessidades dos gestores etécnicos do MDS.

II – A definição de avaliação adotada pela SAGI se restringe a uma investigação com métodos validadoscientificamente para analisar diferentes aspectos sobre um programa.

III – Tendo em vista os contextos complexos nos quais atua o MDS, a SAGI desenvolve produtos que secaracterizam pela multidisciplinaridade e pela complementariedade de enfoques metodológicos.


I e II.

I e III.

II e III.

Todas.

0402Fixa

Tendo como referência a definição da avaliação adotada pela SAGI e apresentada no texto “Da Complexidade dasPolíticas Públicas à Especificação de Pesquisa de Avaliação de Programas Sociais: breves apontamentosà luz da experiência da SAGI/MDS”, podemos afirmar que o que diferencia uma pesquisa de avaliação dasdemais pesquisas sociais é:

Os métodos e técnicas de pesquisa.

Os objetos de pesquisa.

Os agentes que conduzem a pesquisa.

A contribuição para o aperfeiçoamento dos programas e projetos sociais.

Enviar




0401

As tabelas de frequência que apresentam apenas a contagem de determinado elemento da pesquisa são chamadas:

Tabelas analíticas.

Tabelas de dados brutos.

Quadros analíticos.

Tabelas estatísticas.

0402

As tabelas que apresentam dados que passaram por algum tratamento estatístico são chamadas:



Tabelas de dados.

Quadros estatísticos.

0403

Qual técnica de análise de dados se ocupa em analisar sistematicamente temas, interpretações, tipologias deopinião, dentre outros aspectos expressos no texto?

Análise de frequência.

Análise numérica.

Análise estatística.

Análise de conteúdo.

0404

É uma técnica quantitativa de análise de dados:

Análise de discurso.

86 CEGOV



0401

As tabelas de frequência que apresentam apenas a contagem de determinado elemento da pesquisa são chamadas:


Tabelas de dados brutos.

Quadros analíticos.


0402

As tabelas que apresentam dados que passaram por algum tratamento estatístico são chamadas:



Tabelas de dados.

Quadros estatísticos.

0403

Qual técnica de análise de dados se ocupa em analisar sistematicamente temas, interpretações, tipologias deopinião, dentre outros aspectos expressos no texto?


Análise numérica.

Análise estatística.


0404

É uma técnica quantitativa de análise de dados:

Análise de discurso.




Análise argumentativa.


0405

Sobre a disseminação dos resultados das pesquisas de avaliação, assinale a alternativa incorreta:

As pesquisas de avaliação de um programa podem ser importantes para outros gestores. Por isso, é importantecompartilhalas.

A disseminação dos resultados pode ser feita pela internet ou em apresentações em seminários sobre o tema.

Quando um gestor faz uso dos resultados compartilhados de uma pesquisa, não é preciso certificarse de suarobustez metodológica.

Para compartilhar os resultados de uma pesquisa, é necessário que o anonimato dos sujeitos pesquisados sejamantido.

0406

Assinale qual das alternativas não é um dos canais pelos quais a SAGI/MDS compartilha o resultado de suaspesquisas de avaliação.

Portal de Pesquisas de Avaliação da SAGI.

Publicação de Resultados do Censo SUAS.

Cadernos de Estudos do Desenvolvimento Social.

Estudos Técnicos da SAGI.

0407

Em seu portal, a SAGI disponibiliza os resultados de suas pesquisas nos seguintes formatos:

Sumário Executivo, Ficha Técnica e Microdados.

Sumário Executivo, Relatório Final e Microdados.

Ficha Técnica, Relatório Final e Sumário Executivo.

Resumo, Relatório Final e Microdados.





Análise argumentativa.


0405

Sobre a disseminação dos resultados das pesquisas de avaliação, assinale a alternativa incorreta:

As pesquisas de avaliação de um programa podem ser importantes para outros gestores. Por isso, é importantecompartilhalas.

A disseminação dos resultados pode ser feita pela internet ou em apresentações em seminários sobre o tema.

Quando um gestor faz uso dos resultados compartilhados de uma pesquisa, não é preciso certificarse de suarobustez metodológica.

Para compartilhar os resultados de uma pesquisa, é necessário que o anonimato dos sujeitos pesquisados sejamantido.

0406

Assinale qual das alternativas não é um dos canais pelos quais a SAGI/MDS compartilha o resultado de suaspesquisas de avaliação.

Portal de Pesquisas de Avaliação da SAGI.

Publicação de Resultados do Censo SUAS.

Cadernos de Estudos do Desenvolvimento Social.

Estudos Técnicos da SAGI.

0407

Em seu portal, a SAGI disponibiliza os resultados de suas pesquisas nos seguintes formatos:

Sumário Executivo, Ficha Técnica e Microdados.

Sumário Executivo, Relatório Final e Microdados.

Ficha Técnica, Relatório Final e Sumário Executivo.

Resumo, Relatório Final e Microdados.19/01/2016 Moodle Quiz XHTML Export


0408

O Sumário Executivo é:

A apresentação da pergunta e dos procedimentos metodológicos da pesquisa.

A apresentação dos resultados da pesquisa.

Um resumo com as conclusões do pesquisador após a realização da pesquisa.

A apresentação resumida de todos os principais elementos da pesquisa.

Enviar

88 CEGOV

ANEXO III - QUESTÕES DOS FÓRUNS DO CURSO DE AVALIAÇÃO

PERGUNTAS FREQUENTES

FÓRUM APRESENTAÇÃO

Boas-vindasOlá, sejam todos bem-vindos ao Curso em Conceitos e Instrumentos

para Avaliação de Programas!

Meu nome é João Marcelo Conte Cornetet e serei o tutor de vocês. Moro em Porto Alegre e faço parte da equipe CEGOV/UFRGS. Sou bacharel em Relações Internacionais e mestre e doutorando em Ciência Política pela Universidade Federal do Rio Grande do Sul (UFRGS).

Convido todos a se apresentarem neste tópico, para que possamos nos conhecer melhor e trocar experiências.

Não esqueça de ler o material disponível no ícone Introdução, como o Guia do Aluno, o Manual do Moodle e o Caderno de Estudos.

Desejo um bom curso a todos!

Abraços,

João

FÓRUM CONTEÚDO

Debate 1

Na aula 1 conhecemos o que são as pesquisas de avaliação.

De que maneira você acha que pesquisas dessa natureza podem auxi-liar na gestão dos programas de seu município?

Debate 2Na aula 2 aprendemos sobre as potencialidades e limites dos deline-

amentos de pesquisas e abordagens metodológicas. Na primeira aula, vimos que outros constrangimentos podem afetar a realização de uma pesquisa de avaliação.

A partir da realidade do seu município, aponte quais os principais constrangimentos existentes para a realização e uso de pesquisas de avaliação.

Debate 3Quais métodos e técnicas de coleta de dados lhe pareceram mais úteis

para aplicação em possíveis pesquisas de avaliação dos programas de seu mu-nicípio? Comente sua escolha.

Debate 4Você conhecia alguma das pesquisas de avaliação realizadas pela


SAGI? De que maneira você acha que essas informações disponibilizadas po-dem ajudar no seu cotidiano?

Dúvidas de ConteúdoTem alguma dúvida sobre o conteúdo do curso? Não entendeu algu-

ma aula? Exponha os seus questionamentos aqui e iremos ajudá-lo!

90 CEGOV

ANEXO IV - AVALIAÇÃO DE REAÇÃO DO CURSO DE AVALIAÇÃO


1. Vínculo institucional (cargo e função):

2. Tempo no cargo (determinar se anos ou meses):

3. Grau de instrução (assinale o maior grau de instrução completo): Ensino Médio Graduação Especialização Mestrado Doutorado


4. Você teve dificuldades para acessar o ambiente virtual do curso? Sim Não

Como você avalia cada um dos seguintes itens referentes ao ambiente virtual do curso? 7. Layout (desenho do ambiente): Inadequado Pouco adequado Relativamente adequado Perfeitamente adequado 8. Texto de apresentação do curso: Inadequado Pouco adequado Relativamente adequado Perfeitamente adequado 9. Navegação no ambiente: Inadequado Pouco adequado Relativamente adequado Perfeitamente adequado


10. Ícones (facilidade de compreensão): Inadequado Pouco adequado Relativamente adequado Perfeitamente adequado 11. Velocidade das respostas do ambiente eletrônico às minhas ações: Inadequado Pouco adequado Relativamente adequado Perfeitamente adequado 12. Layout do Caderno de Estudos: Inadequado Pouco adequado Relativamente adequado Perfeitamente adequado 13. Quantas vezes você participu dos Fóruns do curso? Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais 14. Os Fóruns contribuíram para promover um espaço de debates e trocas de experiência entre você e seus colegas? Nunca contribuíram Contribuíram poucas vezes Contribuíram na maiorias das vezes Sempre contribuíram 15. Alguma vez você necessitou de apoio técnico para tirar dúvidas de conteúdo ou da plataforma? Sim Não 16. Lembrando que as informações não serão identificadas, quando você mais utilizou o ambiente virtual de aprendizagem? Durante a jornada de trabalho Após a jornada de trabalho


Em relação ao curso, você considera que foi bem informado sobre: 17. Os objetivos do curso e de cada aula? Sim Não

92 CEGOV

18. O cronograma de desenvolvimento? Sim Não 19. A dinâmica de estudo (estudos individuais, exercícios, fórum, e avaliação final)? Sim Não 20. A avaliação de seu desempenho? Sim Não

D) SISTEMÁTICA DE AVALIAÇÃO DA APRENDIZAGEM

Por favor, avalie agora os conteúdos do curso. 21. Aula 1: Insatisfatório Regular Bom Muito Bom 22. Aula 2: Insatisfatório Regular Bom Muito Bom 23. Aula 3: Insatisfatório Regular Bom Muito Bom 24. Aula 4: Insatisfatório Regular Bom Muito Bom

E) CONTEÚDO

Em relação às atividades pedagógicas, assinale: 25. Li os textos indicados pela leitura complementar (Leia +): Nunca 3 vezes ou menos 4 vezes ou mais


26. Utilizei os recursos do Saiba Mais: Nunca 3 vezes ou menos 4 vezes ou mais 27. Utilizei os tutoriais e vídeos: Nunca 3 vezes ou menos 4 vezes ou mais

Em relação à pertinência dos conteúdos, assinale as afirmações confor-me sua realidade: 28. Associei os conteúdos do curso aos meus conhecimentos anterio-res. Não concordo Concordo parcialmente Concordo plenamente 29. Associei os conteúdos do curso às minhas experiências práticas. Não concordo Concordo parcialmente Concordo plenamente

30. Procurei, no meu dia-a-dia, situações em que fosse possível aplicar o conteúdo do curso. Não concordo Concordo parcialmente Concordo plenamente 31. Os conteúdos do curso facilitaram a compreensão e utilização das ferramentas do Portal SAGI. Não concordo Concordo parcialmente Concordo plenamente 32. Os exercícios e a prova final estão claros e de acordo com o conteú-do ensinado. Não concordo Concordo parcialmente Concordo plenamente

94 CEGOV

33. Como você utilizará os conteúdos aprendidos no Ciclo de Capaci-tação em Conceitos e Técnicas para Elaboração de Diagnósticos, Moni-toramento e Avaliação de Programas e Ações do MDS para o aprimora-mento dos serviços públicos prestados em seu local de trabalho?

34. De acordo com a escala de 1 a 5 (1 - Muito Ruim; 2 - Ruim; 3 - Re-gular; 4 - Bom; 5 - Muito Bom), que nota você dá ao curso? 1 2 3 4 5

F) SOBRE O CICLO DE CAPACITAÇÃO

35. Você acha que a divisão de conteúdo entre os cursos funcionou bem? Ou seja, houve uma sequência lógica entres os cursos de Indica-dores, Monitoramento e Avaliação? Não concordo Concordo parcialmente Concordo plenamente

36. Por quê?

37. Você acha que faltou ser abordado algum conteúdo importante no ciclo de capacitação? Sim Não

39. De acordo com a escala de 1 a 5 (1 - Muito Ruim; 2 - Ruim; 3 - Regular; 4 - Bom; 5 - Muito Bom), que nota você dá para o Ciclo de Capacitação em Conceitos e Técnicas para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas e Ações do MDS? 1 2 3 4 5

G) CONSIDERAÇÕES FINAIS

40. Em relação à etapa anterior deste Ciclo de Capacitação, pergunta--se: você utilizou os conhecimentos adquiridos no Curso Conceitos e Instrumentos para Monitoramento de Programas? Sim Não


41. Por gentileza, exemplifique:

42. Nesse caso, como planeja utilizar?

43. Como você utilizará os conteúdos do Ciclo para o aprimoramento dos serviços públicos prestados em seu local de trabalho?

44. Agradecendo sua participação, deixamos espaço para outras consi-derações que queira fazer.

96 CEGOV

CICLO DE CAPACITAÇÃO

MDS



Campus do Vale - Prédio 43322 - Av. Bento Gonçalves, 9500 Porto Alegre - RS - 91509-900 - Phone: + 55 51 3308.9860

IP Videoconference CEGOV 143.54.129.46cegov.ufrgs.br

Documents

CICLO DE MDS - UFRGS · Título Convênio UFRGS - FEENG: ECO/CEGOV/ ADM.PÚBLICA FEDERAL Protocolo Proc. Convênio UFRGS – FEENG: 23078.038272/12-82 Data da Assinatura do Convênio