Encontro Nacional do Programa
Segundo Tempo
AVALIANDO O PROGRAMA
SEGUNDO TEMPO
SISTEMA DE MONITORAMENTO & AVALIAÇÃO
DOS PROGRAMAS ESPORTE E LAZER DA CIDADE E SEGUNDO TEMPO DO MINISTÉRIO DE ESPORTE Eustáquia S. Sousa Vânia Noronha Carla A. Ribeiro Daniel M. D. Teixeira Duval M. Fernandes Maria Aparecida D. Venâncio
A pesquisa
Contexto
- Necessidade de desenvolver políticas públicas de lazer
e esporte com gestão eficaz, eficiente e efetiva dos seus programas e projetos.
- Utilização eficiente dos recursos.
- Verificar se as ações alcançaram resultados e
contribuíram para uma mudança positiva na situação -problema da política pública.
- Garantir a vivência desses direitos aos cidadãos brasileiros.
Objetivos
- elaborar sistema de monitoramento e avaliação para os programas, considerando os enfoques: eficiência, eficácia quantitativa e qualitativa e efetividade/impacto.
-instituir um modelo de monitoramento e avaliação que incorpore os indicadores de processos e resultados que possam ser verificados num contínuo, e ainda, um método de avaliação em profundidade – efetividade, que possa ser aplicado periodicamente.
Nogueira (1998) define projeto social
como um conjunto de promessas e
compromissos de ação orientados para
um fim. O propósito é “provocar
impactos sobre indivíduos ou grupos”.
Quarta categoria - projetos com baixa programabilidade e elevada interação com os usuários.
Ações “desenhadas” em função das necessidades ou situações particulares do receptor .
Dependem de atividades de legitimação tanto dos
operadores/gestores quanto dos usuários - participação crucial para o funcionamento das ações.
Baixa formalização e rotinização das atividades, contextos técnicos pouco consolidados,
alta discricionariedade do operador e descentralização das ações.
Concepção e Elaboração do Sistema de
M&A
Metodologia participativa
Duas etapas
-Delimitação dos objetos a serem avaliados e o
como (enfoques avaliativos e os meios) - etapa
de concepção
- Elaboração (detalhamento, sistema de
indicadores.)
1ª fase –- Identificação do ambiente e detalhamento da demanda – Programa Segundo Tempo
Reuniões ME
Oficina de levantamento dos componentes com gestores do programa no ME - BSB
Oficina de levantamento dos componentes com especialistas, colaboradores e gestores de convênios - BH
Oficina de validação dos componentes - BSB
2ª fase –- Sistema de M&A – Programa Segundo Tempo
ELABORAÇÃO
elaboração dos indicadores com base nos componentes estabelecidos na 1ª fase
3ª fase –– Piloto do sistema do M&A –
testar os principais instrumentos elaborados para o Sistema de Monitoramento & Avaliação (observação, survey, grupo focal, entrevistas)
4ª fase
APLICAÇÃO DO SURVEY NACIONAL
5ª fase
O plano amostral considerou:
Regiões: Centro-Oeste, Nordeste, Norte, Sudeste e Sul;
Local – capital ou interior;
Esfera - estadual, municipal ou ONG e
Espaço – comunidade ou escola.
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Resultados da Pesquisa Nacional:
Considerações Iniciais
•Esclarecimento: refere-se à aplicação de apenas um dos instrumentos do sistema de M&A proposto. Não podemos desconsiderar as demais fontes de informação.
Resultados da Pesquisa Nacional:
Considerações Iniciais
•Período de realização: 21/08 a 29/09.
•Amostra: 1961 pessoas (64,4% beneficiados e 35,6% responsáveis).
•Instrumento: questionário com questões fechadas e abertas •Objetivo: percepção sobre o programa
Resultados da Pesquisa Nacional:
Caracterização dos Beneficiados:
•Sexo: predominantemente masculino. •Idade: média de 12 anos.
•Escolaridade: ensino fundamental.
•Deficiências: 2% se declararam, 24% reconhecem no núcleo.
•Renda média mensal: R$ 1074,35, com maior concentração até R$ 600,00
GRÁFICO 19 – Faixa etária
Fonte: TAB. 20 – Pesquisa de dados
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
0 a 5 anos 6 a 11 anos 12 a 17 anos Mais de 17 anos 0,9 34,0 64,3 0,8 P er cen tu al Faixa Etária
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Não freqüentou escola Ensino Fundamental I incompleto (1ª a 3ª série do …
Ensino Fundamental I completo (4ª série do … Ensino Fundamental II incompleto (5ª a 7ª série … Ensino Fundamental II (8ª série do Fundamental) Ensino médio incompleto (1ª ou 2ª série do Ensino … Ensino médio completo (3ª série do Ensino Médio)
De Superior completo a pós-graduação Não sabe/Não respondeu/Não informou
0,9 16,5 12,0 50,9 12,6 6,1 0,8 0,1 0,3 Percentual Esc o la ridad e
GRÁFICO 20 – Escolaridade dos Beneficiados Fonte: TAB. 21 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Sem Renda De R$ 1,00 a 600,00 De R$ 600,01 a R$ 1.250,00 De R$ 1.250,01 a R$ 2.000,00 Mais que R$2.000,00 Não sabe Não respondeu 0,2 40,1 30,0 12,8 4,1 12,3 0,4 Percentual Fai xa d e R end a
GRÁFICO 21 – Renda familiar dos beneficiados Fonte: TAB. 22 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Inserção dos Beneficiados
•Critérios de participação/permanência: 69% afirmam não haver critérios e 17% reconhecem sua existência.
•Freqüência semanal: 70,6% atingem a freqüência mínima desejada. •Horas diárias: tempo de permanência no núcleo desejado é alcançado por 56,5%.
•Motivos para participação: para 44% a prática esportiva e para 35% a vivência do lazer.
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
NS/NR Atitudes no programa - critérios de permanência Outros Comportamento Atitudes na escola Critérios do programa 11,1 14,2 14,2 14,7 17,8 28,0 Percentual Cr it ério s
GRÁFICO 22 – Critérios para acesso Fonte: TAB. 23 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
1 2 3 4 5 6 7 Não sabe 3,4 25,4 44,7 6,9 18,5 0,4 0,1 0,6 P er cen tu al Número de dias
GRÁFICO 24 – Frequência em dias na semana Fonte: TAB. 25 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Até 1 h De 1h a 2h De 2h a 3h De 3h a 4h De 4h a 5h Mais e 5h NS e NR 1,1 21,6 33,1 23,4 17,2 2,6 0,9 Percentual h or as d iá rias
GRÁFICO 25 – Horas diárias de atividades Fonte: TAB. 26 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Outros Socialização Saúde e qualidade de vida Não sabe e não respondeu Educação Lazer Esporte 1,9 2,8 3,7 4,5 8,3 35,0 44,0 Percentual Motiv o p ar a p artic ipar
GRÁFICO 26 – Motivo dos beneficiados para participação Fonte: TAB. 27 – Pesquisa de dados
Resultados da Pesquisa Nacional:
Atividades esportivas
•Modalidades mais presentes: futebol/futsal (57,7%). •Predomínio: modalidades coletivas (84,6%).
•Eventos: 58% nunca participaram.
•Avaliação: 72,7% avaliam positivamente.
•Local onde são realizadas: 57% fora da escola
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
0,0 0,1 0,2 0,2 0,2 0,4 0,5 0,6 1,1 2,4 2,6 3,2 4,4 9,2 17,0 22,3 35,4 Rugby Tênis de mesa Tae-kwon-do Futevolei Lutas Atletismo/corrida Ginástica Judô Karate Capoeira Xadrez Natação Basquete Handebol Volei Futsal Futebol Percentual
GRÁFICO 27 – Modalidades esportivas (somatório das 1ª e 2ª opções) Fonte: TAB. 28 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Atividades não esportivas
•Presença nos núcleos: 51% afirmam participar.
•Atividades mais desenvolvidas: jogos e brincadeiras (53,6%). •Avaliação: 79,4% avaliam positivamente.
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Jogos e brincadeiras Reforço escolar Arte/Cultura Qualificação profissional Outros 53,6 20,3 20,1 3,7 2,2 Percentual Ti p o d e ativi d ade c o mp lemen tar
GRÁFICO 28 – Atividades complementares - Modalidades não esportivas Fonte: TAB. 29 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Equipe, materiais e infraestrutura:
•Coordenação: 69% reconhecem o coordenador
•Oferta do lanche: para 84,1% o lanche é sempre servido. •Avaliação do lanche: 74,6% avaliam positivamente.
•Se não houvesse lanche: 95% continuariam
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Sempre Quase sempre
Às vezes Raramente Nunca Não sabe 84,1 2,3 2,6 0,4 8,4 2,2 P er cen tu al Frequência do lanche
GRÁFICO 29 – Frequência com que o lanche é servido Fonte: TAB. 31 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Muito boa Boa Regular Ruim Muito ruim NS/NR 15,4 59,2 12,3 1,2 0,9 11,1 P er cen tu al Avaliação do lanche
GRÁFICO 30– Avaliação de qualidade do lanche Fonte: TAB. 32 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Equipe, materiais e infraestrutura:
•Limpeza: positiva para 74,8%. •Segurança: positiva para 69,3%. •Água: positiva para 66,5%.
•Banheiro/vestiário: positiva para 57,1%
•Avaliação da infraestrutura: positiva para 85,7%
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Equipe, materiais e infraestrutura:
•Horário: positiva para 89,3%
•Atuação do monitor: positiva para 85,3%
•Atuação do coordenador: positiva para 82,3% •Comunicação/divulgação: positiva para 81,2%
•Qualidade de material esportivo: positiva para 79,8% •Quantidade do material esportivo: positiva para76,8%
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Banheiro - vestiário Bebedouro ou acesso a água …
Local para lanche Segurança Limpeza Espaço físico externo disponível Quantidade do material …
Ventilação Iluminação Qualidade do material … Comunicação e divulgação … Espaço físico interno disponível
Atuação do coordenador do … Diversificação das atividades
Atuação do monitor Local das atividades Horário das atividades
57,1 66,5 69,2 69,3 74,8 75,0 76,8 78,9 79,0 79,8 81,2 81,3 82,3 85,1 85,3 85,7 89,3 18,8 15,5 12,6 18,0 17,5 14,9 14,8 12,2 10,7 13,6 11,4 14,0 7,7 10,9 7,1 10,9 7,3 15,6 11,7 4,3 7,9 6,7 4,8 5,1 6,7 6,1 3,6 2,5 2,8 1,8 1,9 2,1 2,7 2,3 7,6 5,4 13,2 3,5 0,1 4,4 0,2 1,2 1,9 0,2 0,5 1,2 0,4 0,2 2,1 0,1 0,1 0,9 0,9 0,7 1,3 0,9 0,9 3,1 1,0 2,3 2,8 4,4 0,7 7,8 1,9 3,4 0,6 1,0 Percentual It ens a val ia dos
Bom Regular Ruim Não existe no núcleo NS/NR
GRÁFICO 32 – Avaliação do espaço, infraestrutura, material e funcionamento Fonte: TAB. 34 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Influência do Programa:
•Disposição para exercitar-se: melhorou para 84,2%. •Auto estima: melhorou para 83,4%.
•Convívio social: melhorou para 82,2%.
•Interesse pelas atividades escolares: melhorou para 77,4%. •Condições de saúde: melhorou para 74,9%.
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Influência do Programa:
•Rendimento escolar: melhorou para 74,4%. •Convívio familiar: melhorou para 73%.
•Cuidados com a alimentação: melhorou para 71,4%. •Qualidade do sono: melhorou para 67,8%.
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Qualidade do sono Cuidado com alimentação Convívio familiar Rendimento escolar Condição de saúde Capacidade de comunicação e defesa de ideias Interesse pelas atividades escolares Convívio social – relação com os amigos Auto estima – gostar de si mesmo (a) Disposição para se exercitar fisicamente
67,8 71,4 73,0 74,4 74,9 77,0 77,7 82,2 83,4 84,2 28,1 27,0 24,3 21,6 24,1 20,9 19,0 16,3 14,7 13,4 3,6 1,1 2,3 3,3 0,6 1,6 3,0 1,1 1,4 2,1 Percentual It ens A val ia d o s
Melhorou/aumentou Não alterou Piorou/diminuiu NS/NR
GRÁFICO 33 – Percepção de mudanças ocorridas e atribuídas ao Programa Fonte: TAB. 35 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
Resultados da Pesquisa Nacional:
Influência do Programa:
•Benefícios: 86,9% identificaram benefícios
•Principal benefício: desenvolvimento pessoal (29,4%)
•O que falta ao programa: nada para 52,6%. Para 17,6% faltam mais atividades esportivas.
•Nota: avaliação positiva para 95,5% - notas entre 7 e 10.
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Outros Percebe benefício, mas não o descreve Não percebe nenhum benefícios NS/NR Melhoria na prática esportiva Melhoria da saúde e qualidade de vida Desenvolvimento da comunidade e convívio social Desenvolvimento pessoal 4,3 4,4 6,0 7,1 10,4 16,0 22,6 29,4 Percentual Princi p al b ene fíc io p er cebid o
GRÁFICO 34 – Principal benefício atribuído ao Segundo Tempo Fonte: TAB. 36 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Reforço escolar Qualificação e preparo para o trabalho NS/NR Outros Infraestrutura e equipamentos Atividade e modalidades esportivas Nada 1,5 3,5 6,0 7,0 11,7 17,6 52,6 Percentual Sug es tão d e al go p ar a ac resc en tar/melhor aa r
GRÁFICO 35 – Existência e a indicação de algo não contemplado no Programa Fonte: TAB. 37 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
ENCONTRO NACIONAL DO PROGRAMA SEGUNDO TEMPO
Muito Bom Bom Regular Ruim Muito Ruim Não sabe Não respondeu 74,6 20,9 0,8 0,3 2,8 0,6 0,2 P er cen tu al
Avaliação do beneficiado - conceitos
GRÁFICO 36 – Avaliação do beneficiado Fonte: TAB. 38 – Pesquisa de dados
Encontro Nacional do Programa Segundo Tempo
Considerações Finais:
•Políticas públicas:
•Relação com as IES dos monitores/estagiários: •Relação com o sistema escolar:
•Ensino do esporte: