Contribuições da Avaliação do
Programa de Formação Continuada Multicurso
para o aprimoramento
A Avaliação de seus projetos é uma diretriz normativa da Fundação
Roberto Marinho tendo em vista que valorizamos identificar :
Desafios, acertos e erros.
Tal política tem como finalidade responder perguntas como:
O que aprendemos com a avaliação?
Como ela contribui para a realização de nossa missão?
Como ela contribui para o relacionamento com os parceiros?
Procedimentos fundamentais:
- planejamento: definição das questões, objetivos e indicadores; públicos;
etapas de verificação; orçamento
- banco de dados – cadastro dos beneficiários
- contratação de um instituto: desenho e execução da avaliação externa
Aplicação de metodologias distintas:
- Mix de métodos quantitativos e/ou qualitativos
Demanda
Desenho do Projeto
Planejamento
Implementação
Utilização dos resultados
Cultura da Avaliação: diretrizes
Monitoramento e
A
valiação
Monitoramento e
A
valiação
Indicadores
Quadro lógico
Briefing
Relatório
Meta-avaliação
Artigos
Gestão Compartilhada
(Equipes Teleducação e Avaliação )
Contratação de um instituto:
Empresa e Pesquisadores responsáveis
INNOVA – Pesquisa & Assessoria
LAED PUC-Rio
Pesquisadores
Maria Dolores Bombardelli Kappel
Alicia Maria Catalano de Bonamino
Cynthia Paes de Carvalho
Fátima Cristina de Mendonça Alves
Maria Inês do Rego Monteiro Bomfim
Eduardo Wagner
Números (2008, 2009 e 2010)
1.000 Educadores
-
Professores de Matemática
-
Técnicos da Secretaria de Educação
-
Gestores (Coordenadores e Diretores de Escola)
252 Escolas
31.000 Alunos
Multicurso Matemática
Espírito Santo
Contexto
Programa de Formação continuada para professores de Matemática do
Ensino Médio e gestores, adotado como Política Pública no Estado
Objetivos:
Promover a melhoria da aprendizagem dos alunos do Ensino
Médio
Desenvolver rede de aprendizagem colaborativa
Promover a adoção de novas práticas no ensino
Avaliar a contribuição do Programa no que se refere à:
1. Melhoria do desempenho cognitivo em Matemática dos alunos da
Rede Estadual do Ensino Médio;
2. Adoção de novas práticas pelos professores no ensino da
Matemática na Rede Estadual do Ensino Médio do Espírito Santo.
Avaliação dos mesmos alunos Professores Maio 2008 Avaliação dos alunos do 1º ano do Ensino Médio Professores (oficinas) Gestores Início Multicurso
Agosto 2008 Julho 2009 Outubro 2010
M1
M2
M3
11 meses 26 meses Avaliação dos mesmos alunos Professores GestoresEstudo longitudinal
Aprendizagem
Desenho da Avaliação
- Teste cognitivo com 44 itens de Matemática
- Questionário sócio demográfico (86 perguntas)
Ano
Total de alunos
Previsto Real Retorno (%)
2008 – Marco Zero
14.000
10.007
71,5
2009 – Marco Um
13.036
9.323
71,5
2010 – Marco Dois
10.439
6.699
64,2
Fonte: Avaliação do Programa de Formação Continuada - Multicurso Matemática Ensino Médio - ES, 2008/2009/20
Alunos do Ensino Médio
Participantes da Pesquisa
Professores
Total
Previsto
Real
Retorno (%)
2008 – Marco Zero
1083
837
77,3
2009 – Marco Um
1031
903
87,6
2010 – Marco Dois
958
659
67,8
Fonte: Avaliação do Programa de Formação Continuada - Multicurso Matemática Ensino Médio - ES, 2008/2009/2010.
Questionário Contextual com 155 questões
Professores
Grupos Focais com:
tutores, coordenadores de grupos de estudo e alunos Contribuir para melhoria da proficiência dos
alunos
Questionário sociodemográfico com alunos Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU
Questionário contextual com:
professores, gestores, pedagogos e alunos
Oficinas de avaliação de práticas pedagógicas Teste cognitivo com alunos
Análise do programa feita por especialistas Verificar apropriação dos princípios e recursos
do programa pelos professores
Desenvolver uma rede de aprendizagem qualificada e colaborativa
Captar a percepção dos alunos sobre mudanças na prática pedagógica do professor
Grupos Focais com:
tutores, coordenadores de grupos de estudo e alunos
Contribuir para melhoria da proficiência dos alunos
Questionário sociodemográfico com alunos
Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU
Questionário contextual com:
professores, gestores, pedagogos e alunos
Oficinas de avaliação de práticas pedagógicas
Teste cognitivo com alunos
Análise do programa feita por especialistas Apropriação dos princípios e recursos do
programa pelos professores Desenvolvimento de uma rede de
aprendizagem qualificada e colaborativa
Percepção dos alunos sobre mudanças na prática pedagógica do professor
Grupos Focais com:
tutores, coordenadores de grupos de estudo e alunos
Melhoria na proficiência dos alunos
Questionário sociodemográfico com alunos
Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU
Questionário contextual com:
professores, gestores, pedagogos e alunos
Oficinas de avaliação de práticas pedagógicas Teste cognitivo com alunos
Análise do programa feita por especialistas
Apropriação dos princípios e recursos do programa pelos professores
Desenvolver uma rede de aprendizagem qualificada e colaborativa
Percepção dos alunos sobre mudanças na prática pedagógica do professor
Grupos Focais com:
tutores, coordenadores de grupos de estudo e alunos
Melhoria na proficiência dos alunos
Questionário sociodemográfico com alunos
Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU
Questionário contextual com:
professores, gestores, pedagogos e alunos
Oficinas de avaliação de práticas pedagógicas Teste cognitivo com alunos
Análise do programa feita por especialistas Apropriação dos princípios e recursos do
programa pelos professores Desenvolvimento de uma rede de
aprendizagem qualificada e colaborativa
Captar a percepção dos alunos sobre mudanças na prática pedagógica do professor
Grupos Focais com:
tutores, coordenadores de grupos de estudo e alunos
Melhoria na proficiência dos alunos
Questionário sociodemográfico com alunos
Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU
Questionário contextual com:
professores, gestores, pedagogos e alunos
Oficinas de avaliação de práticas pedagógicas
Teste cognitivo com alunos
Análise do programa feita por especialistas Verificar apropriação dos princípios e recursos
do programa pelos professores
Desenvolvimento de uma rede de
aprendizagem qualificada e colaborativa
Percepção dos alunos sobre mudanças na prática pedagógica do professor
Resultados da Avaliação - Professores
Frequência Professores (%)
2009 2010
Procurei participar de todas as atividades do Multicurso 92,1 97,9
O trabalho em colaboração com meus colegas de grupo de estudo foi decisivo no meu
aproveitamento do Multicurso 85,1 96,2
O Multicurso estimula um ambiente de trabalho mais cooperativo na escola 83,1 96,7
O Multicurso foi bastante útil para minha prática pedagógica 81,4 97,1
O Multicurso cumpriu seus objetivos como Programa de Formação Continuada 78,4 94,6
O Multicurso atendeu às minhas expectativas 72,4 93,1
O Multicurso não ajudou a melhorar minha prática como professor(a) de Matemática 12,3 16,4
Só participei do Multicurso em virtude do adicional financeiro 6,9 5,9
O valores
nega,vos
indicam
MENOR uso
de recursos
pedagógicos
Fonte: Avaliação do Programa de Formação Con,nuada ‐ Mul,curso Matemá,ca Ensino Médio ‐ ES, 2008/2009/2010
Fonte: Avaliação do Programa de Formação Con,nuada ‐ Mul,curso Matemá,ca Ensino Médio ‐ ES, 2008/2009/2010
Fonte: Projeto Mul,curso Ensino Médio no Espírito Santo 2010