Em resumo, observou-se já no primeiro ano de implementação resultados em dimensões estratégicas do programa: acolhimento da escola e incentivo dos responsáveis em relação aos estudos dos alunos. Além disso, há indícios de resultados positivos sobre as dimensões frequência e abandono, ou seja, redução nas faltas dos alunos e na taxa de abandono. Por fim, não é observado impacto do programa na dimensão desempenho.
Tais resultados parecem sustentar a hipótese temporal sobre os efeitos do programa na teoria de mudança do mesmo, isso é, as dimensões que sofreram impacto com o programa devem ser de curto e médio prazo. Por outro lado, é provável que o programa só consiga agir sobre desempenho dos alunos com maior tempo de execução.
Além disso, é interessante notar que o programa possui impactos diferentes de acordo com o tamanho da escola. As subdimensões acolhimento da escola na perspectiva dos alunos e diálogo família-aluno na perspectiva dos responsáveis só são impactadas nas escolas com mais alunos matriculados. Outro ponto que vale ser destacado é que nessas subamostras, o impacto sobre o incentivo dos responsáveis em relação aos estudos dos alunos permanece positivo, ao posso que na subdimensão valorização dos estudos pelos alunos o impacto do programa foi negativo e significante. Esse resultado combinado pode ser um ponto de atenção para a atuação das coordenadoras de pais uma vez que essas duas subdimensões devem ser estimuladas conjuntamente para que sejam melhoradas com o programa. Por fim, a análise de retorno econômico mostra que o programa é bastante viável e gera efeitos multiplicadores mesmo em cenários menos otimistas e considerando apenas os benefícios sobre permanência dos alunos na escola.
De forma geral, os resultados são bastante animadores, pois sinaliza que o programa está na direção certa e pode ser amadurecido e aprimorado durante os próximos anos de atuação.
A fim de intensificar esses resultados, existe a oportunidade de tratar a agenda positiva de forma mais transversal nos atendimentos de forma complementar às ações específicas de mobilização, ou seja, eventos envolvendo os pais nas questões relativas à escola. Existem temas que o coordenador de pais pode abordar que podem guiar os pais no acompanhamento dos filhos. Dicas positivas relativas à rotina de estudos em casa, à forma e às oportunidades de iniciar um diálogo que nem sempre é fácil com o jovem, de se aproximar do seu universo escolar. Acredita-se que, no momento em que a família demonstra interesse sobre o estudo o jovem se sente mais motivado a se dedicar do que quando a relação é de cobrança.
Adicionalmente indica-se uma maior dedicação de atenção para alunos que estão com menor risco de abandono, a fim de ampliar os resultados do programa. São alunos que podem responder de forma mais eficaz às estratégias do programa, desenvolver laços de pertencimento com a escola, serem mais facilmente motivados para os estudos e se tornarem protagonistas entre os demais.
Referências Bibliográficas
Carter, S. (2002) The Impact of Parent/Family Involvement of Student Outcomes: An Annotated Bibliography of Research from the Past Decade.
Consortium for Appropriate Dispute Resolution in Special Education (CADRE), Eugene, OR. (Retrieved from: http://www.directionservice.org/ cadre.)
Cunha, F. et al (2013) Eliciting Maternal Subjective Expectations about Technology of Cognitive Skill Formation. NBER Working Paper No. 19144.
Desforges, C. e Abouchaar, A. (2003) The impact of parental involvement, parental support and family education on pupil achievement and adjustment: A literature review. DfES Research Report RR433. Epstein, J. L. (1984) School Policy and Parental Involvement: Research Results Educational Horizons, v.62 n.2.
Epstein, J. L., e Dauber, S. L. (1991) School programs and teacher practices of parent involvement in inner-city elementary and middle schools. The elementary school journal.
Gertler et al (2012) Empowering parents to improve education: Evidence from rural Mexico. Journal of Development Economics, vol99, issue 1.
Houtenville, A. J. e Conway, K. S. (2008) Parental Effort, School Resources, and Student Achievement. The Journal of Human Resources v.43, n.2.
Jeynes, W. (2012). A meta-analysis of the efficacy of different types of parental involvement programs for urban students. Urban Education, 47(4), 706-742.
Jeynes, W.H. (2010). The salience of the subtle aspects of parental involvement and encouraging that involvement: Implications for school-based programs. Teachers College Record, 112(3), 747-774. Jeynes, W.H. (2007). The relationship between parental involvement and urban secondary school student academic achievement: A meta-analysis. Urban Education, 42(1), 82-110;
Jeynes, W. (2012) A Meta-Analysis of the Efficacy of Different Types of Parental Involvement Programs for Urban Students. Urban Education.
Jimenez, E. e Sawada, Y. (1999) Do Community-Managed Schools Work? An Evaluation of El Salvador’s EDUCO Program. World Bank Economic Review, v.13, issue 3.
Kraft, M. A., e Dougherty, S. M. (2013) The effect of teacher–family communication on student engagement: Evidence from a randomized field experiment. Journal of Research on Educational Effectiveness v.6, n.3.
Loeb, S. e York, B (2014) One step at a time: the effects of an early literacy text messaging program for parents of preschoolers. NBER Working Paper No. 20659.
Macintosh, J. (2007) Family background, parental involvement, and academic achievement in Canadian schools. Economics Department Concordia University, 2007
Mattingly et al (2002) Evaluating Evaluations: The case of parental involvement programs. Review of Educational Research v.72, n.4.
McWayne, Christine M., et al. (2013) Defining family engagement among Latino Head Start parents: A mixed-methods measurement development study. Early Childhood Research Quarterly v.28, n.3.
Mo, Y. e Singh, K. (2008) Parents’ Relationships and Involvement: Effects on Students’ School Engagement and Performance. Research in Middle Level Education, v.31 n.10.
Moore, K. et al (2014) Child Trends’ Evaluation of the Abriendo Puertas/Opening Doors Program: Executive Summary and Discussion Brief. Publication Number: 2014-26. (Acessado em: Childtrends.org) Noel, A.; Stark, P. e Redford, J. (2013) Parent and Family Involvement in Education, from the National Household Education Surveys Program of 2012. First Look. NCES 2013-028. National Center for Education Statistics.
O’Donnell J. e Kirkner S. L. (2014) The Impact of a Collaborative Family Involvement Program on Latino Families and Children’s Educational Performance. School Community Journal, v24 n1.
Phillips, M. (2011) Parenting, Time Use, and Disparities in Academic Outcomes. In: Greg J. Duncan & Richard J. Murnane (eds.) Whither opportunity. Russell Sage ed.
Smith et al (2013) A Quantitative Synthesis of Family Engagement Interventions: A Preliminary
Examination in Rural Context. R2 Ed Working Paper 2013-7. (Acessado em: National Center for Research on Rural Education: r2ed.unl.edu)
Topor, David R., et al. (2010) Parent involvement and student academic performance: A multiple mediational analysis. Journal of prevention & intervention in the community v.38, n.3.
Van Voorhis, L., et al. (2013) The Impact of Family Involvement on the Education of Children Ages 3 to 8: A Focus on Literacy and Math Achievement Outcomes and Social-Emotional Skills. MDRC. (Acessado em http://www.mdrc.org)
Wang, M., Hill N.E, e Hofkens, T. (2014) Parental involvement and African American and European American adolescents’ academic, behavioral, and emotional development in secondary school. Child development v.85, n.6.
Weiss, H.B., Lopez, M. E. (2015, September). Engajamento das Famílias. Uma visão para o século 21. Keynote presentation at the Seminário Aproximação Família-Escola nas Políticas Educacionais, São Paulo, Brasil. (revisão complementada com a Avaliação feita pelo J-PAL e resumo da apresentação do Jameel: “Programa Aprender en Familia Evaluación de Impacto”)
Apêndice A – Tabelas auxiliares
Tabela A1: Relação de escolas por grupo
Município Nome da Escola TDI EF TDI EM Apro-‐ vação EF Apro-‐ vação EM Repro-‐ vação EF Repro-‐ vação EM Aban-‐ dono EF Aban-‐ dono EM IDEB 2011 Alu-‐ nos CO NT RO LE ANAPOLIS COLEGIO ESTADUAL PROFESSOR HELI ALVES FERREIRA
25 31,4 78 68,5 16,8 22,8 5,2 8,7 4,5 939
GOIANIA COLEGIO ESTADUAL ASSIS CHATEAUBRIAND 30 38,7 80,6 62,4 8,9 22,9 10,5 14,7 3,1 1,226 ANAPOLIS COLEGIO ESTADUAL DURVAL
NUNES DA MATA 33,6 36,4 84,5 74,4 10,2 9,4 5,3 16,2 4,3 380 GOIANIA COLEGIO ESTADUAL DEPUTADO
JOSE LUCIANO 37,1 45,1 65,5 55,8 20,2 36,8 14,3 7,4 3 1,169 APARECIDA
DE GOIANIA
COLEGIO ESTADUAL COLINA
AZUL 38,2 50,8 78,1 68,2 14 7 7,9 24,8 3,4 1,763 APARECIDA
DE GOIANIA
COLEGIO ESTADUAL DEPUTADO
JOSE ALVES DE ASSIS 36 44,5 83,1 77,7 10,7 14,1 6,2 8,2 3,5 1,182 APARECIDA
DE GOIANIA
COLEGIO ESTADUAL ESTRELA
DO SUL 26,3 37,1 86 68,9 10,1 17,1 3,9 14 3,6 611 ANAPOLIS COLEGIO ESTADUAL LEINY LOPES DE SOUZA 29,4 44,5 87,6 72,6 6,2 4 6,2 23,4 4,3 819
TRATAD
O
ANAPOLIS COLEGIO ESTADUAL VIRGINIO
SANTILLO 40,2 39,5 76,6 67,1 7,2 13,8 16,2 19,1 4,2 929 GOIANIA COLEGIO ESTADUAL JARDIM GUANABARA 33,5 49,7 80,9 65 10,7 21,9 8,4 13,1 3 1,134 GOIANIA COLEGIO ESTADUAL JOAO
BENNIO 20,5 34,6 79,6 82,4 16,8 14,8 3,6 2,8 3 793 ANAPOLIS COLEGIO ESTADUAL GOMES DE
SOUZA RAMOS 37,3 36 82,2 65 8,9 22,1 8,9 12,9 4,4 824 APARECIDA
DE GOIANIA
COLEGIO ESTADUAL RODOLFO
DE OLIVEIRA 41,1 35,5 76 73 13 7,9 11 19,1 3,5 873 APARECIDA
DE GOIANIA
COLEGIO ESTADUAL DONATO
COUTINHO DE ABREU 26,4 63,1 94,1 61 3,5 6,1 2,4 32,9 3,6 664 ANAPOLIS COLEGIO ESTADUAL PADRE
FERNANDO GOMES DE MELO 26,2 24,5 85,8 62,1 13,3 34 0,9 3,9 4,4 561
INHUMAS COLEGIO ESTADUAL MANOEL VILAVERDE -‐-‐ 36 -‐-‐ 79,7 -‐-‐ 3 -‐-‐ 17,3
1,471 APARECIDA
DE GOIANIA
COLEGIO ESTADUAL GARAVELO
PARK 27,9 46,1 78,7 61,3 11,7 16,9 9,6 21,8 3,3 1,095
Fontes: INEP, 2011 e 2013.
Tabela com características das escolas do grupo de tratamento e as escolhidas para o grupo de controle como contrafactuais. Em vermelho estão destacadas as escolas que participam do programa mas não possuem contrafactuais razoáveis e por isso foram excluídas da análise.
Tabela A2:Cobertura de atendimento do programa
Nome da Escola
Base ADM – Total de Alunos (A)
Distribuiçã o de alunos por escola Atendimen tos (B) Distribuiçã o de atendidos por escola Cobertura (B/A) COLEGIO ESTADUAL VIRGINIO SANTILLO 935 16% 315 34% 34% COLEGIO ESTADUAL JARDIM GUANABARA 1.079 19% 61 7% 6% COLEGIO ESTADUAL JOAO BENNIO 815 14% 248 27% 30% COLEGIO ESTADUAL GOMES DE SOUZA RAMOS 908 16% 17 2% 2% COLEGIO ESTADUAL RODOLFO DE OLIVEIRA 941 16% 74 8% 8% COLEGIO ESTADUAL DONATO COUTINHO DE ABREU 553 9% 104 11% 19% COLEGIO ESTADUAL PADRE FERNANDO GOMES DE MELO 599 10% 95 10% 16% Fontes: Dados sistema de frequência e status de matricula dos alunos, 2012 a 2014.
Tabela A3: Fatores e respectivas variáveis
Perspectiva dos responsáveis
Acolhimento da Escola
Esta escola faz o possível para entender as dúvidas, preocupações e opiniões dos pais. As pessoas me recebem bem na escola do meu filho
As pessoas da escola se importam com o meu filho Eu tenho confiança nas pessoas da escola do meu filho
Esta escola orienta a família sobre como acompanhar a educação dos alunos
A escola tem iniciativas de reconhecimento quando o aluno está indo bem/melhorando seu desempenho
Diálogo família-‐aluno
Converso com o filho sobre o comportamento dele em sala de aula Converso com o filho sobre como ele está indo nos estudos
Converso com o filho sobre seu relacionamento com as pessoas da escola (colegas, professores e funcionários)
Converso com o filho sobre as coisas que ele/ela acha que tem facilidade, talento, tanto no estudo quanto em outras atividades Converso com o filho sobre as coisas que ele/ela acha que tem dificuldade, tanto no estudo quanto em outras atividades Conversa com ele/ ela sobre a importância da escola/ estudos
Converso com o filho sobre o conteúdo aprendido em alguma matéria de interesse Converso com o filho sobre o que vai querer estudar no futuro
Converso com o filho sobre no que vai querer trabalhar no futuro
Perspectiva dos alunos
Acolhimento da escola
Os funcionários da escola estão interessados no bem-‐estar dos alunos Em geral, na escola todos se tratam com respeito
Acho que vale a pena estudar nessa escola
A escola incentiva que a gente fale o que a gente pensa Na escola, posso dizer o que eu sinto, ser eu mesmo
A escola promove atividades sobre assuntos de interesse dos jovens Esta escola é segura para os alunos
Na minha escola os alunos realmente aprendem
Incentivo dos responsáveis
Cobram/incentivam/chamam minha atenção para que eu vá bem na escola Perguntam se fiz o trabalho/lição/tarefa de casa
Elogiam o meu esforço ao realizar bem as atividades da escola (estudar para prova, fazer o dever, fazer os trabalhos) Verificam se eu não estou faltando na aula
Fazem de tudo para que eu não precise faltar na aula
Valorização dos estudos
Vejo pessoas à minha volta que se deram muito bem na vida sem estudar O que importa é ter diploma do ensino médio e não o conteúdo aprendido É melhor trabalhar do que estudar
Tabela A4: Resultados das estimações por variáveis individuais –
Questionário dos responsáveis
Subdimensão
hipotética Variável Efeito Signif.
Acolhimento da escola (+)
Esta escola faz o possível para entender as dúvidas, preocupações e
opiniões dos pais 0,38 *
Eu não me sinto à vontade quando falo com alguém da escola sobre
o meu filho 0,54
As pessoas me recebem bem na escola do meu filho -‐0,00 As pessoas da escola se importam com o meu filho 0,21 ** Eu tenho confiança nas pessoas da escola do meu filho 0,48 *** Esta escola orienta a família sobre como acompanhar a educação
dos alunos 0,27
A escola tem iniciativas de reconhecimento quando o aluno está
indo bem/melhorando seu desempenho 0,39 *** Dummy se o tratamento que a escola deu foi melhor que no ano
anterior 0,09 **
Iniciativa da escola (+)
Número de vezes no ano que a escola enviou comunicado de
reunião de pais -‐0,09
Dummy se a escola enviou comunicado de reunião de pais pelo
menos 1 vez -‐0,02
Dummy se a quantidade de reuniões que foi comunicado foi maior
que ano passado 0,01
Dummy se as reuniões foram mais úteis esse ano em relação ao
anterior 0,01
Número de vezes no ano que o pai recebeu o boletim com notas do
filho -‐0,20
Dummy se o pai recebeu o boletim com notas do filho pelo menos
uma vez no ano -‐0,02
Número de vezes no ano que o pai foi chamado para conversar
sobre problemas de comportamento/aprendizagem -‐0,02 Dummy se o pai foi chamado para conversar sobre problemas de
comportamento/aprendizagem pelo menos uma vez no ano -‐0,05 Número de vezes no ano que o pai responsável foi convidade para
festas e encontros comemorativos -‐0,06 Dummy se o pai responsável foi convidade para festas e encontros
comemorativos pelo menos uma vez no ano -‐0,05 Número de vezes no ano que o pai foi convidado a dar palestras,
ajudar na organização de festas ou ajudar na melhoria da estrutura
da escola 0,06
Dummy se o pai foi convidado a dar palestras, ajudar na
organização de festas ou ajudar na melhoria da estrutura da escola
pelo menos uma vez no ano 0,02 Número de vezes no ano que o pai responsável foi convidado para ir
a escola conversar, excluindo as reuniões de pais e festas/eventos 0,02 Dummy se o pai responsável foi convidado para ir a escola
conversar, excluindo as reuniões de pais e festas/eventos pelo
Iniciativa dos responsáveis (+)
Dummy se a frequência nas reuniões foi maior esse ano em relação
ao anterior 0,02
Número de vezes no mês que o pai foi à escola por iniciativa
própria, excluindo para levar ou buscar seu filho 0,19 *** Dummy se o pai foi à escola por iniciativa própria, excluindo para
levar ou buscar o filho pelo menos uma vez no mês 0,12 *** Dummy se o pai foi mais vezes à escola por iniciativa própria esse
ano em relação ao anterior 0,01 Você se informou sobre as faltas do filho nas aulas 0,32 * Dummy se o pai se informou sobre as faltas do filho nas aulas pelo
menos uma vez no mês 0,06 * Você se informou sobre as notas que ele(a) tirou em provas e
trabalhos -‐0,43
Dummy se o pai se informou sobre as notas que ele(a) tirou em
provas e trabalhos pelo menos uma vez no mês -‐0,05
Diálogo família-‐aluno (+)
Dummy se o conversou mais vezes com o filho sobre as notas que
tirou em provas e trabalhos esse ano em relação ao anterior 0,07 ** Número de vezes no mês que o pai conversou com seu filho sobre
como ele está indo nos estudos 0,92 * Dummy se o pai conversou com o filho sobre como ele está indo
nos estudos pelo menos uma vez no ano 0,16 *** Número de vezes que os pais conversaram sobre como estão indo
seus estudos no mês -‐0,68 * Dummy se os pais conversaram mais sobre seus estudos nesse ano
em relação ao anterior -‐0,00 Número de vezes no ano que o pai conversou com o filho sobre o
boletim 0,98
Dummy se o pai conversou com o filho sobre o boletim pelo menos
uma vez no ano -‐0,01
Converso com o filho sobre o comportamento dele em sala de aula -‐0,20 Converso com o filho sobre como ele está indo nos estudos -‐0,15 Converso com o filho sobre seu relacionamento com as pessoas da
escola (colegas, professores e funcionários) -‐0,38 *** Converso com o filho sobre as coisas que ele/ela acha que tem
facilidade, talento, tanto no estudo quanto em outras atividades -‐0,07 Converso com o filho sobre as coisas que ele/ela acha que tem
dificuldade, tanto no estudo quanto em outras atividades 0,18 Conversa com ele/ ela sobre a importância da escola/ estudos -‐0,11 Converso com o filho sobre o conteúdo aprendido em alguma
matéria de interesse -‐0,09 Fica difícil conversar com o filho porque ele(a) não para em casa -‐0,01 Quando tento conversar com o filho ele parece discordar de tudo 0,05 Converso com o filho sobre o que vai querer estudar no futuro 0,07 Converso com o filho sobre no que vai querer trabalhar no futuro -‐0,09 Rotinas de
estudo (+)
Olhou os cadernos, livros e apostila do seu filho 0,36 Viu se o filho fez as lições/dever/trabalhos de casa -‐1,05 *** O filho estudou em um lugar da casa reservado para isso -‐2,63 *** O filho estudou em horário definido para isso -‐2,09 ***
Valorização do estudo (+)
Cobro/incentivo que o filho se dedique/se esforce na escola 0,13
Às vezes acho que o filho não vai usar para nada o que aprende na
escola -‐0,45
Entendo que o incentivo da família é essencial para motivar os
adolescentes para o estudo -‐0,22 **
Fica difícil o filho se dedique aos estudos se a escola tem uma
qualidade ruim -‐0,80
Tem situações familiares que justificam o filho faltar na aula, como por exemplo ajudar a cuidar de um parente, ajudar no trabalho da
família, ou viajar para estar com a família -‐0,76 **
Converso com o filho sobre como a educação é importante para seu
futuro -‐0,28 **
De modo geral, acredito que se o filho estudar, ele terá uma vida
melhor que a minha -‐0,02
Para mim, a educação escolar é o principal caminho para conseguir
uma profissão valorizada -‐0,13 ***
A escola deve vir sempre em primeiro lugar, mesmo que isso
signifique menos tempo livre para o filho -‐0,04
Dummy se o pai considera estudar com dedicação muito importante
para se dar bem na vida -‐0,05
Tabela A5: Resultados das estimações por variáveis individuais – Questionário dos alunos
Subdimensão
hipotética Variável Efeito Signif.
Acolhimento da escola (+)
Os funcionários da escola estão interessados no bem-‐estar dos
alunos 0,31 **
Em geral, na escola todos se tratam com respeito -‐0,82 ***
Acho que vale a pena estudar nessa escola -‐0,16
Muitos alunos destroem os materiais da escola -‐0,41 **
A escola incentiva que a gente fale o que a gente pensa -‐0,25 **
Na escola, posso dizer o que eu sinto, ser eu mesmo -‐0,07
A escola promove atividades sobre assuntos de interesse dos jovens 0,05
Esta escola é segura para os alunos 0,78 ***
Na minha escola os alunos realmente aprendem 0,41 ***
Muitos alunos faltam aulas mesmo estando na escola -‐0,61 **
A escola ouve pouco os alunos -‐0,63 **
A escola reconhece quando estou indo bem/melhorando meu
desempenho 0,07
Número de vezes que presenciou casos de desrespeito entre alunos
e professores na sala de aula -‐0,64
Número de vezes que os alunos foram reconhecidos na sua escola
quando foram bem nas provas ou melhoraram seu desempenho -‐1,22 ***
Dummy se a escola ouve mais os alunos em relação ao ano anterior 0,05
Rotinas de estudo (+)
Você estudou em um local da casa reservado para isso -‐2,74 ***
Teve um horário definido de estudo em casa -‐1,80 ***
Participou da aula fazendo perguntas ou levantando pontas para
discussão? -‐1,39 **
Deixou de entregar tarelas/trabalhos que os professores pedem
para fazer em casa -‐0,46 ***
Buscou informações de outras fontes para complementar o estudo
de alguma matéria? -‐0,82 **
Foi fazer provas sem ter estudado o suficiente para ir bem (tirar
boas notas) -‐0,28
Incentivo dos responsáveis (-‐)
Cobram/incentivam/chamam minha atenção para que eu vá bem na
escola -‐0,21 ***
Perguntam se fiz o trabalho/lição/tarefa de casa -‐0,01 Elogiam o meu esforço ao realizar bem as atividades da escola
(estudar para prova, fazer o dever, fazer os trabalhos) -‐0,07 Verificam se eu não estou faltando na aula -‐0,07 * Fazem de tudo para que eu não precise faltar na aula -‐0,04 Dummy se os pais cobram/incentivam esse ano mais que ano
anterior 0,12 ***
Diálogo família-‐aluno (+)
Meus pais ou adulto responsável conversam comigo sobre o meu
comportamento na sala de aula 0,02 Meus pais ou adulto responsável conversam comigo sobre minhas
amizades, vida social -‐0,05 Meus pais ou adulto responsável conversam comigo sobre
sexualidade (namoro, relacionamentos homoafetivos, gravidez) 0,60 *** Meus pais procuram saber onde eu estou -‐0,11 ** Entendo que o incentivo da família é essencial para motivas os
adolescentes para o estudo -‐0,18 Meus pais ou adulto responsável conversam comigo sobre como