IF Baiano Instituto Federal de Educação, Ciência e Tecnologia Baiano IF Goiano Instituto Federal de Educação, Ciência e Tecnologia Goiano IF Sudeste. Instituto Federal de Educação, Ciência e Tecnologia IFMT de Mato Grosso IFNMG Instituto Federal de Educação, Ciência e Tecnologia do Norte.
CONTEXTUALIZAÇÃO
Esse arcabouço legal determina que as Instituições Federais de Ensino Superior (IFES), inclusive os IFs e suas especificidades, devem criar mecanismos de monitoramento e avaliação (grifo nosso) do Programa (BRASIL, . 2010). Mesmo com uma queda desde 2020, as estatísticas mostram o volume crescente do orçamento em outros anos que o Governo Federal do Brasil disponibiliza continuamente para a implementação dessa política pública de sustentabilidade estudantil nas instituições federais de ensino.
PROBLEMATIZAÇÃO
Por essa razão, segundo Jannuzzi (2014), o tema da avaliação de políticas e programas públicos/sociais é objeto de progressivo interesse de gestores e pesquisadores brasileiros. A contribuição desta tese limita-se, portanto, ao campo teórico de avaliação da implementação de políticas e programas públicos, com os elementos identificados no PNAES das IFs (ambiente de estudo empírico).
PREMISSAS
Esses estudos tornam ainda mais clara a imprescindibilidade de uma abordagem pluralista de avaliação para verificar a implementação desse programa público. As múltiplas abordagens de avaliação de políticas públicas buscam reconhecer e considerar aspectos quantitativos e qualitativos no contexto do PNAES nos IFs.
OBJETIVOS
Objetivo Geral
Objetivos Específicos – OE
JUSTIFICATIVAS
A lacuna central desta pesquisa é a ausência e/ou conhecimento insuficiente de como a avaliação da implantação do PNAES pode contribuir para os institutos federais, em nível nacional, localizada nas diversas abordagens teórico-metodológicas. A segunda constitui o ponto central da pesquisa que traz a teorização da avaliação de políticas e programas, mais especificamente a avaliação da implementação e as diversas abordagens.
DEFININDO POLÍTICAS E PROGRAMAS PÚBLICOS
Laswell (1936) Harmonizou o conhecimento científico com a produção empírica dos governos, entendendo o termo policy analysis como uma análise de políticas públicas. O ciclo das políticas públicas contribui para a organização das ideias, pois possibilita uma simplificação do processo diante de sua complexidade (SECCHI; COELHO; PIRES, 2019).
AVALIAÇÃO DE POLÍTICAS PÚBLICAS
Avaliando a Implementação
Neste trabalho, o ponto de partida é que o conteúdo da formulação pode ser incluído na avaliação da implementação de políticas e programas públicos. A descrição dessas dimensões analíticas constitui inicialmente uma lente para avaliar a implementação de políticas e programas públicos, com base nessas diversas abordagens teóricas.
As Múltiplas Abordagens de Avaliação de Políticas Públicas
Segundo Vedung (2010), o pressuposto de que uma perspectiva não é contemplada por outra assume um papel inovador na avaliação de políticas públicas. Portanto, estudos modernos de avaliação múltipla e simultânea de políticas públicas à luz de novos desafios teóricos e práticos são cruciais.
O PNAES COMO POLÍTICA PÚBLICA DE PERMANÊNCIA
Essa fase do auxílio estudantil indica a ampliação das políticas de permanência estudantil no ensino superior, por meio da implantação fundamental do PNAES e do repasse de recursos públicos do governo às instituições federais de ensino. Por essas razões, esta pesquisa pretende trazer a avaliação da implantação do PNAES como importante ferramenta para a gestão das políticas de assistência estudantil que se desdobram a partir do Programa. Afirma-se, portanto, que é historicamente inegável a constituição do PNAES como referência de política pública no setor de assistência estudantil (VASCONCELOS, 2010; PEREIRA, 2019).
Ressalta-se que os IFs buscaram desenvolvimento para a implantação do programa a fim de atingir os objetivos descritos na portaria do PNAES e as políticas de assistência estudantil dela decorrentes.
DELINEAMENTO DA PESQUISA
Esta parte trata dos aspectos metodológicos e é composta pelo desenho da pesquisa, estrutura e estratégia de análise. Os respondentes dos questionários e entrevistas da pesquisa foram informados sobre a finalidade e a forma de divulgação dos resultados por meio do Termo de Consentimento Livre e Esclarecido (TCLE) (Anexo A).
ESTRUTURA DA PESQUISA: FASES E TÉCNICAS
- Revisão sistemática da literatura
- Pesquisa Documental
- Questionários
- Entrevistas semiestruturadas
A Fase 1 desta pesquisa buscou responder ao seguinte problema: Como a avaliação do PNAES e/ou das políticas de assistência estudantil é abordada na literatura. Com isso, buscou-se conhecer a percepção da avaliação da implantação do PNAES nos IFs. Após a transcrição das entrevistas, procedeu-se à leitura e classificação de cada seção segundo dimensões e categorias (ver Anexo G), identificando-se, posteriormente, os elementos para subsidiar a avaliação da implantação do PNAES.
O objetivo desta fase 3.1 é identificar quais mecanismos do PNAES estão presentes nos IFs e a percepção desses atores sociais sobre as diversas abordagens com o objetivo de compor a avaliação da implementação do programa.
ESTRATÉGIA DE ANÁLISE
O sistema auxiliou na operacionalização da análise, das relações e interações dos termos estabelecidos entre as dimensões analíticas da avaliação da implementação presentes na pesquisa. Para identificar as dimensões analíticas da avaliação da implementação, foram selecionados a priori achados específicos que fossem capazes de retratar cada dimensão (análise de material). Tabela 17 – Análise de conteúdo Tabela das dimensões analíticas para a avaliação da implantação do PNAES.
A quarta parte (5.4) apresenta uma síntese com a triangulação dos dados, além de delinear e discutir cada dimensão e suas categorias de avaliação da implantação do PNAES.
REVISÃO SISTEMÁTICA DA LITERATURA: AVALIAÇÃO DO PNAES
5 Mapear e verificar a efetividade/eficácia das ações do PNAES e/ou das políticas decorrentes do programa 2 Desenvolver uma ferramenta de proposta/avaliação/intervenção. Analisar/identificar os resultados/ferramentas como forma de avaliar o PNAES e/ou políticas decorrentes do programa. Descrição/compreensão dos efeitos/resultados do PNAES e/ou das políticas decorrentes do programa.
14 Descrição/análise de variáveis/índices relacionados ao PNAES e/ou políticas decorrentes do programa 3. Construção de variáveis e desenvolvimento de modelos.
ELEMENTOS AVALIATIVOS DO PNAES NOS IFs
Entre esses resultados e as discussões dispostas na tese, os elementos elaborados possuem múltiplas perspectivas teórico-metodológicas para a construção de uma avaliação da implementação do PNAES no IF. Desenvolvimento da metodologia de forma mais sistemática e uniforme quanto à distribuição dos recursos do PNAES no IFES. O Quadro 25 apresenta os principais elementos de avaliação do PNAES em IA segundo as respostas dos gestores, a seguir.
Desenvolver a gestão de riscos para priorizar os acertos e mitigar ou eliminar as falhas na implementação do PNAES.
PERCEPÇÕES E CONHECIMENTOS DOS ATORES SOCIAIS DO PNAES NOS IFS
Apesar disso, acreditam que a implantação do PNAES nos IFs é efetivamente avaliada, enquanto acreditam que não há avaliação do programa. A construção de uma avaliação da implementação do PNAES nos IFs tem sido um desafio apontado pelos diversos atores sociais envolvidos no processo, tanto na gestão quanto na linha de frente das políticas. Definir estratégias que incluam os alunos beneficiários do PNAES na construção da avaliação da implantação do programa nos IFs.
Em síntese, essas propostas compõem o rol de elementos e dimensões analíticas da avaliação da implementação do PNAES nos IFs, discutidos em detalhes a seguir.
DISCUSSÃO DOS ELEMENTOS DA AVALIAÇÃO DA IMPLEMENTAÇÃO DO
Dimensão: Análise de Conteúdo da Formulação
Posto isso, considerou-se que o ACF integra a avaliação da implementação de políticas públicas, antes enfatizada pela abordagem teórica e, doravante, reforçada pelo domínio empírico do PNAES nas IFs. O ACF é, assim, revalidado empiricamente como uma dimensão essencial na avaliação da implementação do PNAES nas IFs. Como os aspectos políticos e socioeconômicos podem influenciar na construção da avaliação da implantação do PNAES.
Essas palavras confirmam a relevância que a dimensão ACF tem na avaliação da implementação do PNAES no âmbito das IFs.
Dimensão: Análise de Contexto
Essa evidência foi fortalecida tanto na teoria quanto na prática pelos envolvidos na implantação do PNAES nos IFs. Com base nisso, foi possível analisar que os diferentes contextos são categorias indissociáveis (político, social, econômico, cultural, organizacional) na implementação do PNAES. Assim, analisar os cenários de uma pandemia e outras crises globais que alteram os diferentes contextos foi considerado como uma subcategoria do contexto transacional que afeta diretamente a implementação do PNAES nas IFs, podendo ser um elemento avaliativo da dimensão AC.
Esses recortes indicam a falta dessas diferentes categorias de GR no âmbito do PNAES nos IFs.
Dimensão: Análise do Processo de Implementação
Assim, nota-se que o monitoramento e a avaliação das ações do PNAES nos IFs são essenciais na API. A Tabela 30 a seguir sintetiza a dimensão API como subsídio para a construção de uma avaliação da implantação do PNAES nas IFs. Análise da estrutura organizacional do PNAES nos IFs para a implementação de atividades de apoio estudantil.
Desenvolver metodologia de forma mais sistemática e uniforme quanto à alocação dos recursos do PNAES em IF.
Dimensão: Análise de Recursos
Na percepção de alguns participantes da pesquisa, determinados recursos possuem um grau de relevância diferente de outros na implementação do PNAES nos IFs. Essas falas ilustram e corroboram os achados teóricos, confirmando a interdependência desses recursos na avaliação da implantação do PNAES nos IFs. A Figura 16 a seguir demonstra essas categorias relacionadas à dimensão RA como parte da avaliação da implantação do PNAES nas IFs.
A dimensão AR é estratégica na avaliação da implementação do PNAES nos IFs com base em todas as categorias traçadas, pois os recursos, quando disponibilizados e geridos de forma adequada, podem garantir melhor retorno aos beneficiários do Programa.
Dimensão: Análise de Atores Sociais Envolvidos
Esses atores sociais muitas vezes são os responsáveis por dar suporte aos seus serviços especializados, que influenciam direta ou indiretamente a implementação do PNAES nos IFs. Dessa forma, a análise se baseia na forma como os atores sociais conhecem o Programa, aceitam as regras e analisam as condições organizacionais durante a implantação do PNAES nos IFs. Análise dos conflitos de interesse e relações de poder entre atores sociais na implementação do PNAES.
Como são administrados os conflitos de interesse e as relações de poder entre os atores sociais no PNAES.
Dimensão: Análise de Alcance
Entretanto, a partir da avaliação dos elementos efetivos e ineficazes da implantação do PNAES no IF, ações corretivas e melhorias nas ações de política podem ocorrer. Outro componente presente é a avaliação dos alunos beneficiários do PNAES que não obtiveram sucesso acadêmico (EG3; EG5; ELF3). Avaliação da implantação do PNAES com aspectos quantitativos e qualitativos dos resultados ao longo do processo.
A Figura 20 configura a representação gráfica da dimensão EA e as categorias relacionadas à integração da avaliação da implantação do PNAES nas IFs.
Inter-relações entre as dimensões analíticas e as múltiplas abordagens
Na pesquisa empírica, pode-se observar que houve relações entre as dimensões analíticas ao longo do processo investigativo do PNAES em IF. Nessa linha de estudo, foi elaborada a seguir a Tabela 35, que demonstra as inter-relações entre as dimensões analíticas da avaliação da implementação do PNAES presentes nos documentos acessados na pesquisa. Assim, pode-se dizer que todas as dimensões analíticas da avaliação da implantação do PNAES no IF estão presentes e se relacionam entre si segundo a percepção dos atores envolvidos.
Assim, todas as dimensões analíticas da avaliação da implementação do PNAES nos IFs estiveram de alguma forma conectadas, o que confirma a necessidade de sua análise sistematizada.
CONTRIBUIÇÕES E IMPACTOS DA PESQUISA
O tutorial é composto por seis etapas que podem auxiliar gestores e agentes executivos no conceito de avaliação da implantação do PNAES na IF, conforme segue. O próximo passo é, portanto, fazer um planejamento com as atividades e responsáveis durante o período de avaliação da implantação do PNAES nas IFs. Etapa (2): definir os critérios de avaliação da implantação dos IFs A Etapa 2 consiste na escolha dos critérios (indicadores) e no mapeamento dos riscos de avaliação da implantação que o PNAES apoiará nos IFs.
Por meio da análise das percepções e conhecimento dos principais atores sociais (gestores, executivos e alunos) das IFs sobre os elementos da avaliação da implantação do PNAES, foi possível atingir o objetivo específico 3.
ILUSTRAÇÕES DA OPERACIONALIZAÇÃO DO ORANGE