3.5 Instrumentos e coleta de dados
3.5.2 Matriz de análise e julgamento
No campo da avaliação em saúde, as matrizes são utilizadas para expressar a lógica causal de uma intervenção em sua parte e no todo. De forma geral, os julgamentos são constituídos a partir das respostas às perguntas avaliativas, observadas a partir de critérios e indicadores em comparação com parâmetros ou padrões, que são, por sua vez, definidos por todos os envolvidos. Esses critérios e indicadores, quando dispostos em matrizes, facilitam planejar os instrumentos, a coleta de dados, as técnicas de análises, a organização e interpretação das informações (ALVES et al., 2010).
Assim, a próxima etapa do estudo foi a construção da Matriz de Análise e Julgamento (APÊNDICE B), cujo modelo foi baseado nos estudos de Donateli et al. (2017) e Souza, Vanderlei e Frias (2017) e, para tal, foram seguidos os passos discriminados na Figura 12. Toda essa etapa teve a duração aproximada de três meses.
Figura 12 - Passos para construção da Matriz de Análise e Julgamento
Fonte: Elaborada pela autora
Os indicadores foram elencados a partir das ações dispostas no Modelo Lógico e os critérios avaliativos para cada indicador elaborado, considerou-se a estrutura e os processos pertinentes a cada ação. Entre cada passo, os produtos foram alinhados com a DPS/SES-MG. Com a intenção de legitimar o conteúdo do instrumento, aplicou-se às referências técnicas de promoção da saúde das URS’s, dois questionários com questões relacionadas aos indicadores e critérios que comporam cada subdimensão. Para isso, foi utilizando a escala de quatro
pontos, tipo Likert (DALMORO; VIEIRA, 2013), que variou de 0 a 4 para “nada relevante”, “pouco relevante”, “relevante” e “muito relevante”.
O primeiro questionário foi aplicado presencialmente (reunião da DPS/SES-MG com as 28 URSs) e, o segundo, via FormSUS. As referências técnicas de Promoção da Saúde das URS’s foram elegíveis neste momento, pois são responsáveis pela implementação das políticas estaduais de saúde, assessoramento da organização de serviços nas regiões, coordenação, monitoramento e avaliação das atividades e ações de saúde em âmbito regional (MALACHIAS; LELES; PINTO, 2011).
A Matriz de Análise e Julgamento foi formada pelas dimensões, com suas respectivas subdimensões, indicadores e critérios e a valoração máxima arbitrada em cem pontos, sendo atribuída a cada critério avaliado uma pontuação específica, de acordo com relevância indicada no consenso junto às referências técnicas (Tabela 2).
Tabela 2 - Dimensões, subdimensões, critérios avaliados e pontuação máxima e por critério avaliado da Matriz de Análise e Julgamento
Dimensões Subdimensões Critérios avaliados Pontuação
máxima
Estrutura
Recursos humanos
Existência de referência técnica no município para as ações de promoção da saúde; sua experiência na temática; adequação profissional à função exercida; carga horária semanal de trabalho; vínculo empregatício; disponibilidade de recursos humanos qualificados para o desenvolvimento das ações.
16,0
Insumos Disponibilidade dos insumos e a qualidade dos mesmos para
apoiar o desenvolvimento das ações. 5,5 Gestão
administrativa
Adequabilidade dos serviços; conhecimento e utilização do referencial teórico no desenvolvimento das ações; inclusão da promoção da saúde na agenda municipal; disponibilidade de recurso financeiro para o desenvolvimento das ações de promoção da saúde no município.
18,5
Processos
Educação permanente
Disponibilidade e adequabilidade das capacitações na temática da promoção da saúde, ou seja, a oferta das ações e o público alvo das mesmas.
5,0 Gestão da
informação
Conhecimento da situação de saúde da população, por meio da realização da análise da situação de saúde; adequabilidade da utilização dos dados, ou seja, a utilização da análise no planejamento das ações; o conhecimento da situação da POEPS no município, por meio da análise dos resultados das ações da POEPS desenvolvidas.
7,0
Execução das ações
Oferta à população de espaços participativos que favoreçam o protagonismo da população e a realização dessas ações de forma integrada no município; qualificação dos dados; parcerias intersetoriais governamentais e não governamentais; divulgação dos resultados, tendo como objetivo a discussão dos resultados.
15,0
(Continua...) Fonte: Elaborada pela autora
Tabela 2 - Dimensões, subdimensões, critérios avaliados e pontuação máxima e por critério avaliado da Matriz de Análise e Julgamento
Dimensões Subdimensões Critérios avaliados Pontuação
máxima
Processos
Gestão do processo
Organização das ações de promoção da saúde, por meio da criação de indicadores próprios e monitoramento dos mesmos; planejamento anual das ações; envolvimento da gestão municipal de saúde; direcionamento das ações; desenvolvimento de ações integradas, por meio de encontros intersetoriais periódicos para discussão da implementação da POEPS.
18,0
Resultados Resolubilidade por metas
Alcance das metas nos cinco indicadores pactuados na adesão
à POEPS. 15,0
TOTAL 100,0
(Conclusão) Fonte: Elaborada pela autora
Para a determinação do grau de implementação, foram calculadas as pontuações em cada critério, levando-se em consideração as respostas dos informantes. Dessa forma, foram obtidas as pontuações para as subdimensões e dimensões. Para o cálculo da implementação, realizou-se a média aritmética do total de cada dimensão, criando um subtotal que, posteriormente, forneceu a base para a construção do grau de implementação, utilizando-se o seguinte cálculo:
GI de cada dimensão = /PMx100
e
GI total = ∑ de todas as dimensões/PMx100
Onde:
GI = grau de implementação
PM = pontuação máxima de cada dimensão = média do somatório dos critérios
Como modelo teórico adotou-se a avaliação normativa e a pesquisa avaliativa para definir o grau de implementação da intervenção nos municípios. Segundo Contandriopoulos et al. (1997), esse processo consiste em fazer um julgamento ex-post de uma intervenção com o objetivo de ajudar na tomada de decisão.