Estudo Piloto

Nos meses de maio e junho de 2013, a equipe de entrevistadores foi exaustivamente treinada, de modo a padronizar os termos utilizados, ter familiaridade com o instrumento e alcançar uniformidade em todo o processo de entrevista. O treinamento consistiu em etapa teórica e momentos práticos. Durante a etapa teórica,

foram realizados diversos momentos com leitura e aplicação do instrumento dentro da equipe. Foram discutidos, amiúde, todas as variáveis utilizadas, os termos e conceitos empregados e as categorias de respostas.

Nos momentos práticos, os entrevistadores foram apresentados ao dispositivo

tablet, foram orientados quanto à sua adequada operação, conheceram o aplicativo

utilizado para a coleta de dados, tiveram contato com o instrumento na sua versão eletrônica, testaram a sua utilização, marcação de respostas e demais operações. Procederam, diversas vezes à aplicação do instrumento com os colegas e com os supervisores. Nesta etapa também foi verificado o tempo médio de duração das entrevistas.

Em outro momento prático, foi realizado estudo piloto em um setor censitário destinado exclusivamente para este fim. Durante o estudo piloto foram avaliados a estrutura do instrumento, os procedimentos de percurso do setor censitário, bem como o desempenho dos entrevistadores, tanto no que diz respeito à abordagem do domicílio e dos participantes, como no que se refere ao domínio do instrumento e tempo dispendido durante as entrevistas.

A uniformidade na aplicação do formulário de estudo foi avaliada por meio da concordância intraobservador e interobservador. Para isso, cada um dos dez entrevistadores aplicou o instrumento de coleta a dois participantes voluntários. Para um destes, o mesmo entrevistador repetiu a aplicação do formulário em um intervalo de tempo médio de 30 horas. Para o outro participante, a segunda entrevista foi realizada por um dos supervisores da pesquisa, considerado “entrevistador-padrão” também com intervalo de tempo médio de 30 horas.

As entrevistas foram realizadas com participantes voluntários, residentes em setores censitários do município não incluídos na pesquisa. Ressalta-se que as pessoas entrevistadas foram comparáveis aos participantes do estudo, no que se refere ao perfil sociodemográfico, condução de veículos e local de residência. As entrevistas duraram, em média, entre 15 a 20 minutos.

O formulário de entrevista utilizado nessa etapa foi uma versão reduzida do questionário aplicado na pesquisa. Foram selecionadas questões que, de alguma maneira, demandavam interpretação do enunciado, ou das respostas, ou de conceitos. Nesse questionário, havia blocos com questões sociodemográficas,

questões relativas à condução de veículos motorizados, hábitos e comportamentos no trânsito, além do bloco de questões da qualidade de vida.

Os níveis de concordância foram verificados entre as entrevistas de um mesmo examinador – concordância intraobservador – e entre a entrevista de um examinador e a entrevista padrão – concordância interobservador. Desse modo, foi estimado, para ambos os casos, o coeficiente Kappa. A classificação adotada foi a proposta por Landis e Koch (1977) 59_{, na qual são consideradas concordâncias “moderada”,}

“substancial” e “quase perfeita” para Coeficientes Kappa de 0,40 a 0,59, de 0,60 a 0,79, e de 0,80 a 1,00, respectivamente.

Para as oito dimensões do instrumento de Qualidade de Vida utilizado (Medical

Outcomes Study 36 – Item Short-Form Health Survey – SF-36), também foram

calculados coeficientes de correlação de Pearson entre os escores obtidos nas avaliações intraobservador e interobservador.

Abaixo, estão apresentados os percentuais de questões que apresentaram concordância substancial e quase perfeita, além do coeficiente Kappa médio, e seu respectivo desvio-padrão para cada bloco de variáveis, e os coeficientes de correlação estimados.

4.6.2.1 Resultados da validação:

Bloco de variáveis sociodemográficas:

Do total de 15 variáveis, obteve-se concordância de substancial a quase perfeita (Coeficiente Kappa ≥ 0,60) em 100% das variáveis na avaliação de concordância intraobservador, e 80% na avaliação de concordância entre o examinador e o entrevistador padrão. O coeficiente Kappa médio para este bloco de variáveis, foi de 1 (desvio padrão 0), na avaliação de concordância intraobservador, e 0,84 (desvio padrão 0,19), na avaliação interobservador.

Bloco de variáveis relativas à condução de veículos motorizados, hábitos e comportamentos:

Do total de 18 variáveis, obteve-se concordância de substancial a quase perfeita (Coeficiente Kappa ≥ 0,60) em 83%, tanto na avaliação de concordância intraobservador quanto entre o examinador e o entrevistador padrão. O coeficiente Kappa médio para este bloco de variáveis foi de 0,85 (desvio padrão 0,19) na avaliação de concordância intraobservador, e 0,78 (desvio padrão 0,25), na avaliação interobservador.

Bloco de Qualidade de Vida:

Para esse bloco, a avaliação se deu a partir do cálculo do escore das oito dimensões de qualidade de vida do instrumento SF-36 (Medical Outcomes Study 36

– Item Short-Form Health Survey). O coeficiente Kappa médio para os escores das

oito dimensões foi de 0,58 (desvio padrão 0,22), na avaliação de concordância intraobservador, e 0,29 (desvio padrão 0,24), na avaliação de concordância entre o examinador e o entrevistador padrão. Além do coeficiente Kappa médio, e seu respectivo desvio padrão, nos dois tipos de avaliação são apresentados os coeficientes de correlação de Pearson (Tabela 1).

Tabela 1. Concordância intraobservador e interobservador das oito dimensões

de qualidade de vida do instrumento SF-36, avaliado pelo coeficiente de correlação de Pearson. Jequié-BA, 2013.

Dimensões de Qualidade de Vida Coeficientes de Correlação Intraobservador Interobservador Capacidade funcional 0,9896** 0,8165 * Aspectos físicos 0,9456** - Dor 0,8577* 0,6838*

Estado geral de saúde 0,8461* 0,6972*

Vitalidade 0,9729** 0,8371* Aspectos sociais 0,7974* 0,6965* Aspectos emocionais 1** 0,9174** Saúde mental 0,9431** 0,9157** * p < 0,05 ** p < 0,001

Estes resultados são considerados satisfatórios para a qualidade dos dados do trabalho de campo. Para as variáveis em que houve níveis de concordância inferiores a 0,40 do coeficiente Kappa (ligeira concordância, concordância pobre ou sem concordância), houve treinamento adicional com a equipe de entrevistadores.