Reflexão crítica sobre a pesquisa de levantamento
D ESAFIOS ( CONTINUAÇÃO ) Como os resultados foram publica-
dos? Os resultados do levantamento da Fundação A (75% dos estudantes seriamente despreparados) foram pu- blicados na Chronicle combinando as categorias “concordo fortemente” e “concordo com reservas”. Os resulta- dos do levantamento da Fundação B (18,8% dos estudantes nada prepara- dos) representavam apenas aqueles que escolheram a categoria “nada preparados”. Como você acha que os resultados seriam se a estimativa da Fundação A contivesse apenas os res- pondentes que escolheram a resposta “concordo fortemente”?
3. Uma pequena faculdade de ciências hu- manas criou uma força-tarefa, sob direção do pró-reitor de assuntos estudantis, para analisar a qualidade das experiências dos estudantes em seu campus. A força-ta- refa decidiu fazer um levantamento para determinar o conhecimento dos alunos e suas percepções sobre a justiça do siste- ma judicial usado para aplicar as regras nas unidades residenciais do campus. O questionário do levantamento continha questões pessoais, que pediam para os alunos descreverem suas experiências em situações em que violaram políticas da faculdade ou quando souberam que outros estudantes haviam violado as po- líticas. Criou-se uma amostra aleatória estratificada a partir da lista de matrículas, com alunos que moravam dentro e fora do campus. O tamanho da amostra era de 400 estudantes, em um campus com 2 mil. Os questionários foram devolvidos por 160 estudantes, com uma taxa de resposta de 40%. Um resultado impor- tante do levantamento foi que mais de um terço dos respondentes consideravam o sistema judicial injusto. A força-tarefa se reuniu para decidir se devia incluir esse tipo de resultado em seu relatório final para o pró-reitor de assuntos estudantis.
A. Será que a amostra inicial de 400 es- tudantes era provável de ser repre- sentativa da população de 2 mil estu- dantes? Por quê? Ou por que não?
B. Identifique um problema potencial exis- tente na pesquisa de levantamento que poderia estar presente nesse estudo e que levaria a força-tarefa a se pre- ocupar que a amostra final não fosse representativa da população de 2 mil estudantes.
C. Usando apenas a evidência de que a taxa de resposta para o levantamento foi de 40%, a força-tarefa concluiu que a amostra final não era represen- tativa da população de estudantes. Decidiram também que as avaliações do sistema judicial como injusto por mais de um terço dos estudantes era uma estimativa exagerada e incorreta. Você concorda que o resultado repre- senta uma estimativa incorreta? Por quê? Ou por que não?
D. Enquanto a força-tarefa se reunia para discutir seu relatório final, um membro expressou a opinião de que era improvável que as respostas dos alunos fossem verdadeiras e, assim, os resultados do levantamento eram inúteis e não deviam ser divulgados. O diretor da força-tarefa pede que você responda a essa afirmação. O que você diria?
4. Como estagiário no escritório de ex- -alunos em uma pequena faculdade, uma das suas tarefas é ajudar a desen- volver um projeto de pesquisa com o uso de um levantamento. A faculdade está interessada em conhecer as atitu- des dos egressos quanto às suas expe- riências acadêmicas e extracurriculares enquanto estudavam na faculdade. O diretor também quer incluir questões para avaliar as opiniões dos ex-alunos sobre as diferentes atividades que a fa- culdade patrocina para eles (p.ex., reu- niões) e como preferem ser informados sobre problemas e atividades no cam- pus (p.ex., boletins, e-mails, postagens no website da faculdade). Um dos prin- cipais objetivos do levantamento é de- terminar como as atitudes dos ex-alunos mudam um, cinco ou dez anos depois da graduação.
Resposta ao Exercício I
1. D 2. B 3. A 4. C
A.
D
ESAFIOS(
CONTINUAÇÃO)
O primeiro passo é selecionar o dese- nho de pesquisa para o projeto. Des- creva os dois desenhos que podem ser usados para medir mudanças em ati- tudes ao longo do tempo. Apresente como esses desenhos seriam imple- mentados para o projeto, e identifique as vantagens e possíveis limitações de cada desenho.
B. O segundo passo é selecionar o mé- todo de levantamento para o projeto. Os membros do comitê de planeja- mento propuseram três abordagens diferentes: (1) selecione uma amos- tra aleatória de ex-alunos a partir da lista do escritório de ex-alunos e use um levantamento telefônico para ad- ministrar o questionário; (2) envie um e-mail para uma amostra aleatória de ex-alunos, com um link para um site da internet, onde possam preencher
o questionário; (3) coloque um anún- cio sobre o levantamento e um link para o questionário no website da faculdade, com a solicitação de que todos os ex-alunos que visitarem o website preencham o questionário. Descreva para o comitê as vantagens e limitações de cada abordagem, e apresente uma recomendação e fun- damentação para a abordagem que considerar melhor.
C. O terceiro passo é preparar o ques- tionário. Descreva os diferentes for- matos que podem ser usados para escrever as questões do questionário e prepare um exemplo de uma per- gunta de resposta livre (aberta) e de múltipla escolha (fechada). Use esses exemplos para descrever as vanta- gens e desvantagens de cada forma de questão.
Resposta ao Exercício II
1. O primeiro estudante pesquisador está propondo uma amostra aleatória estratifi- cada, compreendendo 100 estudantes das fraternidades “gregas” e 100 estudantes “independentes”. Nesse plano, os estra- tos de mesmo tamanho teriam amostras representativas para cada estrato. Uma falha potencialmente séria desse plano é que a amostra geral não representaria as proporções de gregos e independentes na população (25% e 75%, respectivamente). Isso resultaria em uma amostra tendencio- sa, pois os gregos seriam sistematicamen- te super-representados no levantamento. O segundo estudante pesquisador está propondo uma amostra aleatória simples de 100 estudantes da população da facul-
dade. Embora isso provavelmente leve a uma amostra mais representativa, prova- velmente resultaria em um número mui- to pequeno de respondentes na categoria “grega” (esperaríamos aproximadamente 25 gregos) para representar seu ponto de vista adequadamente.
2. Um plano de amostragem mais adequa- do usaria uma amostra aleatória estrati- ficada, na qual os tamanhos da amostra para gregos e independentes fossem pro- porcionais aos valores observados na po- pulação. Com 200 estudantes na amostra, você selecionaria 150 estudantes da base amostral de estudantes independentes e 50 estudantes da base amostral de estu- dantes gregos.
Resposta ao Desafio 1
A. De um modo geral, tamanhos de amos- tra maiores tornam mais provável que a amostra seja representativa. O problema nesse estudo é que a amostra final (ain- da que grande) representa uma taxa de resposta baixa em relação à amostra ori- ginal de 100.000 (4,5%). A baixa taxa de resposta e o tema do levantamento tor- nam provável que apenas mulheres que se sentissem motivadas respondessem o levantamento. É improvável que a amos- tra de 4.500 mulheres represente toda a população de mulheres.
B. A baixa taxa de resposta não possibilita argumentar que as conclusões da auto- ra estejam incorretas. Do mesmo modo, a autora não pode dizer, com base nes- sa amostra, que as conclusões estejam corretas. Simplesmente, não podemos saber, com base nessas evidências, se as conclusões estão corretas ou incorretas.
Existe pelo menos uma boa maneira de determinar se os resultados desse levan- tamento estão corretos. Você precisaria obter na literatura os resultados de um ou mais levantamentos sobre as atitudes e práticas sexuais de mulheres. Seria es- sencial que esses outros levantamentos tivessem usado amostras representativas de mulheres. Então, você compararia os resultados deste levantamento com os de outros. Somente se os resultados do levantamento atual correspondessem aos dos levantamentos com amostras repre- sentativas é que consideraríamos corre- tos os resultados do levantamento atual. É claro que você também poderia fazer o seu próprio levantamento, que evitasse os problemas que estão presentes nesse levantamento, e determinar se os seus resultados são semelhantes aos desse autor-pesquisador!
Notas
1. Heatherton e colaboradores (1997) observaram que, como as reduções em problemas alimen- tares foram maiores entre indivíduos no levantamento longitudinal do que nas amostras in- dependentes sucessivas, é provável que os processos maturacionais dos indivíduos, além de mudanças na sociedade, estivessem atuando para reduzir os problemas de alimentação ao longo do tempo.
2. A área de avaliação psicológica interessada em escalas de itens ou estímulos é conhecida como psicofísica, e a área de avaliação preocupada com diferenças individuais é chamada de psicométrica.