Consistência interna do questionário (alfa de Cronbach)

Para analisar a consistência interna do questionário, ou a sua fidelidade, calculou-se o coeficiente alpha de Cronbach, que é habitualmente utilizado em escalas de tipo Likert (como a do presente questionário), sendo habitualmente apontado como o indicador mais importante de fiabilidade de um instrumento. A determinação deste coeficiente, tanto para o total da escala como para as dimensões, permite estimar a homogeneidade dos itens, isto é, estimar até que ponto cada enunciado da escala mede o mesmo conceito de forma equivalente.

O quadro seguinte estabelece a relação entre o alpha de Cronbach e a qualidade da fidelidade da escala.

70

Quadro n.º 13 - Qualidade da fiabilidade de uma escala (Murphy & Davidsholder, 1988, p. 89) Valor do Alpha de Cronbach Nível de Fiabilidade > 0,9 Elevada 0,8 – 0,9 Moderada a Elevada 0,7– 0,8 Apropriada 0,7 Baixa < 0,6 Inaceitável

Ainda que estes autores (Murphy & Davidsholder) considerem um alpha de 0,7 como sendo baixo, de um modo geral, um instrumento ou teste é classificado como tendo fiabilidade apropriada quando o alpha é pelo menos 0.70 (Nunnally, 1978, cit in Maroco & Garcia-Marques, 2006). Contudo, em alguns cenários de investigação das ciências sociais, um alpha de 0.60 é considerado aceitável desde que os resultados obtidos com esse instrumento sejam interpretados com precaução e tenham em conta o contexto de computação do índice (DeVellis, 1991, cit in Maroco & Garcia-Marques, 2006). Neste estudo, para realizar-se a análise da consistência interna/fidelidade do presente questionário calculou-se o alpha de Cronbach, para cada um dos questionários (estudantes e professores). Esse cálculo foi inicialmente realizado para os 45 itens que correspondem aos três objetos/secções do questionário, em cada um dos questionários, e, posteriormente, apenas para os 15 itens de cada um dos objetos/secções de cada um dos questionários.

No quadro seguinte apresentam-se estes resultados (que constam no anexo 3) e a respetiva fidelidade tendo em conta a correspondência expressa no quadro anterior:

Quadro n.º 14 – Consistência interna do questionário

Cálculo da Consistência Interna do Questionário (alfa de Cronbach)

Questionário dos Estudantes

Questionário dos Professores

No conjunto dos três domínios – 45 itens 0,906 (Elevada)

0,909 (Elevada)

Por domínio

Ensino _{(Moderada a Elevada)} 0,857 _{(Moderada a Elevada)} 0,886

Aprendizagem 0,733 (Apropriada) 0,725 (Apropriada) Avaliação 0,795 (Apropriada) 0,774 (Apropriada)

71 Como podemos constatar, o alpha de Cronbach, considerando o total das questões (45) dos três domínios (Ensino, Aprendizagem e Avaliação) é elevado, para ambos os questionários. Valor este que diminui quando calculado para cada um dos domínios individualmente. Assim, no domínio do Ensino o alpha continua elevado, contudo nos domínios da Aprendizagem e da Avaliação o alpha apresenta valores um pouco inferiores, correspondentes à classificação de “Apropriado”, ainda que próximos do moderado.

Ainda que no questionário dos estudantes, no conjunto dos três objetos de estudo (Ensino, Aprendizagem e Avaliação), o valor do alpha tenha sido de 0.906 (elevado), procurou-se identificar, que itens, se eliminados, fariam este valor do alpha aumentar. Para o efeito apresenta-se a seguir um quadro, que mostra que itens são esses:

Quadro n.º 15 – Valor do Alpha de Cronbach do questionário dos estudantes, se alguns itens forem eliminados

Domínio Itens Valor do

alpha

E

n

si

n

o  Questão 15 – Na maioria das disciplinas/unidades curriculares, as aulas desenvolvem-se com os professores expondo os conteúdos previstos nos programas enquanto os alunos vão ouvindo e/ou tomando notas.

0,907 A p re n d iz age

m  Questão 1 – A maioria dos estudantes aprende os conteúdos constantes

nos programas porque tem que estudar para os testes e/ou exames finais. 0,908  Questão 2 – Estudar para os testes e/ou exames finais é, em regra,

suficiente para que os estudantes aprendam o que está previsto nos programas.

0,907

 Questão 5 – A maioria dos estudantes aprende melhor quando os professores utilizam uma diversidade de dinâmicas de sala de aula (e.g. trabalho em grande grupo, trabalho em pequenos grupos, trabalho em pares, trabalho individual).

0,907

A

val

iaç

ão  Questão 5 – Na maioria das disciplinas/unidades curriculares, a avaliação

é, sobretudo, utilizada para atribuir as notas/classificações aos estudantes. 0,907  Questão 11 – Na maioria das disciplinas/unidades curriculares, os

resultados obtidos pelos estudantes nos testes e/ou exames finais são os elementos mais determinantes para a atribuição das suas classificações.

0,908

 Questão 15 – Para a maioria dos estudantes, a avaliação é, no essencial, um processo de administração de testes e/ou exames destinado a atribuir classificações.

72 No questionário dos professores, considerando os três domínios, como vimos anteriormente, o valor do alpha é igualmente muito elevado, nomeadamente 0,909. Contudo, também para este questionário procurou-se identificar, que itens, se eliminados, fariam o valor do alpha aumentar. Assim, à semelhança do que se realizou para os estudantes, apresenta-se a seguir um quadro, que mostra que itens são esses:

Quadro n.º 16 – Valor do Alpha de Cronbach do questionário dos professores, se alguns itens forem eliminados

Domínio Itens Valor do

alpha

E

n

si

n

o  Questão 15 – Na maioria das disciplinas/unidades curriculares, as aulas desenvolvem-se com os professores expondo os conteúdos previstos nos programas enquanto os alunos vão ouvindo e/ou tomando notas.

0,910 A p re n d iz age

m  Questão 1 – A maioria dos estudantes aprende os conteúdos constantes

nos programas porque tem que estudar para os testes e/ou exames finais. 0,910  Questão 2 – Estudar para os testes e/ou exames finais é, em regra,

suficiente para que os estudantes aprendam o que está previsto nos programas.

0,911

 Questão 5 – A maioria dos estudantes aprende melhor quando os professores utilizam uma diversidade de dinâmicas de sala de aula (e.g. trabalho em grande grupo, trabalho em pequenos grupos, trabalho em pares, trabalho individual).

0,910

A

val

iaç

ão  Questão 5 – Na maioria das disciplinas/unidades curriculares, a avaliação

é, sobretudo, utilizada para atribuir as notas/classificações aos estudantes. 0,911  Questão 11 – Na maioria das disciplinas/unidades curriculares, os

resultados obtidos pelos estudantes nos testes e/ou exames finais são os elementos mais determinantes para a atribuição das suas classificações.

0,910

 Questão 15 – Para a maioria dos estudantes, a avaliação é, no essencial, um processo de administração de testes e/ou exames destinado a atribuir classificações.

0,911

Como podemos constatar, em ambos os questionários e considerando o conjunto dos domínios (45 questões) são exatamente os mesmos itens, que se eliminados, possibilitariam o aumento da consistência interna do questionário, ainda que ligeiramente. De facto, eles são menos consistentes com a maioria dos restantes itens de

73 cada secção do questionário, já que, ao contrário deles, estes remetem para o “paradigma tradicional” de ensino transmissivo, aprendizagem memoristica de conteúdos e avaliação por testes/exames finais, ao passo que os restantes remetem mais para o paradigma da aprendizagem ativa, de ensino centrado na aprendizagem e da avaliação formativa. O facto de serem representantes do paradigma tradicional de ensino, aprendizagem e avaliação, justificará a sua manutenção no questionário.