PCS completo

Considerando todas as coletas de dados (conjunto ALL), o PCS apresentou α = 0,83, como pode ser observado na Tabela 4.19, o que caracteriza um questionário cujas respostas apresentam um alto nível de confiabilidade, segundo a classificação proposta no Quadro 3.9 (página 65).

Tabela 4.19 - Coeficiente Alfa de Cronbach do PCS Conjunto de dados Coeficiente Alfa de Cronbach do PCS

ALL 0,83

SU 0,70

SD 0,86

CN 0,89

JS 0,61

Analogamente ao que se evidenciou na análise do GEQ, no PCS o conjunto de dados CN foi o que obteve o valor mais elevado para o alfa, com uma confiabilidade considerada alta, tendo α = 0,89. Além do CN, o conjunto SD também apresentou uma alta confiabilidade, revelando um α = 0,86. No entanto, identificou- se que dois conjuntos de dados apresentaram confiabilidade moderada: SU com α = 0,70 e JS com α = 0,61.

Análise dos conjuntos de dados

A análise item a item do PCS completo, para cada um dos conjuntos de dados (apresentada na Tabela 4.20), mostra que os itens, em sua maioria, apresentam uma alta Correlação Item-Total, tendo em vista que apenas 3 dentre 30 itens que foram correlacionados (seis itens pertencentes a cada um dos cinco conjunto de dados) apresentam questões cuja CIT foi inferior a 0,3, e apenas a correlação do item SM319 (referente ao conjunto JS) mostrou-se negativa.

Na Tabela 4.20 foram grifados as duas menores CITs (1/3) de cada conjunto de dados, e desta análise identificou-se que o item SM3 foi apontado como sendo um dos que possui menor correlação item-total em todos os conjuntos de dados, seguido pelo item SM220 que foi apontado desta maneira em 60% (3/5) dos conjuntos de dados, embora as suas correlações em todos os conjuntos de dados sejam superiores ao limite aceitável (que é de 0,3). Ainda assim este item interfere, causando a diminuição do valor do Alfa de Cronbach para dois conjuntos de dados: SU e CN. No entanto, verificou-se que para estes dois conjuntos o aumento do alfa em virtude da exclusão do item SM2 não é significante.

Tabela 4.20 - Análise item a item do PCS para todos os conjuntos de dados

Item

ALL SU SD CN JS

α = 0,832 α = 0,699 α = 0,861 α = 0,894 α = 0,606

CIT α* CIT α* CIT α* CIT α* CIT α*

SP1 0,783 0,766 0,768 0,614 0,637 0,854 0,897 0,844 0,827 0,364 SP2 0,695 0,799 0,621 0,634 0,539 0,860 0,812 0,870 0,478 0,521 SP3 0,681 0,794 0,683 0,597 0,920 0,795 0,727 0,878 0,351 0,563 SM1 0,675 0,798 0,654 0,592 0,647 0,845 0,803 0,869 0,249² 0,594 SM2 0,607 0,818 0,385 0,708¹ 0,743 0,820 0,640 0,915¹ 0,663 0,418 SM3 0,389 0,853¹ 0,085² 0,798¹ 0,613 0,846 0,688 0,879 -0,150² 0,778¹

* Valor do alfa se o item for excluído ¹ A exclusão deste item eleva o valor do alfa ² CIT < 0,300

19

Esta equipe é uma das melhores equipes da empresa.

20

Análise quanto ao item SM3

No que diz respeito à questão SM3, verifica-se que apesar de haver unanimidade quanto a ele apresentar uma das menores correlações item-total em todos os conjuntos de dados, deve-se ressaltar que 60% (3/5) de seus coeficientes podem ser considerados satisfatórios (maior que 0,3). No entanto, nos conjuntos de dados cuja CIT deste item mostrou-se inferior a 0,3 foi verificada a existência de uma Correlação Item-Total negativa (no conjunto JS), e que a exclusão desta questão viria a elevar o valor do α não apenas para a coleta JS, mas também para os conjuntos de dados ALL e SU.

Constatou-se que a exclusão do item SM3 não representa aumento significativo do alfa para o conjunto ALL, que passaria de α = 0,832 para α = 0,853 (um aumento de 0,021). Contudo, o conjunto JS teria um aumento de 0,172 em seu coeficiente alfa, o que representa um aumento significativo, já que a confiabilidade deixaria de ser moderada (α = 0,606) tornando-se alta, com α = 0,778.

Para o conjunto de dados SU, não seria vantajosa a exclusão do item SM3, pois mesmo que seja utilizando o arredondamento dos alfas para o uso de apenas duas casas decimais (que é o formato mais utilizado), a diferença entre o alfa atual (α = 0,699) e o alfa após a exclusão deste item (α = 0,798) é de 0,1 (0,099 sem arredondamento). Vale lembrar que justificou-se que a elevação do coeficiente Alfa de Cronbach só seria considerada significante caso a diferença fosse superior a 0,1 (baseando-se na pesquisa de Griep et al. (2005)).

4.3.2.2 Alfa de Cronbach por dimensão

Uma análise mais detalhada do PCS foi feita através do cálculo do coeficiente Alfa de Cronbach de cada dimensão do PCS, apresentada na Tabela 4.21.

Essa análise mostrou que em todos os conjuntos de dados a dimensão Sensação de Pertencimento apresentou coeficientes alfa superiores à dimensão Sentimento de Moral. Embora os valores do Alfa de Cronbach para a dimensão SM

tenham confiabilidade Moderada, Baixa e Muito Baixa, deve-se observar que para o conjunto de dados JS a dimensão Sentimento de Moral do PCS obteve α = 021

.

Tabela 4.21 - Coeficiente Alfa de Cronbach das dimensões do PCS Conjunto de dados PCS SP SM ALL 0,82 0,58 SU 0,88 0,33 SD 0,73 0,72 CN 0,89 0,74 JS 0,61 0,00

Através do Gráfico 4.4 pode-se ter uma visão mais clara dos valores do Alfa de Cronbach obtidos pelos conjuntos de coleta de dados para cada dimensão do PCS (SP e SM) e para o questionário por inteiro (completo). Nele foi traçada uma linha que aponta o limite inferior para o valor do Alfa de Cronbach, de tal modo que todos os valores apontados que encontrarem-se abaixo desta linha representam uma baixa confiabilidade dos resultados obtidos.

Observa-se que três coeficientes Alfa de Cronbach ficaram abaixo da linha delimitada, tendo valores inferiores a 0,60 e confiabilidade considerada Baixa e Muito Baixa (quando α ≤ 0,30). Verificou-se também que todos estes alfas considerados com confiabilidade questionável são referentes à dimensão do Sentimento de Moral da equipe.

Nota-se ainda que quanto ao Alfa de Cronbach da coleta JS, tanto o questionário completo como a dimensão Sensação de Pertencimento ficaram exatamente acima da linha limite, tendo em vista que tal linha está no marco 0,60 e o PCS completo e do SP obtiveram α = 0,61.

21

Em verdade, para este conjunto de dados, esta dimensão do PCS (SM) obteve pontuação negativa (α = -0,369) que não foi exibida na Tabela 4.21 porque segundo Da Hora, Monteiro e Arica (2010), pontuações negativas equivalem a zero, que é o modo usual de se exibir valores assim, já que convencionalmente o Alfa de Cronbach contém valores de 0 a 1.

Gráfico 4.4 - Alfa de Cronbach do PCS

Análise da baixa confiabilidade do conjunto JS - dimensão SM

Com a finalidade de confirmar tal resultado (do α < 0) e descartar a possibilidade de erro por parte do cálculo do Alfa de Cronbach, buscou-se estimar a confiabilidade por meio de outras técnicas, tais como Split-half, Guttman, Paralelo e Paralelo Estrito, obtendo-se, no entanto, resultados não muito diferentes do que fora observado através do Alfa de Cronbach.

Acredita-se que tal pontuação obtida se deu por inúmeros fatores, entre eles: Em decorrência da baixa variância das respostas dadas nesta dimensão para este conjunto de dados (JS), pois observou-se que 98% das respostas dadas pelos sujeitos participantes são 0,1, 2 ou 3, e 42% das respostas foram o item Likert 3, conforme mostra a Tabela 4.22, sendo que a escala vai de -3 a 3. Esse problema incide porque se ocorrer dos pesquisados avaliarem um “[...] determinado item com o mesmo valor, a variância será nula e este coeficiente não poderá ser obtido. [...]” (FREITAS; RODRIGUES, 2005, p. 3). 0,00 0,10 0,20 0,30 0,40 0,50 0,60 0,70 0,80 0,90 1,00 Completo SP SM C o e fic ien te Al fa d e C ro n b ac h PCS ALL SU SD CN JS

Tabela 4.22 - Respostas do conjunto JS à dimensão SM do PCS Item Likert Quantidade de participantes

que assinalou este item Likert

Total de participantes que assinalou este item Likert

-3 0 0% -2 0 0% -1 1 2% 0 6 13% 1 6 13% 2 13 29% 3 19 42%

Outro motivo é a pequena quantidade de questões que compõem cada uma das dimensões do PCS (apenas três), pois segundo Freitas e Rodrigues (2005), a quantidade de itens de uma escala tem influência direta sobre o valor do Alfa de Cronbach, pois “[...] a confiabilidade do questionário pode ser aumentada quando mais itens são incluídos [...]”, e de maneira análoga, a confiabilidade pode ser mais baixa apenas pelo fato de um questionário conter poucos itens.

Deste modo acredita-se que o fato dos itens terem variâncias sensivelmente semelhantes, aliada a pequena quantidade de itens de cada dimensão do PCS tiveram influência direta sobre o resultado obtido, não apenas para a dimensão Sentimento de Moral, como também para o PCS como um todo, para o conjunto de dados JS, que obteve α = 0,61 (ver Tabela 4.19).

Também deve-se atentar ao fato do item SM3 ter uma Correlação Item-Total negativamente alta (como pode ser observado na Tabela 4.23), causando uma grande influência negativa sobre o resultado do cálculo do α, de modo que a exclusão deste item faz com que o Alfa de Cronbach da dimensão Sentimento de Moral (para o conjunto de dados JS) aumente 1,116 ao deixar de ser igual a -0,369 e elevar-se para um α = 0,747, o que resulta em uma confiabilidade moderada. Tal situação indica que a exclusão deste item da escala ou sua alteração são opções a serem estudadas em novas pesquisas, tendo em vista o aumento significante do valor do Alfa de Cronbach.

Tabela 4.23 - Análise da dimensão SM de todos os conjuntos de dados

Item

ALL SU SD CN JS

α = 0,581 α = 0,331 α = 0,722 α = 0,741 α = -0,369

CIT α* CIT α* CIT α* CIT α* CIT α*

SM1 0,513 0,400 0,348 0,041 0,654 0,587 0,619 0,669 0,085² -0,875ª SM2 0,441 0,428 0,235² 0,137 0,494 0,717 0,606 0,730 0,060² -1,117ª SM3 0,305 0,604¹ 0,051² 0,523¹ 0,564 0,614 0,637 0,597 -0,391² 0,747¹

* Valor do alfa se o item for excluído ¹ A exclusão deste item eleva o valor do alfa ² CIT < 0,300

ª “O valor é negativo devido a uma covariância negativa média entre os itens. [...]” (Software SPSS)

Apesar do valor do alfa da dimensão SM, referente ao do conjunto de dados JS, chamar a atenção por ter sido negativo (que equivale a zero, como apresentado na Tabela 4.21), ele não é o único que merece atenção. Para esta mesma dimensão o conjunto SU e ALL apontaram confiabilidades baixas, com α = 0,331 e α = 0,581, respectivamente.

Análise da baixa confiabilidade do conjunto ALL - dimensão SM

Sob o ponto de vista da dimensão Sentimento de Moral, verifica-se que o item SM3 revelou uma baixa correlação item-total, de modo a prejudicar a confiabilidade do conjunto ALL, pois ao eliminar esta questão este conjunto de dados terá um aumento no valor do coeficiente Alfa de Cronbach.

Embora a exclusão do item SM3 seja apontada como benéfica para este conjunto de dados, tal eliminação não eleva significativamente o valor do Alfa de Cronbach do conjunto ALL, pois a diferença entre os alfas antes e depois da exclusão (α = 0,581 e α = 0,604, respectivamente) é inferior a 0,1. Ressalta-se ainda, que mesmo havendo a exclusão do item SM3, a consistência interna deste conjunto de dados, para esta dimensão, permaneceria possuindo baixa confiabilidade.

Análise da baixa confiabilidade dos conjuntos SU - dimensão SM

Ainda analisando a dimensão Sentimento de Moral, assim como ocorreu com o conjunto ALL, o item SM3 revelou uma baixa correlação item-total para o conjunto SU prejudicando assim sua consistência interna e levando a redução da confiabilidade, que fora classificada como baixa.

No conjunto de dados SU, verificou-se que ao excluir o item SM3, embora sua confiabilidade permaneça classificada como baixa, seu coeficiente alfa sofrerá um aumento de 0,192, que se elevará de α = 0,331 para α = 0,523, sendo considerado, portanto, um aumento significativo, e sugerindo-se que o item SM3 seja excluído ou alterado.

Análise da baixa confiabilidade do conjunto JS - dimensão SP

Ao realizar a análise item a item da dimensão Sensação de Pertencimento (apresentada na Tabela 4.24), verificou-se que o único conjunto de dados em que algum item apresentou Correlação Item-Total inferior a 0,3 foi o JS para o item SP3, que em caso de exclusão deste item esta dimensão do JS teria o alfa elevado para 0,90, cuja confiabilidade torna-se alta.

Tabela 4.24 - Análise da dimensão SP de todos os conjuntos de dados

Item

ALL SU SD CN JS

α = 0,822 α = 0,880 α = 0,725 α = 0,891 α = 0,608

CIT α* CIT α* CIT α* CIT α* CIT α*

SP1 0,715 0,743 0,809 0,816 0,537 0,798¹ 0,779 0,916¹ 0,863 -0,149 SP2 0,705 0,758 0,747 0,851 0,496 0,736¹ 0,893 0,788 0,341 0,613¹ SP3 0,671 0,761 0,807 0,823 0,791 0,378 0,791 0,853 0,224² 0,900¹

* Valor do alfa se o item for excluído ¹ A exclusão deste item eleva o valor do alfa ² CIT < 0,300

Tendo em vista que o coeficiente do conjunto JS para a dimensão SP é α = 0,608 considera-se que através da exclusão do item SP322 haverá um aumento significativo do valor do alfa, justificando assim o descarte deste item.

Destaca-se que os itens pertencentes aos conjuntos de dados ALL, SU e CN apresentaram altas CIT (superiores a 0,5), e apesar disso o item SP123 (cuja CIT é de 0,779) causou uma pequena diminuição quanto ao valor do α. No entanto ratifica- se que a exclusão deste item não seria justificada, pois o valor do coeficiente alfa se eleva em apenas 0,025.

4.3.2.3 Visão geral das análises

Os resultados mostraram que a escala PCS possui uma maior confiabilidade quando suas dimensões são avaliadas de maneira unificada, embora, a análise dos resultados do PCS tenha revelado uma confiabilidade satisfatória para a maior parte das dimensões dos conjuntos de dados analisados, incluindo a análise do PCS completo. Verificou-se que os potenciais problemas estão focados em itens específicos, que através de sua exclusão pode-se resolver a maior parte dos poucos níveis de confiabilidade que ficaram abaixo do desejado.

Mediante o exposto, verificou-se que embora o item SM224 tenha mostrado baixa Correlação Item-Total em alguns conjuntos de dados, tal peculiaridade não prejudicou a confiabilidade do PCS, pois a análise item a item mostrou que a exclusão deste item não traria um aumento significativo do valor do Alfa de Cronbach.

Quanto ao item SP3, verificou-se que apenas o conjunto de dados JS apresentou aumento significativo do alfa em decorrência de sua exclusão, sendo que a não exclusão desta questão significa sacrificar a confiabilidade do PCS e suas dimensões, tendo em vista o aumento do nível de confiabilidade, já que deixará de ser moderadamente confiável para ter uma alta confiabilidade.

22

Eu sinto que faço parte desta equipe.

23

Eu não sinto que pertenço a esta equipe.

24

O item SM3 revelou-se problemático, tendo em vista que mesmo nos conjuntos de dados em que ele não prejudicou o valor do alfa ele mostrou-se como sendo um dos que possuía menor CIT, como é o caso dos conjuntos de dados SD e CN. No conjunto de dados ALL o item SM3 prejudicou o valor do Alfa de Cronbach, no entanto, o aumento do alfa em decorrência da exclusão desta questão é inferior a 0,1, o que não justifica sua exclusão para este conjunto de dados.

Após analisar a relação entre o item SM3 e o coeficiente alfa, para o PCS completo e suas dimensões, verificou-se que para o conjunto de dados SU é recomendada a exclusão deste item. A exclusão do SM3 para este conjunto de dados se justifica porque, embora o alfa do PCS completo (para conjunto SU), aumente em apenas 0,099 e seja considerado que para exclusão de um item o alfa tem que ser prejudicado com um decréscimo superior a 0,1, deve-se levar em conta que a dimensão SM do conjunto SU tem um aumento significativo de 0,192 com a exclusão deste item. Sendo assim, considera-se que a exclusão da questão SM3 só traria benefícios para os alfas deste conjunto de dados, tendo em vista que ambos (dimensão SM e PCS completo) terão seus valores elevados em decorrência da eliminação deste item.

Mediante o exposto, supõe-se que os problemas do item SM3 podem significar que ele tenha sido mal redigido (por problemas de tradução ou de adaptação ao contexto de equipes de desenvolvimento de software), ou que tenha sido interpretado de maneira errônea pelos participantes ou ainda que este item seja similar a algum outro item pertencente a outra dimensão, estando associado a dois ou mais conceitos.

Através da análise dos resultados e coeficientes Alfa de Cronbach obtidos nesta pesquisa, acredita-se que embora tenham sido identificados alguns valores não aceitáveis quanto à confiabilidade do PCS e de suas dimensões, observou-se que tratam-se de problemas pontuais que podem ser contornados através da exclusão dos itens que estão prejudicando a confiabilidade do PCS. Além disso, verificou-se que na maior parte das avaliações da confiabilidade o PCS (e suas dimensões) revelou possuir confiabilidades Moderadas e Altas, de tal modo que considera-se que esta pesquisa conta com dados que possuem um nível de confiabilidade satisfatório.

4.3.2.4 Teste de hipóteses

O objetivo do teste de hipóteses aqui proposto é confirmar ou rejeitar as suposições relatadas por esta questão de pesquisa (QP2). Busca-se testar a suposição de que o Perceived Cohesion Scale (PCS) apresente alta consistência interna. Para tal avaliação foram utilizados os coeficientes Alfa de Cronbach obtidos por todos os conjuntos de dados (ALL, SU, SD, CN e JS), utilizando o PCS completo.

Para que o PCS seja considerada uma escala com uma alta confiabilidade, espera-se que seu coeficiente Alfa de Cronbach seja superior a 0,75, tendo em vista a classificação proposta no Quadro 3.9. No Quadro 4.15, são apresentadas as hipóteses que testadas com este propósito.

Quadro 4.15 - Hipóteses QP2 Hipóteses a serem testadas

Com o objetivo de testar as hipóteses de pesquisa supracitadas, foi gerada a Tabela 4.25, contendo a diferença entre cada valor obtido, com o cálculo do alfa, e o alfa esperado ( ), constando também a classificação de seus postos.

A Tabela 4.25 revela que, entre os alfas obtidos pelo PCS (completo para todos os conjuntos de dados: ALL, SU, SD, CN e JS) e o alfa mínimo esperado, há diferenças que variam de 1,36 a 1,64, não havendo, no entanto, nenhuma diferença com sinal oposto às demais, que faz com que seja igual à soma de todos os postos ( ), enquanto que .

Tabela 4.25 - Diferenças e postos para o teste de Wilcoxon - QP2 Alfa de

Cronbach Diferença (di) Postos

0,83 1,58 3

0,70 1,45 2

0,86 1,61 4

0,89 1,64 5

0,61 1,36 1

Assim como ocorreu no teste de hipóteses da consistência interna do GEQ, identificou-se que para só é possível realizar o teste de Wilcoxon para um nível de significância , que tem como valor crítico .

Conforme apresenta o Gráfico 4.5, identificou-se que . Deste modo,

conforme os critérios apresentados no Quadro A.20, deve-se rejeitar a hipótese nula ao nível de significância de 10%.

A rejeição da hipótese nula implica na afirmação de que o PCS possui alta confiabilidade, o que resulta em uma alta consistência interna.