Estudos Preliminares – Processo de Construção do SAT

Foram efectuados dois estudos que permitiram aferir as qualidades do instrumento, nomeadamente: i) o estudo exploratório e ii) o estudo empírico. O primeiro estudo procurou recolher informação relativa ao grau de adequação dos itens em relação às dimensões de inteligência avaliadas no instrumento, bem como da clareza dos itens, junto de um painel de especialistas na área da cognição, da avaliação psicológica e das organizações, permitindo o estudo da validade de conteúdo do instrumento e dando origem à versão definitiva de aplicação no estudo empírico.

Esta análise levou a várias alterações, na sua maioria situadas ao nível das instruções e da formulação das questões, de modo a torná-las as mais simples e percetíveis possível, bem como tecnicamente bem construídas. Esta análise levou a uma nova versão do SATI, que foi novamente sujeita ao escrutínio do painel de juízes original e a um grupo de 10 indivíduos (quadros empresariais, 4 homens e 4 mulheres, faixa etária 30-40 anos) com o propósito de analisar a objetividade, ambiguidade, pertinência e compreensibilidade das questões, das instruções de preenchimento e da redação em geral. Mais uma vez, várias sugestões de alteração foram apresentadas, quanto ao conteúdo e formulação dos itens. Procedeu-se por fim à redação final dos itens a usar e à elaboração da versão final do SATI com a respetiva arrumação dos 108 itens em 36 perguntas de resposta múltipla.

Por sua vez, o estudo empírico foi feito junto de uma amostra de 420 executivos - cujas características já foram descritas no capítulo anterior -, procurando aferir diversos aspetos das características psicométricas do SATI. Para a concretização dos objetivos propostos, optou-se por um enfoque misto17_{, baseado na teoria clássica dos testes e na}

utilização do método MDS (Multidimensional Scaling), no caso concreto, a técnica SSA (Similarity Structure Analysis), uma vez que esta permite situar no espaço euclidiano a projeção das correlações entre as diferentes variáveis em estudo.

Utilizando a teoria clássica dos testes, foi feita a análise descritiva dos itens e a análise de consistência das subescalas. Já a técnica SSA foi usada para o estudo das dimensões do questionário em termos do seu conteúdo.

Tendo em vista a análise das características psicométricas do SATI utilizadas, foram analisados os índices de consistência interna através do cálculo do alfa de Cronbach para as três escalas (Analítica, Prática e Criativa).

A escala Inteligência Analítica obteve um alfa inicial de .58 (valor próximo do que se considera aceitável (Moreira, 2009), mas vários itens desta escala apresentam correlações com o total da escala corrigido muito baixas, pelo que foram retirados. O procedimento foi repetido 4 vezes até se encontrar uma estrutura em que todos os itens apresentam boas correlações com o total da escala corrigida, tendo ficado com 21 itens na versão final, e consistência interna aceitável com α=.67. No que respeita à escala Inteligência Prática, verificou-se que o total dos itens considerados para esta se revelam pouco adequados ao que se pretende medir, uma vez que o alfa inicial era muito abaixo do desejável, com α=.45. Depois de retirados os itens, deixando apenas aqueles com correlações >.125 com o total da escala corrigida, obteve-se uma versão de 9 itens, com um alfa de .54. Por fim, para a escala de Inteligência Criativa partiu-se de um alfa inicial de .51, valor inferior ao considerado aceitável. Após a eliminação dos itens com baixa correlação com o total da escala corrigida foi encontrada uma versão final de 11 itens, com α=.62.

Tabela 6. Quadro resumo dos resultados da análise de consistência interna

Nº Itens inicial α inicial Nº Itens final α final

Analítica 36 .58 21 .67

Prática 36 .45 9 .54

Criativa 36 .51 11 .62

No final da análise de consistência interna, o SATI ficou com 41 itens, tendo sido retirados 67 itens.

Tendo por base os resultados da análise de consistência interna apresentada, realizou-se o estudo da estrutura da prova, com recurso à CATPCA (Análise de Componentes Principais para Dados Categóricos) e posterior confirmação com a AFE (Análise Fatorial Exploratória), com recurso à técnica ACP (Análise de Componentes Principais). Por fim realizou-se um estudo com recurso a análises multidimensionais, nomeadamente a SSA. As análises foram forçadas a 3 fatores, uma vez que os pressupostos teóricos indicam a existência de três dimensões para a Inteligência de Sucesso.

O estudo da validade de constructo com base na CATPCA, produziu uma análise de 3 dimensões (Tabela 7) que foi realizada com base nos itens da prova. A análise feita extrai 22,80% da variância da prova.

Tabela 7. Análise CATPCA do SATI: Alpha de Cronbach e Variância a 3 dimensões

Verifica-se que o primeiro fator extraído retém 23 itens, que correspondem na sua maioria à dimensão analítica, um segundo fator que se aproxima da dimensão prática e um terceiro fator que tem itens das três dimensões.

Como veremos já de seguida, as 3 dimensões encontradas correspondem, salvo no caso de 7 itens (itens 39, 87, 89, 90, 100, 101, 102), às dimensões encontradas através da análise de componentes principais.

Os resultados desta análise levaram ainda à exclusão dos itens 50 e 94, por apresentarem cargas fatoriais muito baixas.

Análise fatorial exploratória pelo método das componentes principais (ACP) com rotação varimax

A AFE permite saber quantos e quais fatores o instrumento está a avaliar, permitindo-nos ainda identificar que itens se associam a cada fator (Almeida & Freire, 2000). Por sua vez, a ACP é uma técnica de análise exploratória de dados multivariados que transforma um conjunto de variáveis correlacionadas num conjunto menor de variáveis independentes, simplificando os dados através da redução do número de variáveis necessárias para os descrever, designadas por componentes principais (Marôco, 2011). O objetivo da ACP é resumir a informação presente nas variáveis originais (geralmente

Dimensão Alfa de Cronbach Variância Total (Eigenvalue) % de variância 1 ,803 4,608 11,239 2 ,649 2,726 6,649 3 ,516 2,015 4,914 Total ,915a _{9,349 22,802}

correlacionadas) num número reduzido de índices (componentes) ortogonais (não correlacionados) que explicam o máximo possível de variância das variáveis originais. O estudo da validade de constructo baseou-se na análise em componentes principais, com varimax, considerando os itens da prova.

A solução da AFE por ACP forçada a 3 fatores extrai 22,80% da variância total da escala. Verifica-se que o primeiro fator extraído retém 24 itens, que correspondem na sua maioria à dimensão analítica, um segundo fator que se aproxima da dimensão prática e um terceiro fator que tem itens das três dimensões.

No que concerne à interpretação dos fatores, efetuou-se igualmente a prova empírica das dimensões do questionário, caracterizando-se cada um dos fatores através de quadros síntese, onde se indicam os itens que o compõem e a respetiva saturação fatorial. Estabeleceu-se mais uma vez um paralelismo entre as dimensões preestabelecidas subjacentes à operacionalização e organização do questionário e a estrutura fatorial obtida- factor 1 – conceptual, factor 2 – empreendedor e factor 3 – executor.

A discrepância entre os fatores teoricamente propostos face aos encontrados nestes resultados não foi desde logo considerada como significativa nem perentória, designadamente pela originalidade da estrutura de questionário e escala adotadas, que recomendam uma análise confirmatória por métodos alternativos, nomeadamente a análise multidimensional.

Todavia, mesmo assim podemos dizer que o questionário apurado do SATI revela robustez, pois os quarenta e dois itens que o compõem permitiram encontrar dimensões pertinentes do ponto de vista conceptual e fatorial, apresentando um bom nível de consistência.

Após realizada análise às qualidades métricas dos itens que constituem o SATI e depois de analisada a sua validade estrutural por meio dos métodos de psicometria “tradicional”, os itens que constituem a versão final foram sujeitos a análise multidimensional com recurso à técnica SSA- Similarity Structure Analysis (Roazzi & Dias, 2001). Para a aplicação desta técnica, considera-se que o SATI deve estar organizado em três facetas, cada uma correspondente a uma das escalas de inteligência de sucesso – Analítica, Prática e Criativa. Deste modo, os dados foram testados tendo-se obtido os resultados evidenciados na figura 1.

A análise dos resultados da SSA revela que os itens se ajustam adequadamente aos dados empíricos, sendo visível uma estrutura de tipo polar, isto é, os seus elementos

constituem regiões cuneiformes, com limites partindo de uma origem comum, o que significa que a relação entre as partições se caracteriza pelo facto dos elementos se diferenciarem de modo qualitativo, sem que manifestem (normalmente) qualquer ordem óbvia. Neste tipo de separação, os elementos de regiões adjacentes mostrarão uma semelhança maior com relação à característica medida para a faceta correspondente do que os de regiões não-adjacentes. (Bilsky, 2003).

O valor do coeficiente de alienação confirma a adequabilidade dos resultados. Podemos então considerar que o questionário em estudo permite medir e discriminar entre as três escalas de inteligência de sucesso, ainda que se verifique que alguns itens estejam mais próximos de outra escala do que daquela a que pertencem teoricamente, como é o caso dos itens: Ana16a – item 46 - (“Decido com base numa ponderação de diversas opções para efetuar a escolha mais acertada.”) que se aproxima mais da escala criativa, ou seja, ponderar entre várias hipóteses pode ser considerado um ato criativo; Ana20b – item 59 - (Na minha profissão desenvolvo atividades em que analiso as diversas alternativas.”) que está mais correlacionado com a escala prática, ou seja, os sujeitos consideram que analisar várias opções é possivelmente mais uma questão prática do que de análise; e

Cri34b – item 101 - (“No meu dia-a-dia profissional, procuro novos problemas, pois

aumentam a minha motivação”) que se correlaciona mais com a escala analítica, ou seja, para estes sujeitos, procurar novos problemas é provavelmente uma forma de exercitarem a sua capacidade de análise no contexto profissional.

Por outro lado, verificamos que nas escalas Prática e Criativa os itens estão mais dispersos no espaço da sua partição, significando isto que as correlações entre estes itens são mais fracas. Já na escala Analítica verifica-se a existência de um conjunto de itens com fortes correlações entre si e um outro que se correlaciona menos com este primeiro e cujos itens (Ana21c, Ana18a, Ana34a e Ana30b) são um pouco mais dispersos.

Figura 1. SSA das 3 escalas do SATI (Coordenada 1x2 da Solução 3-D, Coeficiente de Alienação .17)

A análise multidimensional com recurso à técnica SSA veio desta forma confirmar a consistência interna do SATI, revelando-se uma abordagem robusta e adequada para a análise deste tipo de instrumento.