Critérios de validação e concordância do protocolo (teste).

O completo entendimento e a aplicação dos processos cognitivos envolvidos na prática esportiva continuam sendo uma das fronteiras do conhecimento ainda por ser explorada e conquistada. Considerando a importância dos problemas que afetam o esporte e em especial sua metodologia, a construção de protocolos (construtos / testes) de avaliação desse fenômeno justifica-se para melhoria do trabalho dos treinadores e evolução dos atletas de handebol.

Construtos são conceitos que representam aptidões, traços ou características de uma classe; representam a realidade observável de um ou de vários comportamentos, que surgem de pesquisas científicas empíricas (RAYMUNDO, 2009). Em sua elaboração, construtos vão depender de indicadores (critérios) que dão acesso ao processo de validade dessa realidade observável (PASQUALI, 2007). Dessa forma, se faz necessário o entendimento sobre o

conceito de validade e validação de um construto, para, em seguida, se conhecer o desdobramento destes conceitos.

Ao decorrer dos anos o conceito de validade sofreu mudanças no que diz respeito a sua utilização e o uso de seus termos. Conforme Pasquali (2009), esses foram descritos através de períodos de tempo; o primeiro período ocorreu de 1900 – 1950, que muito foi utilizado o conceito de validade de conteúdo; o segundo período predominou o conceito da validade de critério 1950 – 1970 e o terceiro período, a partir de 1970, foi marcado pela validade de construto.

Sendo assim, para Raymundo (2009), o conceito de validade pode ser definido como a capacidade de um teste medir aquilo a que está se propondo medir, ou seja, é a busca de verdadeiras respostas entre pessoas (peritos / juízes)de acordo com critérios (indicadores) que analisam um comportamento (construto). Diante disto, o processo de validade de um teste, se inicia a partir do momento que o pesquisador começa a pensar neste instrumento; sua elaboração, padronização, correção, aplicação e interpretação dos dados (RAYMUNDO, 2009).

O conceito de validação diz respeito ao processo do como fazer (tarefa do pesquisador)... Processo de validade através do método científico (THOMAS, NELSON, SILVERMAN, 2012). Se valida pela precisão de uma determinada inferência (precisão dos escores de um teste). Na verdade se valida não um teste, mas a interpretação dos resultados obtidos diante de um método específico (RAYMUNDO, 2009).

Pasquali (2007) cita diferentes formas de validade, dentre elas, as que se relacionam com esse estudo.

Validade de conteúdo: busca da veracidade de decisões lógicas e interpretadas por peritos (especialistas de uma área específica, no nosso caso o handebol); essas respostas irão concretizar esse tipo de validade (MORROW et al., 2003).

Validade de construto: representa a legitimidade da hipótese testada, diante de um comportamento ou traço latente observado (PASQUALI, 2007; RAYMUNDO, 2009); nesse estudo observou-se o comportamento do jogador atacante com bola.

Validade de critério: obtenção do grau de correlação entre os escores de um teste; mede o comportamento ou um desempenho de um indivíduo; a mesma pode ocorrer em momentos simultâneos ou distintos, originando a validade concorrente e preditiva (RAYMUNDO, 2009).

Validade concorrente: origina-se da validade de critério. Nela o critério é medido simultaneamente à coleta de dados do protocolo (PAQUALI, 2007; THOMAS, NELSON, SILVERMAN, 2012).

Validade preditiva: oriunda da validade de critério, no caso, o critério é medido após a obtenção dos dados (PASQUALI, 2007).

Obter parâmetros de validade de um teste é imprescindível para poder confiar em seus resultados e isto nos leva a descrever sobre o conceito de fidedignidade. Através dela, poderão ser identificados níveis de desenvolvimento de uma capacidade, por exemplo: níveis de percepção e tomada de decisão.

Para Raymundo (2009) a fidedignidade é representada pelo coeficiente de correlação obtido entre os escores (medidas), que nesse estudo foram representados por uma escala de pontuação de um a cinco pontos, escala de Likert, de forma que os peritos atribuíram suas repostas através de três critérios que validaram as cenas de vídeo do jogo de handebol. Dentre os métodos para calcular essa fidedignidade, nessa pesquisa foi utilizada a técnica de teste- reteste (MARTINS, 2006).

Testar e retestar significa para Martins (2006), a busca dessa fidedignidade, que se apresentará de forma consistente e estável (mesmos valores e respostas ao longo do tempo), fornecendo resultados confiáveis ao pesquisador.

Dessa forma, conforme Pasquali (2007) é necessário uma dada precisão na construção de instrumentos de validade, pois como se trata de testes fidedignos, existem fatores que podem afetar esse parâmetro em relação ao protocolo a ser construído e ao sujeito que estará sendo examinado. Sobre o protocolo, os fatores são: número elevado de itens; itens que apresentam dificuldade média são os mais fidedignos e quanto mais homogêneos forem, maior a fidedignidade.

Sobre os fatores que afetam a fidedignidade dos indivíduos que estão sendo avaliados: indivíduos que não estejam motivados para realizar o teste não são confiáveis; instruções claras e fáceis facilitam o entendimento do teste; deve-se levar em consideração o conhecimento, o esforço do sujeito testado e as questões emocionais (PASQUALI, 2007).

De acordo com Thomas, Nelson, Silverman (2012) um teste pode ser considerado fidedigno e não ser válido, mas um teste não pode ser considerado validado se não for fidedigno (THOMAS, NELSON, SILVERMAN, 2012). Os dois conceitos estão intrinsecamente relacionados, porém, a fidedignidade do escore pode ser entendida como uma evidência mínima para obtenção de uma medida válida de amostra de comportamento (URBINA, 2007; TEOLDO, 2011). Nesse estudo foi utilizado o coeficiente de validade de conteúdo (CVC), procedimento estatístico que fornece ao mesmo tempo a concordância e validade das respostas dos peritos (experts da área em questão).

A escassez de protocolos válidos e específicos nas MEC, especialmente para o conhecimento tático declarativo no handebol, constitui um problema do esporte que dificulta o planejamento e avaliação do processo E-A-T esportivo. Nesse sentido, são necessários protocolos (testes) que assegurem um consistente, amplo e variado desenvolvimento desse processo metodológico do handebol (GRECO, BENDA, 2007; KRÖGER, ROTH, 2002; GRECO, SILVA, 2008).

Das inquietações que surgem nas ciências do esporte diante do comportamento do atleta na competição, faz-se necessário a construção de protocolos específicos para avaliar o nível de CTD nas MEC e responder perguntas sobre o desempenho no jogo. Estudos como os de French, Thomas (1987); Mangas (1999); Souza (2002); Matias (2009); Aburachid (2009); Aburachid et al. (2013); Matias, Greco (2010); Memmert et al. (2013) responderam algumas perguntas, contudo outras surgiram e serão respondidas com o aprofundamento das questões que dizem respeito às decisões que os atletas tomam para resolver problemas do jogo (interpretação), tornando-os melhores em seus desempenhos (MANGAS et al., 2007).

Esses protocolos oferecem aos professores e pesquisadores um meio de observar e codificar comportamentos que demonstram a capacidade de resolver problemas táticos nos jogos, percebendo, tomando decisões, movendo-se adequadamente e executando competências motoras com eficiência (TALLIR et al., 2003).

A busca incessante de respostas sobre o rendimento dos atletas na competição, diz respeito também a um maior entendimento sobre a cognição no esporte. Estas estão intimamente ligadas ao SNC e envolvem mecanismos subjacentes da plasticidade encefálica, que quando investigadas junto a atletas de handebol, podem esclarecer a existência de grandes capacidades cognitivas e motoras dos sujeitos (experts), podendo resultar numa evolução quali e quantitativa para um número maior de atletas.

A identificação de acertos ou erros no teste do nível de CTD no handebol fará com que o professor/treinador possa intervir ou modificar seu planejamento do processo de E-A-T, seja este em aulas de educação física escolar ou em programas de treinamento. Essa intervenção possibilitará avaliar o indivíduo / atleta dentro de um grupo ou esse grupo ao longo do tempo em momentos diferentes do processo, e ainda será comparado com outros grupos; oportunizando a regulação do processo de E-A-T e, eventualmente, alteração dos métodos de ensino e conteúdos a serem desenvolvidos com segurança.

5 MÉTODO