Com o intuito de dar mais respaldo científico e consistência ao modelo proposto, optou-se pela aplicação de um pré-teste, a fim de analisar a amplitude, especificidade e validade dos indicadores na aplicação do modelo, em uma pesquisa on-line.
A aplicação do pré-teste realizou-se no período de 01 a 06 de novembro de 2001, atendendo a uma amostra aleatória, retirada da Lista Geral do Qualis/Capes para as Engenharias (I, II, III, IV), biênio 98/99 (Apêndice A), que foi composta por 10% do total de periódicos da listagem, perfazendo 17 periódicos, escolhidos de 10 em 10, partindo do periódico de número 10.
O modelo foi aplicado nesta amostra, podendo ser percebida uma série de problemas oriundos da Internet, principalmente quanto a questão de acesso à informação. Várias vezes foram encontradas as indicações de que o servidor não respondia e/ou não tinha sido localizado, necessitando de várias tentativas (três a cinco vezes) para a obtenção de sucesso.
A utilização da lista durante a aplicação do pré-teste permitiu descartar 11 periódicos que despertaram dúvidas ao serem analisados, uma vez que não foi identificado o seu ISSN. Dessa forma, restringiu-se o universo da pesquisa, ficando este composto por 143 periódicos científicos (Apêndice B).
Como resultados da aplicação do pré-teste, obteve-se:
a) dos 17 periódicos considerados no pré-teste, apenas quatro (23,52% desta amostra) disponibilizavam elementos bibliográficos e telemáticos, permitindo o acesso aos artigos na íntegra, portanto, plausíveis de avaliação;
b) não foi possível acessar dois (11,76%) dos periódicos, em cinco tentativas realizadas em horários diferentes;
c) 29,41% (cinco) dos periódicos do pré-teste apresentaram senha para acesso aos artigos e/ou demais informações; destes cinco, dois disponibilizavam o sumário e um o sumário mais o resumo;
d) dois (11,76%) periódicos apresentaram apenas informações gerais e contato; e) quatro (23,52%), apresentaram informações gerais, com capas e sumários e,
destes, um disponibilizava os resumos.
Dessa forma, observa-se que dos 17 periódicos considerados no pré-teste, apesar de disponibilizarem os artigos na íntegra e, desta forma, foram considerados periódicos científicos on-line, apenas quatro atendiam aos elementos bibliográficos e telemáticos, ainda que de forma incompleta. Outros quatro periódicos disponibilizavam informações parciais, como capa e sumários e destes, um disponibilizava o resumo.
A partir destes resultados, foi possível perceber a validade do modelo proposto, sendo possível à análise dos periódicos quanto aos elementos bibliográficos, representando 23,52% da amostra, que atendem às normas e aos elementos telemáticos recomendados, que identificam a tendência no uso de recursos tecnológicos, delineando uma área específica, como a criação e disponibilização de periódicos científicos on-line.
Com a aplicação do pré-teste, percebeu-se a necessidade de algumas correções e adequações do modelo proposto, deste modo, foram acrescentados indicadores que complementam os critérios e permitem uma melhor avaliação dos periódicos científicos, conforme apresentado no Quadro 15, comentado em seguida.
Modelo de indicadores para padronização de Periódicos Científicos On-line
CRITÉRIO INDICADORES CONDIÇÃO SIM/NÃO
1 NORMALIZAÇÃO 1.1 Título do periódico/subtítulo Norma
1.1.2 Tradução do título do periódico Recomendado 1.1.3 Fascículos, número Norma
1.1.4 Volume Norma
1.1.5 Data Norma
1.1.6 Sumário Norma
1.1.7 Legenda Bibliográfica Norma
1.1.8 ISSN Norma
1.1.9 Ficha catalográfica Norma 1.1.10 Direitos Autorais (copirraite) Norma
1.1.11 Editorial Norma
1.2 Artigos Norma
1.2.1 Título do artigo Norma 1.2.2 Tradução do título do artigo Recomendado
1.2.3 Autor Norma
1.2.4 Filiação do autor e contato Recomendado 1.2.5 Resumo na língua do texto Norma 1.2.6 Resumo em outra língua Norma
1.2.7 Descritores Norma
1.2.8 Tradução dos descritores Recomendado 1.3 Normas para publicação Norma
Continuação
Modelo de indicadores para padronização de Periódicos Científicos On-line
CRITÉRIO INDICADORES CONDIÇÃO SIM/NÃO
2. DURAÇÃO Tempo de existência
2.1 Menos de dois anos Recomendado
2.2 De 2 a 5 anos Recomendado
2.3 De 5 a 10 anos Recomendado 2.4 Mais de 10 anos Recomendado
3. PERIODICIDADE Intervalo regular de edição
3.1 Anual (1 vez ao ano) Norma 3.2 Semestral (2 vezes ao ano) Norma 3.3 Quadrimestral (3 vezes ao ano) Norma 3.4 Trimestral (4 vezes ao ano) Norma 3.5 Bimestral (6 vezes ao ano) Norma 3.6 Mensal (12 vezes ao ano) Norma 3.7 Quinzenal/Bimensal (24 vezes ao ano) Norma
4. INDEXAÇÃO Inclusão em bibliografias da área
4.1 Em bibliografias nacionais Recomendado 4.2 Em bibliografias internacionais Recomendado
5 ESTRUTURA DO
PERIÓDICO Divisão do conteúdo
5.1 Autoria do Periódico Norma 5.1.1 Interação: Própria (só da instituição),
Regional, Nacional e Internacional Recomendado 5.2 Artigos
5.2.1 Artigos científicos, técnicos, acadêmicos
Norma 5.2.2 Artigos de revisão Norma 5.2.3 Resenhas bibliográficas Norma
5.2.4 Comunicações Norma
5.2.5 Resumos, Informes Norma
6 AUTORIDADE Responsabilidade pelo periódico
6.1 Comissão editorial Norma 6.1.1 Contato com membros da comissão
editorial Recomendado
6.1.2 Interação: Própria (só da instituição),
Regional, Nacional e Internacional Recomendado
6.2 Editor Norma
6.2.1 Contato com Editor Recomendado
6.3 .1 Contato com Instituição Recomendado
7 ELEMENTOS
TELEMÁTICOS Formatos e recursos tecnológicos
7.1 Texto HTML Recomendado
7.2 Texto PDF Recomendado
7.3 Outros textos Recomendado
7.4 Conversores textual Recomendado 7.5 Ferramentas de busca (pesquisa interna) Recomendado 7.6 Ferramentas interativas (e-mails,
formulários, outros) Recomendado 7.7 Contador de acesso (dados estatísticos) Recomendado 7.8 Instruções de uso (no periódico ou sítio) Recomendado 7.9 Logomarca do periódico ou editor Recomendado 7.10 Políticas de preservação on-line
(Armazenamento, Recuperação, Disseminação)
Recomendado
7.11 Outro suporte (impresso, CD-ROM ou
outros) Recomendado
Quadro 15: Modelo de avaliação para Periódicos Científicos On-line após o pré-teste.
O modelo reestruturado, recebeu algumas correções de grafia e subdivisões, além do acréscimo de mais indicadores e o remanejamento do indicador 5.2 Artigos (5 Estrutura do periódico), que não é necessário pontuar, já que o mesmo subdivide-se. Os acréscimos dos indicadores foram assim distribuídos:
a) 1 Normalização: mais três indicadores, na identificação do título do artigo e sua tradução e filiação e contato para o autor;
b) 3 Periodicidade: acrescido dois indicadores, complementando as informações referentes aos intervalos possíveis de ocorrer em caso de periódicos científicos; c) 6 Autoridade: como a questão do correio eletrônico é um indicador referencial
para periódico científico on-line, foi acrescido mais três indicadores para destacar o contato dos responsáveis pelo periódico;
d) 7 Elementos telemáticos: com mais dois indicadores com a subdivisão do formato textual.
Desta forma, o modelo passou a contar com os sete critérios e 59 indicadores. É importante ressaltar que a alteração mais relevante efetuada a partir do pré-teste diz respeito à questão da pontuação que, na aplicação do pré-teste, não se fez necessária atribuir valores a cada indicador, visto que a presente pesquisa é descritiva e qualitativa,
procurando identificar a existência ou não do indicador. Partindo-se do princípio que o modelo trata de normas já estabelecidas (as da ABNT), acrescidas de recomendações ergonômicas e de usabilidade (identificadas na literatura), optou-se pela tabulação dos critérios e seus respectivos indicadores, a partir dos conceitos SIM ou NÃO, ou seja, a indicação da presença ou ausência do indicador no periódico.
4.5 CONSIDERAÇÕES
Com a aplicação do pré-teste e a análise dos 17 periódicos, foi possível perceber que a transição dos periódicos científicos impressos para o formato on-line, vem ocorrendo de acordo com as definições de Renzetti e Tétu (1997), Meadows (1999), Miranda (1999) e Cunha (2001), quando destacam em seus estudos, que a transição dos periódicos científicos do formato impresso para o formato on-line, vem ocorrendo em grupos que se assemelham em formato paralelo, onde o periódico é disponibilizado tanto na versão impressa como na versão on-line. O formato on-line para quando o periódico aparece só neste formato, e ainda, existe uma ansiedade quanto à divulgação do periódico impresso, disponibilizando na Internet informações sobre o mesmo, formando um grupo de divulgação.
De acordo com esta realidade, optou-se em aplicar o modelo no restante dos periódicos científicos que formam a Lista Geral (Apêndice A), ou seja, os formulários seriam aplicados nos 143 periódicos restantes, a fim de identificar a realidade dos periódicos no universo escolhido – Qualis/Capes da Engenharia.
Assim, apresenta-se de forma detalhada no Capítulo 5, a organização dos 143 formulários aplicados, a necessidade de divisão dos mesmos em grupos, permitindo uma melhor análise e os resultados obtidos, discutindo-os e destacando-se aspectos relevantes da recuperação dos dados, bem como a necessidade do estabelecimento de padrões para os periódicos científicos on-line.
5 APLICAÇÃO DO MODELO, ANÁLISE E DISCUSSÃO DOS
RESULTADOS
5.1 INTRODUÇÃO
Neste capítulo, serão apresentadas a análise e discussão dos resultados obtidos a partir da aplicação do Modelo de Indicadores para Periódicos Científicos On-line, conforme definido no Capítulo 4. Inicialmente, será apresentada a divisão dos periódicos em grupos, explicitando a origem desta divisão. Em seguida, descrevem-se os resultados desta pesquisa, estabelecendo uma discussão sobre cada um dos critérios presentes no modelo, individualmente dentro de cada grupo, com seus respectivos indicadores.
Conclui-se com um panorama dos periódicos científicos on-line, na área de Engenharia, destacando-se três perfis sobre a evolução destes documentos, detendo-se na recuperação de seus dados.