Anteriormente à realização dos Testes de Usabilidade, foi solicitado aos participantes o preenchimento do formulário pré-sessão, de modo a evidenciar algumas características dos participantes. Nesse sentido, destacam-se os seguintes aspectos:
5.1.1 Apresentação dos resultados do questionário pré-sessão
Na Tabela1, serão explanados os dados descritos pelos participantes dos testes, por meio do questionário pré-sessão, sendo essas informações referentes a vínculo institucional, faixa etária e gênero dos usuários.
Tabela 1 – Demonstrativo dos participantes – vínculo institucional, faixa etária e gênero
Fonte: Dados da pesquisa.
Dos vinte participantes da avaliação, três usuários têm até 20 anos, sete encontram-se na faixa de 21 a 30 anos, cinco pessoas estão na faixa etária entre 31 e 40 anos, três participantes possuem entre 41 e 50 anos e dois usuários têm mais de 50 anos. Desse total, três usuários são do gênero masculino e 17 do gênero feminino.
No questionário pré-sessão, também foi solicitado aos participantes que informassem se já haviam lido, ouvido falar ou utilizado o Sistema Eletrônico de Editoração de Revistas (SEER) ou o Open Journal Systems (OJS); em caso de respostas positivas, o participante deveria informar como e/ou por meio de quem obteve essa informação. Essas informações podem ser visualizadas na tabela que segue.
Tabela 2 – Demonstrativo de participantes que já leram, ouviram falar ou utilizaram o SEER e por meio de que, quem e/ou como
Fonte: Dados da pesquisa.
Nesse caso, destaca-se que 45%, ou seja, 9 participantes, responderam que nunca leram, ouviram falar ou utilizaram o SEER/OJS. Já 55%, correspondentes a 11 usuários, declararam já ter algum tipo de informação sobre o sistema. Nesse sentido, por meio desses resultados, pode-se dizer que a maioria dos participantes possui algum tipo de conhecimento sobre o referido sistema. No entanto, percebe-se que, tendo em vista todos os participantes estarem vinculados à UFRN e possuírem algum tipo de informação sobre revistas científicas, o SEER poderia ser mais divulgado para a comunidade universitária, principalmente por meio do Portal de Periódicos Eletrônicos da UFRN e pelas revistas que o integram.
Os usuários que responderam já possuir algum tipo de informações sobre o SEER/OJS afirmaram ter conhecimento acerca do sistema de diferentes formas, a saber: treinamentos, disciplina de editoração, conversas informais, por meio do
Portal de Periódicos Eletrônicos da UFRN e Instituto Brasileiro de Informação em Ciência e Tecnologia, dentre outros.
A partir das informações coletadas, foi possível identificar que, dentre as categorias de participantes desta pesquisa, apenas a categoria relacionada aos docentes foi unânime no que se refere a possuir algum conhecimento sobre o SEER/OJS. No caso dos bibliotecários, 80% dos usuários informaram possuir algum conhecimento acerca do sistema. Na categoria referente aos discentes de graduação e pós-graduação, 80% dos participantes desconhecem o SEER/OJS.
Após o preenchimento do questionário pré-sessão, foi iniciado o Teste de Usabilidade, que, por sua vez, buscou evidenciar a interação do usuário e/ou possível usuário com o SEER, por meio da revista BiblioCanto. Algumas variáveis foram observadas, quais sejam: tempo na realização das tarefas, quantidade de cliques executados, número de erros, assim como número de participantes que não conseguiram realizar as tarefas solicitadas, nesse caso, a de cadastro de autor e de submissão de um artigo.
5.1.2 Tempo de realização da tarefa de cadastro de autor
Em relação ao tempo de realização da tarefa de cadastro, houve uma variação entre o tempo mínimo de 3,20 (três vírgula vinte minutos) e 9,23 (nove vírgula vinte e três minutos), referente ao tempo máximo, conforme visualização no gráfico que segue.
Gráfico 1 – Tempo de realização da tarefa de cadastro de autor
O participante ID19, que está inserido na categoria de bibliotecários, concluiu a tarefa em menor tempo e já realizou capacitação do sistema, além de ter submetido quatro artigos científicos para publicação em periódicos científicos, conforme informado no questionário pré-sessão.
No caso do participante ID11, que desenvolveu a tarefa em maior tempo, este teve dificuldades no preenchimento do Telling Humans and Computers Apart Automatically (CAPTCHA5). O participante ID11 ainda inseriu o código sem alternar letras maiúsculas e minúsculas, desse modo, somente após duas tentativas conseguiu efetuar o cadastro. Esse mesmo participante já havia participado de minicurso sobre o SEER.
É pertinente destacar ainda que, conforme mencionado anteriormente, o SEER possibilita três caminhos para a realização de cadastro: um por meio do item de menude Cadastro (Figura 6), clicando no item de menu de Acesso (Figura 7) ou ainda por meio do botão nomeado Acesso (Figura 9), localizado abaixo da área de inserção de login e senha.
Nesse caso, os participantes ID01, ID04, ID05, ID08, ID09, ID11, ID13, ID15, ID17, ID18, ID19 e ID20 efetuaram seus cadastros clicando no item de menureferente ao cadastro, enquanto os participantes ID02, ID03, ID07, ID10, ID12, ID14 e ID16 realizaram por meio do botão de acesso localizado próximo do espaço destinado à inserção de login e senha. O usuário ID06 foi o único participante que clicou no item de menu nomeado acesso para efetuar seu cadastro. Assim sendo, deve-se considerar que o tempo gasto pelos indivíduos que efetuaram o cadastro por meio do item de menue botão de acesso foi um pouco maior por esse motivo.
5.1.3 Cliques executados na realização da tarefa de cadastro de autor
Os cliques executados para essa tarefa deveriam variar entre 06, se o participante efetuasse o cadastro pelo item de menu de cadastro, e 07 para realização dessa tarefa pelo item de menu de acesso, acrescidos de 17 para preenchimento dos campos sem fazer uso da tecla tab.
5Também conhecido como código de validação que tem o objetivo de diferenciar o acesso a uma
Gráfico 2 – Número de cliques executados na realização da tarefa de cadastro de autor no Teste de Usabilidade
Fonte: Dados da pesquisa.
Nesse caso, o participante ID14 foi o que mais se aproximou da execução do número de cliques necessários para a realização da tarefa, fazendo o mínimo de uso da tecla tab. Já o participante ID11 efetuou o número correto de cliques, fazendo uso da tecla mencionada. Esses dois participantes são docentes do Departamento de Ciência da Informação da UFRN.