usabilidade websites de bibliotecas universitárias N.º de estudos sobre usabilidade em
BTD/BCE/UNB 8 0
BDTDIBICT 45 0
BTD/CAPES 128 1
Digital dissertations / Pro Quest 118 2
NDLTD / Networked digital library of
theses & dissertations 52 0
LISA - Library and Information
Science Abstracts 394 39
Fonte: Nascimento (2005)
Os 42 trabalhos sobre usabilidade apresentam relatos de atualização e reformulação de páginas, leiaute, conteúdo, estruturas de navegação e requisitos de bibliotecas virtuais e os métodos e técnicas mais utilizados são as inspeções baseadas em guia de recomendações, lista de verificação e avaliação heurística, ensaios de interação com análise da tarefa e card sorting e pesquisas de satisfação com questionários e entrevistas.
O resultado do levantamento bibliográfico também demonstrou que seria necessário testar a confiabilidade dos métodos e técnicas, possibilidade logo descartada em função do tempo que demandaria para a sua conclusão.
Optou-se, então, pela adoção das diretrizes contidas nos "critérios para seleção de métodos de usabilidade" (DIAS, 2001, p. 222), especificamente sobre as medidas de confiabilidade desses métodos (quadro 6), que foram propostas por Dias (2001, p. 223), quando estudou os métodos de avaliação de usabilidade no contexto de portais corporativos, realizando um estudo de caso no Senado Federal.
Quadro 6 – Medidas de confiabilidade dos métodos descritos na revisão de literatura
Método Confiabilidade
Alta Média Baixa
Inspeção baseada em listas de verificação e guias de recomendações X
Inspeção de componentes X
Percurso pluralístico X
Avaliação heurística X
Métodos prospectivos de avaliação de usabilidade X
Ensaios de interação X
Análise da tarefa/ método de medida de desempenho X
Fonte: Dias (2001)
Após verificação minuciosa das medidas de confiabilidade dos métodos descritos por Dias (2001, p. 223), desenvolveu-se um primeiro modelo de métodos e técnicas adequadas ao website da BCE. Mas, como a técnica Card Sorting possibilitou gerar mudanças significativas nos websites de bibliotecas norte-americanas, conforme demonstraram os trabalhos de Allen (2002) e King & Janik (2005), resolveu-se utilizá-la nesta pesquisa.
Ao final da seleção dos métodos e técnicas a serem aplicados, foram escolhidos também:
• análise documental, entrevista com verbalização estimulada com gestores e desenvolvedores e observação do website para analisar o seu contexto de uso;
• inspeção com especialistas em usabilidade baseada em lista de verificação, guia de recomendações e heurísticas para a avaliação ergonômica das interfaces do website da BCE da UnB;
• ensaio de interação com usuários por meio da técnica card sorting para identificar o modelo mental dos usuários relativo à arvore semântica do website;
• ensaio de interação pela técnica análise da tarefa para identificar os erros cometidos pelos usuários no uso do website.
Para analisar o contexto de uso do website através de análise documental, foram consultados documentos internos sobre a BCE da UnB. Nesta fase, foram coletados dados sobre a história da instituição, sua missão, suas diretrizes e o planejamento do seu website.
Em seguida, foi realizada a observação do website da Biblioteca Central, com ficha de observação preenchida pelo pesquisador (Anexo 1), que registrou as especificações técnicas, os produtos e serviços oferecidos, os requisitos de segurança para navegação e estratégias de segurança utilizadas no website.
Logo após, foram realizadas entrevistas (Anexo 2) com os gestores e desenvolvedores sobre o processo de desenvolvimento do website da Biblioteca Central da Universidade de Brasília, seus usuários, produtos e serviços, dificuldades gerenciais, desenvolvimento e gerenciamento de conteúdo e usabilidade. Durante a realização das entrevistas, foi aplicada a técnica de verbalização estimulada, que permitiu estimular o entrevistado a expressar suas opiniões através de perguntas diretas. Deve se ressaltar que o roteiro da entrevista semi- estruturada foi idealizado a partir de questionamentos que interessavam ao contexto da pesquisa, o que evitou possíveis desvios em relação aos objetivos estabelecidos.
Na avaliação ergonômica com especialistas, a lista de verificação (Anexo 3) ficou composta por 109 questões divididas em quatro grandes grupos, a saber:
• design da página - questões relativas a usabilidade superficial das páginas do website da BCE;
• design do conteúdo - questões relativas ao acesso aos conteúdos do website da BCE;
• design do site - questões que congregam o design da(s) página(s) e o design do conteúdo;
• acessibilidade e flexibilidade de uso para usuários de websites de biblioteca - questões relativas às funcionalidades do website, que facilitam a navegação do usuário.
Participaram desta etapa da avaliação ergonômica dois especialistas em engenharia de usabilidade, conforme sugerido por Dias (2001, p. 224), escolhidos segundo os seguintes critérios:
• Os especialistas em usabilidade deveriam estar familiarizados com os métodos e técnicas utilizados.
• Os especialistas em usabilidade deveriam trabalhar com interação homem- computador e design de interfaces.
Os especialistas em usabilidade selecionados aplicaram as listas de verificação em conjunto com o guia de recomendações (Anexo 4) e heurísticas para a avaliação de websites de bibliotecas universitárias (Anexo 5 ). O objetivo desta avaliação foi verificar a conformidade das
interfaces do website da Biblioteca Central e seus objetos de interação com os itens dispostos na lista de verificação.
Convém observar que a lista de verificação, o guia de recomendações e o conjunto de heurísticas para avaliação de usabilidade de websites de bibliotecas universitárias foram desenvolvidos de acordo com as especificidades do contexto do website da BCE para a realização desta pesquisa.
Para a elaboração das listas de verificação e do guia de recomendações foram essenciais os trabalhos de Nielsen (2000), os critérios ergonômicos de Bastien & Scapin (1993), a Ergo List do Laboratório de Utilizabilidade da Universidade Federal de Santa Catarina, o guia de estilos para serviços de informação via web de Parizotto (1997) e o índice de usabilidade de sites web, desenvolvido por Dias (2001). Por sua vez, o conjunto de heurísticas desenvolvidas, baseou-se nas heurísticas de usabilidade para a web de Nielsen (1994), e nas heurísticas para avaliação de portais corporativos desenvolvidas por Dias (2001).
Os especialistas em usabilidade que participaram desta etapa também detectaram problemas de usabilidade, identificando as heurísticas a que eles se relacionam.
Logo após, os problemas de usabilidade detectados, durante a aplicação da lista de verificação e da avaliação heurística, foram consolidados e registrados em uma planilha pelo pesquisador, para que outros dois especialistas em usabilidade os classificassem de acordo com graus de severidade, estabelecidos em uma escala da seguinte maneira:
Tabela 2 – Graus de severidade dos problemas de usabilidade
Grau de Severidade Descrição
0 Não concordo que seja um problema de usabilidade
1 Problema com baixa prioridade de correção
2 Problema com média prioridade de correção
3 Problema com alta prioridade de correção
Fonte: Nielsen (2000)
Para identificar o modelo mental dos usuários relativo à arvore semântica do website foi realizado ensaio de interação para verificar a organização e o agrupamento da informação no website da Biblioteca Central da Universidade de Brasília.
Como esta pesquisa avaliou um sistema em uso, escolheu-se para o primeiro ensaio de interacão a técnica card sorting, que permite verificar o conjunto das categorias nas quais as informações do website são armazenadas.
Nesta pesquisa, optou-se por um método híbrido das técnicas de card sorting aberta e fechada, posto que os usuários receberam os cartões previamente marcados, mas com a possibilidade de criar outros ou corrigir os cartões existentes. A aplicação da técnica obedeceu a seguinte seqüência de ações: mapeamento de conteúdo, criação dos cartões para a aplicação da técnica, teste de validação dos cartões e respectivas nomenclaturas, recrutamento e seleção dos usuários, treinamento dos usuários e análise quantitativa e qualitativa.
Foram selecionados cinco participantes para o card sorting, pois segundo Nielsen (2000) consegue-se melhores resultados em testes de usabilidade com cinco usuários. Os usuários foram escolhidos de acordo com os dados do questionário demográfico (Anexo 6), aplicado no laboratório de Acesso Digital (LAD)da BCE, de acordo com o seguinte critério: todos deveriam ser estudantes da Universidade de Brasília.
Os cinco participantes selecionados para esta etapa foram notificados da data e hora de comparecimento para o treinamento e aplicação da técnica. Aos participantes, foram entregues cartões com as nomenclaturas que representavam o conteúdo do website, cabendo-lhes organizar por grupos com similaridade. Os grupos de cartões poderiam se tornar subgrupos, de acordo com o entendimento do usuário e itens inúteis poderiam ser desconsiderados.
Para a análise dos dados obtidos com o card sorting utilizou-se o conjunto de software desenvolvido pelo Prof. Dr. Jorge A. Toro da Universidade Los Andes de Bogotá, Colômbia denominado card zort / card cluster.
Os itens descritos pelos usuários nos cartões foram armazenados no cardzort e os grupos de itens armazenados pelo nome de cada um, posto que se esta tarefa ficasse a cargo dos usuários poderiam surgir dúvidas relativas à utilização do software, o que, por sua vez, interferiria nos resultados a serem obtidos.
Durante a aplicação do card sorting, a técnica de verbalização simultânea foi empregada para que os usuários expressassem suas opiniões a respeito do ensaio e dos problemas relativos aos agrupamentos de informações do website.
O segundo ensaio de interação teve como objetivo identificar os erros cometidos pelos usuários durante a realização de uma ação no website. A técnica escolhida para este propósito foi a análise da tarefa. Para a análise da tarefa, foram selecionados 21 participantes, uma vez que o número de vinte participantes é o mínimo recomendado por Dias (2001, p. 224), que denomina a análise da tarefa como método de medida de desempenho. Os 21 estudantes da Universidade de Brasília, selecionados por meio de questionário demográfico, também aplicado no LAD da BCE, foram agrupados em três grupos distintos, de acordo com os seguintes critérios:
• 7 participantes deveriam ser estudantes de pós-graduação da Universidade de Brasília;
• 7 participantes deveriam ser estudantes de graduação da Universidade de Brasília; • 7 participantes deveriam ser estudantes egressos da Universidade de Brasília. O questionário demográfico também forneceu outras informações sobre o perfil dos usuários, como: sexo, idade dos participantes e quais os motivos que os levavam a utilizar o website da biblioteca.
Ao final desta etapa, os participantes selecionados para a análise ergonômica da tarefa foram notificados da data e hora de comparecimento para o treinamento e aplicação do método, que foi realizado na sala de reunião da Biblioteca da Presidência da República.
Durante a dinâmica, os participantes realizaram as tarefas em um computador com configuração compatível às especificidades da técnica. Esta medida de precaução foi tomada com o intuito de diminuir ao máximo as possibilidades de interferências que poderiam prejudicar a avaliação.
Para maximizar a obtenção dos resultados, foi utilizada técnica de verbalização simultânea e sistema de monitoramento para registros em áudio, vídeo e software de captura de telas Screen Movie Studio para análise das tarefas realizadas.
As tarefas a serem aplicadas foram elaboradas de acordo com os seguintes critérios: • as tarefas a serem executadas deveriam permitir a navegação em todas as categorias de informação do website da BCE;
• os links a serem percorridos deveriam estar identificados nas árvores semânticas resultantes do card sorting.
5.1 Variáveis
Nesta pesquisa, as variáveis independentes referem-se à usabilidade do website da BCE da UNB, envolvendo a análise do contexto de uso, a avaliação ergonômica de suas interfaces e a análise da tarefa e as variáveis dependentes relacionam-se ao website e ao ponto de vista de gestores e desenvolvedores, especialistas em usabilidade e usuários. As variáveis ficaram assim distribuídas: