A avaliação laboratorial abrange a realização das sessões de teste em um laboratório de usabilidade. Inicialmente, havia sido planejado que os testes ocorreriam no Laboratório de Interfaces Homem Máquina (LIHM), localizado na Fundação Parque Tecnológico da Paraíba (PaqtcPB). No entanto, devido a problemas de infraestrutura, os testes foram transferidos para o Laboratório de Interfaces Homem Máquina (LIHM), localizado na Universidade Federal de Campina Grande (UFCG), especificamente no Departamento de Engenharia Elétrica.
Para a realização dos testes neste espaço, criou se uma senha de acesso ao laboratório de responsabilidade do avaliador13, o acesso era livre nos dias previamente agendados pela equipe do LIHM. Ao final de todos os testes, foi solicitado o cancelamento da senha de acesso ao LIHM.
O laboratório compõe se de cinco espaços: uma sala de teste equipada de espelho de face única, câmeras, microfone, caixas de som, computador, mesa e cadeira; uma sala de controle, equipada de aparelhos de controle de som e monitoramento de câmeras e computadores (um servidor, um computador para monitoramento, um monitor com e um teclado, ligados diretamente ao computador da sala de teste); uma sala de observação, com mesas e cadeiras para os observadores auxiliarem o avaliador; uma sala de recepção, usada para recepcionar os usuários de teste previamente agendados; e uma sala de apoio para uso dos pesquisadores de projetos ligados ao LIHM.
O diálogo entre o usuário e o avaliador era feito mediante uso de microfone com som ambiente. Na Figura 8, pode se vislumbrar a estrutura do laboratório usado nos ensaios de interação.
%(9)* L *!')*$P)%' 4# 5$#)1*/# '8#8 B@9%5*
Fonte: Dados da Pesquisa (2011)
Para o monitoramento das sessões de teste em laboratório, utilizou se um para ajuste da movimentação das câmeras de teto e (acoplada ao monitor do computador da sala de teste, para captura das expressões faciais do usuário) e um para captura das telas conforme descritos a seguir:
a) * 56 7 8* 9 – para monitoramento e gravação dos vídeos das três câmeras de teto e da do computador de teste; e b) : + + ; – para capturar os vídeos e imagens das telas
A avaliação de campo realizou se nas bibliotecas do Sistemoteca da UFCG. Os alunos fizeram os testes na Biblioteca Central da UFCG, enquanto os funcionários fizeram os testes na Biblioteca Central da UFCG, na Biblioteca do CCBS e na Biblioteca do HUAC. Nos testes de campo, para simular o ambiente real, utilizou se a infraestrutura da própria biblioteca, sem registro de vídeo e sem
para a captura de telas.
Os testes de campo aconteceram concomitantemente aos testes de laboratório. Agendados de acordo com a disponibilidade dos usuários e do Laboratório de Interação Homem Máquina.
Assim, ocorreram testes nos períodos da manhã, tarde e noite. O período dos testes compreendeu os meses de outubro, novembro e dezembro de 2010 e fevereiro de 2011. Antes de iniciar os testes, foi treinada uma equipe com três pessoas para auxiliar o avaliador nas observações das sessões de teste. A inclusão de mais de uma pessoa no processo de avaliação fez com que os dados fossem coletados com mais precisão, principalmente nas observações diretas que são simultâneas à mensuração do tempo da tarefa.
Para ambos os ambientes de avaliação, foram utilizados pela equipe de avaliação, o roteiro da tarefa (versão do avaliador) e a ficha de registro de eventos, além de cronômetros para medir o tempo de execução das tarefas, já para os usuários foram fornecidos o roteiro da tarefa (versão do usuário) e a lista de referências para condução do ensaio de interação. Elaborou se a lista de referência, após uma exaustiva pesquisa pela equipe de avaliação no Catálogo para encontrar documentos que, por algum motivo, apresentassem falhas. Deste modo, simularam se situações reais em que os usuários eram obrigados a adotarem ações diversas.
Sendo assim, nos Quadros 11 e 12 estão descritos de acordo com o ambiente de avaliação, uma demonstração resumida dos materiais utilizados nos testes de usabilidade das etapas anteriormente citadas.
9*4)' *$#)%*+ 9$%+%J*4' 5'- $#-$#- 4# +*!')*$P)%'
NATUREZA ESPECIFICAÇÃO QUANTIDADE
Produto alvo Catálogo
< −Computadores
−Câmeras de vídeo (teto)
−* cam −Microfones 03 03 01 02
− para gravação de vídeos
(* 56 78* 9
− de captura de tela (: +
+ ;9
Outros − Cronômetro
− Ficha de cadastro dos participantes − Documentos de aceitação das condições
de teste
− Termo de confidencialidade − Termo de consentimento e livre
esclarecimento
− Roteiro da tarefa de teste − Ficha de registro de eventos
− 6 3 para ' dos vídeos
03
01 Fonte: Dados da Pesquisa (2011)
9*4)' , *$#)%*+ 9$%+%J*4' 5'- $#-$#- 4# /*8.'
NATUREZA ESPECIFICAÇÃO QUANTIDADE
Produto alvo Catálogo
< −Computadores 03
Outros − Cronômetro
− Ficha de cadastro dos participantes − Documentos de aceitação das condições
de teste
− Termo de confidencialidade − Termo de consentimento e livre
esclarecimento
− Roteiro da tarefa de teste − Ficha de registro de eventos
03
Fonte: Dados da Pesquisa (2011)
Após a finalização de cada sessão de teste, para ambos locais de teste (laboratorial e de campo), o produto e o ambiente eram preparados para novas sessões. Nos dois ambientes de teste, o computador estava ligado e conectado a da UFCG com três atalhos de navegadores diferentes ( ,= , Firefox e >1 ) disponíveis na área de trabalho para condução do ensaio de teste. O usuário escolhia o navegador e começava a tarefa pelo site da UFCG.
Os procedimentos adotados para coleta dos dados basearam se, como sugerem Ferreira (2007) e Barbosa (2009), pela aplicação das técnicas pré definidas de avaliação da usabilidade e pela coleta dos indicadores objetivos e subjetivos que
consistem na averiguação das hipóteses previamente determinadas. Para a condução dos ensaios, no laboratório e no campo, adotou se o mesmo roteiro para o produto. As sessões de teste compreenderam as seguintes etapas:
a) Introduzir o participante no ambiente de teste;
b) aplicar questionário para delineamento do perfil do usuário; c) executar o roteiro das atividades de teste;
d) aplicar questionário para sondagem da satisfação subjetiva do usuário; e e) realizar de entrevista não estruturada.