Neste cap´ıtulo est´a descrito o processo de avalia¸c˜ao da proposta UsaUS e-learning do pre- sente trabalho. Nele foram expostas trˆes avalia¸c˜oes: Avalia¸c˜ao I: estudo experimental com a escrita das US de Cohn et al. (COHN, 2009) e UsaUS e-learning; Avalia¸c˜ao II: constru¸c˜ao dos prot´otipos utilizando as US descritas na Avalia¸c˜ao I e Avalia¸c˜ao III: inspe¸c˜ao dos prot´otipos visando analisar o impacto das US na constru¸c˜ao dos prot´otipos e an´alise de usabilidade.
Cap´ıtulo
7
Conclus˜oes e trabalhos futuros
Este trabalho propˆos a abordagem UsaUS e-learning, uma abordagem composta por uma gram´atica e um conjunto de diretrizes de usabilidade de aplica¸c˜oes para e-learning que orienta a escrita das US. A abordagem foi delineada de forma incremental a partir da revis˜ao bibliogr´afica e de um estudo explorat´orio (EEI). Tamb´em houve mais um estudo explorat´orio (EEII) com prop´osito de observar o uso da abordagem proposta. As diretrizes de usabilidade de aplica¸c˜oes para e-learning de Ardito et al. (ARDITO et al., 2006) foram adaptadas para serem utiliza- das como apoio a escrita de US. Al´em disso, a proposta foi avaliada sob o ponto de vista de desenvolvedores de software e especialistas de IHC por meio de trˆes avalia¸c˜oes.
Um primeiro estudo explorat´orio (EEI) foi aplicado para descobrir a vis˜ao dos desenvolvedo- res de software a respeito da incorpora¸c˜ao das t´ecnicas de IHC na escrita das US. Este aconteceu por meio de um estudo experimental em que os 35 participantes utilizaram trˆes temas distintos de aplica¸c˜oes para e-learning junto `a artefatos de IHC para a escrita das US. Nesse estudo foi analisado a qualidade de escrita das US, a vis˜ao dos desenvolvedores de software sobre as t´ecnicas de IHC, as t´ecnicas mais utilizadas por eles e a usabilidade dessas US.
A partir deste estudo e da revis˜ao bibliogr´afica conseguiu-se insumos para elaborar uma estrutura de US. A estrutura proposta foi nomeada de UsaUS e-learning. A partir da proposta UsaUS e-learning um segundo estudo explorat´orio (EEII) foi realizado. Este aconteceu utili- zando a estrutura UsaUS e-learning e as diretrizes de usabilidade de aplica¸c˜oes para e-learning de Ardito et al. (ARDITO et al., 2006). O EEII contou com a participa¸c˜ao de 19 desenvolvedo- res de software. O estudo demonstrou as dificuldades encontradas no uso da estrutura UsaUS e-learning e no uso das diretrizes de usabilidade. Al´em disso, foi feita uma an´alise de qualidade nas US escritas, resgatado a vis˜ao dos desenvolvedores no uso das t´ecnicas de IHC e capturado a facilidade e utilidade de uso da proposta junto as diretrizes de usabilidade de aplica¸c˜oes para e-learning.
A partir dos resultados obtidos com os estudos explorat´orios e da pesquisa bibliogr´afica, a abordagem UsaUS e-learning foi refinada. Essa abordagem trata-se de: uma estrutura de US que preocupa-se em contemplar aspectos de usabilidade; diretrizes de usabilidade de aplica¸c˜oes para e-learning e artefatos de IHC.
Ap´os a defini¸c˜ao da proposta, trˆes avalia¸c˜oes foram realizadas. Na primeira avalia¸c˜ao foram escritas US utilizando a estrutura de Cohn e a UsaUS e-learning. Essa avalia¸c˜ao contou com a
participa¸c˜ao de 29 desenvolvedores que escreveram 21 US de Cohn e 25 UsaUS e-learning. Foi feita uma an´alise de qualidade das US escritas, uma an´alise de usabilidade e coletado a facilidade e utilidade de uso das estruturas de US junto as diretrizes de usabilidade de aplica¸c˜oes para e-learning. Os resultados sugeriram uma boa qualidade de ambas as estruturas e os resultados relativos `a facilidade e utilidade de uso de ambas as estruturam obtiveram um valor muito pr´oximo.
A partir das an´alises feitas pela primeira avalia¸c˜ao, foi conduzida a segunda avalia¸c˜ao. Essa avalia¸c˜ao tinha como objetivo que os participantes constru´ıssem prot´otipos de baixa fidelidade utilizando como apoio as duas melhores US escritas na Avalia¸c˜ao I de ambas as estruturas. Al´em das US, os participantes utilizaram como apoio as t´ecnicas de Persona e Cen´ario e o escopo das aplica¸c˜oes utilizadas. Essa avalia¸c˜ao contou com 39 participantes. Os participantes foram divididos em dois grandes grupos, um grupo come¸cou a constru¸c˜ao dos prot´otipos com as US de Cohn e o outro com as UsaUS e-learning. Depois a ordem foi invertida. Nessa avalia¸c˜ao foi aplicado um question´ario para analisar a facilidade e utilidade de uso da constru¸c˜ao dos prot´otipos auxiliados pelas US. Os resultados sugeriram que os participantes concordam em maior grau que o uso da UsaUS e-learning para constru¸c˜ao dos prot´otipos possui uma maior facilidade e utilidade.
Por fim, foi conduzida a terceira avalia¸c˜ao com a participa¸c˜ao de seis especialistas de IHC. Esta avalia¸c˜ao teve o intuito de inspecionar os prot´otipos constru´ıdos na fase anterior para ver se estes refletiam as US que serviram como base para sua constru¸c˜ao e se os desenvolvedores que escreveram as US apontaram as mesmas diretrizes de usabilidade que foram encontradas nos prot´otipos. Os resultados dessa avalia¸c˜ao sugeriram que ambas as estruturas conseguiram transmitir as informa¸c˜oes das US para os prot´otipos, por´em a UsaUS e-learning teve uma melhor comunica¸c˜ao de aspectos de usabilidade.
7.1
Contribui¸c˜oes
´
E poss´ıvel listar algumas contribui¸c˜oes desse trabalho. Com a realiza¸c˜ao da atualiza¸c˜ao bibliogr´afica foi poss´ıvel entender a importˆancia da usabilidade e UX no desenvolvimento de aplica¸c˜oes para e-learning; foram listadas as t´ecnicas de IHC mais comuns; foi feita uma listagem dos principais trabalhos com suas contribui¸c˜oes e o interfaceamento entre as ´areas; foi visto que j´a houveram trabalhos que propuseram varia¸c˜oes da escrita de US com foco em aspectos de usabilidade, mas ainda existe uma lacuna para um dom´ınio espec´ıfico.
Este projeto ainda contribuiu com um estudo para capturar a vis˜ao do desenvolvedor de software sobre o uso de t´ecnicas de IHC para a escrita de US. Coletou as t´ecnicas de IHC mais utilizadas e mais conhecidas pelos desenvolvedores. Ainda, apresentou uma an´alise de usabilidade das US de Cohn utilizando como base um conjunto de diretrizes de usabilidade proposto por Ardito et al. (ARDITO et al., 2006).
Contribuiu com um estudo apresentando como os desenvolvedores de software usam a UsaUS e-learning com o aux´ılio de diretrizes de usabilidade de aplica¸c˜oes para e-learning. Mostrou a vis˜ao dos desenvolvedores em rela¸c˜ao a facilidade e utilidades de uso das diretrizes em conjunto com a UsaUS e-learning.
Contribuiu, ainda, propondo, refinando e avaliando a UsaUS e-learning. A abordagem trata- se de uma gram´atica de US e diretrizes de usabilidade de aplica¸c˜oes para e-learning.
As pesquisas realizadas para embasar esta disserta¸c˜ao possibilitaram tamb´em:
• Publica¸c˜ao do artigo “Adding human interaction aspects in the writing of User Stories: a perspective of software developers” no Simp´osio Brasileiro de Engenharia de Software (SBES) em 2017;