Sample Sizes for Usability Studies: Additional Considerations

Recentemente, Virzi (1992) apresentou dados que apoiam três afirmações sobre tamanhos de amostra para estudos de usabilidade: (1) a observação de quatro ou cinco participantes permitirá que um profissional de usabilidade descubra 80% dos problemas de usabilidade de um produto, (2) a observação de participantes adicionais revelará cada vez menos novos problemas de usabilidade e (3) problemas de usabilidade mais graves são mais fáceis de detectar com os primeiros participantes. Os resultados de um estudo independente de usabilidade apoiam claramente a segunda afirmação, apoiam parcialmente a primeira, mas não apoiam a terceira. A descoberta de problemas mostra retornos decrescentes em função do tamanho da amostra. A observação de quatro a cinco participantes descobrirá cerca de 80% dos problemas de usabilidade de um produto, desde que a probabilidade média de detecção de problemas varie entre 0,32 e 0,42, como em Virzi. Se a probabilidade média de detecção de problemas for menor, então um profissional precisará observar mais de cinco participantes para descobrir 80% dos problemas. Usando categorias comportamentais para gravidade (ou impacto) do problema, esses dados não mostraram correlação entre a gravidade (impacto) do problema e a taxa de descoberta. Os dados forneceram evidências de que a fórmula de probabilidade binomial pode fornecer um bom modelo para prever curvas de descoberta de problemas, dada uma estimativa da probabilidade média de detecção de problemas. Finalmente, os dados de simulações económicas que estimaram o retorno do investimento (ROI) sob uma variedade de cenários mostraram que apenas a probabilidade média de detecção de problemas influenciou fortemente a gama de tamanhos de amostra para o ROI máximo.

Tags:Teste de Usabilidade

Autor:James Lewis

Ano:1994

Referência bibliográfica: