Tempos extremos: investigue antes de excluir

Ao analisar dados de testes de usabilidade, tempos de conclusão de tarefa excessivamente longos podem parecer anomalias. A tentação de simplesmente remover esses "outliers" é grande para evitar distorcer as médias. Contudo, descartá-los sem investigação pode significar perder a chance de identificar problemas críticos de usabilidade ou falhas técnicas inesperadas.

Por que tempos longos importam

Um tempo longo pode refletir dificuldade com a interface, uma pausa, um problema técnico ou a forma como o relógio foi registrado. O valor sozinho não permite escolher entre essas explicações. Verifique o início e o fim da medição e procure evidências disponíveis da sessão. Se não houver gravação ou registro suficiente, marque a causa como desconhecida. Não transforme um valor extremo automaticamente em erro, fraude ou sinal confirmado de dificuldade de uso.

Estratégias para investigar

Antes de qualquer exclusão, mergulhe nos detalhes. Assista às gravações da sessão do usuário, revise comentários e observe padrões. Por exemplo, imagine que um usuário hipotético leva 10 minutos para um cadastro que deveria durar dois. A gravação poderia revelar que ele tentou várias vezes inserir uma senha complexa sem feedback claro, ou que o botão "próximo" não funcionava. Isso aponta para um problema de design ou técnico, não para um usuário "lento".

Análise e relatórios cuidadosos

Mantenha sempre os dados brutos originais. Ao relatar, considere a análise de sensibilidade: apresente os resultados com e sem os dados extremos, explicando o raciocínio. A mediana pode ser mais robusta que a média em dados com extremos, mas não conta a história completa. Use também o intervalo e os quartis para dar uma visão mais abrangente da distribuição dos tempos, permitindo inspecionar a variabilidade real.

Checklist para tempos extremos

• Assista às gravações de sessão dos usuários com tempos longos.
• Verifique feedback do usuário e logs de sistema para falhas.
• Compare métricas com e sem os dados extremos para sensibilidade.

Crie um protocolo de equipe para investigar tempos de tarefa extremos. Este documento deve detalhar os passos para revisar gravações, logs e feedback, e como documentar as razões para reter ou excluir dados, garantindo decisões baseadas em evidências.