Tiempos extremos: investigue antes de excluir

Al analizar datos de pruebas de usabilidad, los tiempos de finalización de tareas excesivamente largos pueden parecer anomalías. La tentación de simplemente eliminar estos "outliers" es grande para evitar distorsionar los promedios. Sin embargo, descartarlos sin investigación puede significar perder la oportunidad de identificar problemas críticos de usabilidad o fallas técnicas inesperadas.

Por qué los tiempos largos importan

Un tiempo largo puede reflejar dificultad con la interfaz, una pausa, un problema técnico o la forma de registrar el reloj. El valor por sí solo no permite elegir entre estas explicaciones. Revise el inicio y el final de la medición y busque evidencia disponible de la sesión. Si no hay grabación o registro suficiente, marque la causa como desconocida. No convierta automáticamente un valor extremo en error, fraude o señal confirmada de dificultad de uso.

Estrategias para investigar

Antes de cualquier exclusión, sumérgete en los detalles. Mira las grabaciones de la sesión del usuario, revisa comentarios y observa patrones. Por ejemplo, imagina que un usuario hipotético tarda 10 minutos en un registro que debería durar dos. La grabación podría revelar que intentó varias veces ingresar una contraseña compleja sin retroalimentación clara, o que el botón "siguiente" no funcionaba. Esto apunta a un problema de diseño o técnico, no a un usuario "lento".

Análisis y reportes cuidadosos

Mantenga siempre los datos brutos originales. Al reportar, considera el análisis de sensibilidad: presenta los resultados con y sin los datos extremos, explicando el razonamiento. La mediana puede ser más robusta que el promedio en datos con extremos, pero no cuenta la historia completa. Use también el rango y los cuartiles para dar una visión más completa de la distribución de los tiempos, permitiendo inspeccionar la variabilidad real.

Checklist para tiempos extremos

• Revise grabaciones de sesión de usuarios con tiempos prolongados.
• Verifica comentarios de usuario y registros del sistema por fallas.
• Compare métricas con y sin datos extremos para sensibilidad.

Cree un protocolo de equipo para investigar tiempos de tarea extremos. Este documento debe detallar los pasos para revisar grabaciones, registros y comentarios, y cómo documentar las razones para retener o excluir datos, asegurando decisiones basadas en evidencia.