Métricas clave en pruebas de usabilidad
Curso de Usabilidad: Principios, Pruebas y Herramientas Avanzadas
Contenido del curso
Carlos Lizarazo
Steve Calderón Sánchez
Oscar Javier Rodriguez Patiño
Oscar Alejandro Umaña Espinosa
Carlos Ariel Acuña Corvalán
Felipe Bernardo González Barranco
Daniel Hidalgo
María José Ledesma
María José Ledesma
Carlos Jaramillo
Felipe Bernardo González Barranco
Gonzalo Rodriguez
Guillermo Ruben Linares Martinez
Yusting Andrés Mora González
Jhonnatan Diaz
Enrique A. Estrada
Emmanuel Rodríguez
Tetsu Osnaya
Joel Juan Villamar Rodríguez
Edgardo Marcano
ANA MARIA BELTRAN
Alejandro Ramos
Leonardo Germán Sanchez
Benjamin Edilfonso
Jairo Hernando Puentes Fernández
MARIA TERESA PANIAGUA RIVERA
Andrea Gonzalez
Andrea Gonzalez
Pedro Isaac Aguilar
Carmen Álvarez M.
Hay algo que me gustaría dejar sobre la mesa y es lo siguiente: En el curso de UX TESTING y CX research la profesora Verónica dijo algo fundamental sobre las pruebas de usabilidad: "Una cosa es lo que un usuario dice, otra cosa lo que un usuario interpreta que hizo y otra cosa lo que realmente hizo, el objetivo del UX TESTING es saber lo que hizo y como se sintió con respecto a ello". A raíz de esto, es mis pruebas de usabilidad yo no usaría la métrica de satisfacción subjetiva ya que por algun sesgo o querer quedar bien un sujeto de prueba nos puede dar un feedback erroneo o que no es completamente cierto. Hay usuarios que no saben expresar sus problemáticas y en general el ser humano no sabe muy bien lo que quiere.
Para tener en cuenta
Concuerdo bastante con lo que dices, a veces solamente por el hecho de no querer admitir que algo fue difícil el usuario puede dar información errónea.
Pero creo que tambien es virtud del entrevistador darse cuenta de ese tipo de cosas, tambien hay más formas de saber si lo que hizo y dice concuerda, hay que analizar todo ese tipo de cosas a la hora de los resultados.
En Diseño Industrial al estudiar ergonomía, siempre se habla de 3 dimensiones para medir la usabilidad de un producto. Eficacia: “Capacidad de lograr el efecto que se desea o se espera”. (Íntimamente relacionado con el Éxito en la tarea) Efectividad: “Cuantificación del logro de la meta” (Ligado a los “Errores”, al tiempo en la tarea). Eficiencia: “Capacidad para lograr un fin empleando los mejores medios posibles”. (Ligada a la “Satisfacción”.) Buscamos que en general, nuestros productos sean lo más eficientes posible, y para ello medimos con que eficacia y efectividad logran nuestros usuarios usar nuestro producto. Allí se instalan las métricas.
Eso tiene que ver también con la norma de usabilidad. ISO 9241-11:2018 Donde se define esos tres conceptos, junto con dos más.
Que buen aporte!!
En el curso de FACEBOOK ANALTYTICS de Platzi manejan mucho las métricas en campañas... Les recomiendo mucho ese curso.
¡Aquí dejó el link!
También tener en cuenta que las métricas pueden ser:
Gracias!
Definición de métricas
Nos ayudan a validar los conceptos de usabilidad, diseño y nos ayudan a debatir cambios basados en resultados. Es bueno siempre incluirlas para tener referencias.
Tipos:
Somos lo que medimos
Bueno si pero... tengo entendido que ese tipo de métricas aplican más que todo para la vida personal, no para el diseño de productos. 🥶
Buenas tardes, trabajo para una empresa desarrolladora de software, soy el jefe de diseño web y quisiera implementar este proceso para nuestro ecommerce, el objetivo principal es que las personas puedan realizar una compra, pero sería bueno evaluar otras cosas importantes como el diseño y la comunicación, como podría enfoncar esos obejtivos para cumplir el objetivo.
Antes que nada define que quieres medir:
Define que quieres medir de tu producto o servicio ej: "Quieres tener mas engagement" o "Quieres tener mejores hallazgos para mejorar el producto".
Ahora sigue estos pasos
Empieza. accionar en base a las métricas que vayas recopilando. Mucha suerte
¿Qué son las métricas de Usabilidad?
¿Cómo evaluamos el diseño? Típicamente, y según sea la medida que deseemos obtener, tenemos diferentes niveles de aprobación donde todas aquellas opiniones van tomando mayor notoriedad. .
ℹ️ Definición Las métricas de Usabilidad son un sistema de medidas de la eficacia, la eficiencia y la satisfacción de los usuarios que trabajan con un producto.
. La mayoría de las métricas son calculadas según la información coleccionada durante la prueba, ya sea al completar una tarea o a través del proceso en sí. .
✨ Concepto clave Una prueba de Usabilidad como mínimo necesita de 5 participantes; se recomienda efectuar cualquier prueba con al menos 20 usuarios.
.
Puntuación de éxito
Si lo que te interesa es saber si los usuarios completaron o no una tarea, esta sencilla métrica te ayuda a cuantificar de manera binaria y después porcentual. .
Success Score = Nº of completed tasks / Nº of attempts
. Para tener una imagen más matizada, los investigadores de UX pueden incluir tareas realizadas con errores en un grupo separado. Con ello, lo que buscáramos sería el promedio para encontrar, incluso, campanas de porcentaje para calcular nuestro umbral. . Para considerar que un producto tiene una buena usabilidad, la puntuación de éxito no tiene que ser del 100 %. La puntuación media es de alrededor del 78%. .
Tiempo de tarea
¿Qué tanto tiempo tarda el usuario en encontrar o en realizar algo? Esta métrica de eficiencia y productividad te ayuda a saber con exactitud el tiempo que tarda alguien en lograr una meta y también a identificar si está por arriba del tiempo deseado o ideal. .
Task Time = Time_1 + Time_2 + Time_n / Nº of users
. Teniendo el tiempo medio, ¿cómo sabemos si el resultado es bueno o malo? Para otras métricas, existen algunos estándares de la industria, pero para el tiempo de tareas no puede haber ninguno. . Aún así, es posible encontrar un tiempo de tarea "ideal", como resultado de un usuario experimentado. Para hacer esto, debe sumar el tiempo promedio para cada pequeña acción, como "señalar con el mouse" y "hacer clic". Este sistema nos permite calcular este tiempo con bastante precisión. . La mayoría de las veces, la métrica del tiempo de la tarea se mide para comparar los resultados con versiones anteriores del diseño. . Recordemos, que vivimos en un mundo donde la mayoría de las personas abandonan un producto web si no se carga después de 3 segundos. Guardar esos pocos segundos para los usuarios puede afectar bastante su experiencia de usuario. .
Número de Errores
Algunos usuarios podrían intentar algo varias veces, pero no todos tienen la misma paciencia, incluso pueden existir errores de omisión donde el usuario ni cuenta se dio de lo que hizo o se saltó. .
ℹ️ Definición En pruebas de usabilidad, un error es una acción mal ejecutada mientras se intenta completar una tarea.
. Tenemos 2 tipos de errores:
. Tenemos 2 tipos de medidas de error:
.
Eficiencia o satisfacción subjetiva
Medir la satisfacción nos ayuda a entender qué opinan los usuarios de la tarea que acaban de realizar o de la prueba en general. . Hay muchas formas de medir la eficiencia, una de las más básicas se llama eficiencia basada en el tiempo y combina tanto el tiempo de la tarea como el puntaje de éxito. . Para estas métricas, los datos se recopilan durante las pruebas de usabilidad al pedirles a los usuarios que completen un cuestionario. . Existiendo varios tipos, pero las 2 más comunes serían:
Una buena práctica es que para toda prueba de usabilidad SIEMPRE incluyamos metricas
La métrica de los Errores a mi parecer es la principal, porque hay muchas veces que el usuario completa la tarea, pero de forma muy frustrada al haber perdido mucho tiempo tratando de encontrar la tarea que se le asignó. O aveces incluso hay que ayudarlo porque preguntan y una vez que te preguntan, ya la usabilidad cayó.
Es correcto, y precisamente eso es lo que permite corregir aun mas rápido, hasta que termine de ser lo suficientemente claro para el usuario!
La mejor opción es utilizar las cuatro tipo de métrica para recolectar la mayor de información posible.
as méticas nos ayudan a validar los conceptos del diseño, nos dan objetividad al momento de debatir y tomar decisiones en base a datos.
Métricas:
Métricas ejemplo:
El usuario creó el “Trial” del producto?
Cuanto tiempo tardó?
El usuario retornó e ingresó sin problemas a su trail? Cuanto tiempo tardó?
Errores durante el proceso Nivel de satisfacción
Pueden ayudar a identificar metricas para evaluar específicamente le ESTETICA de un producto de software:
Lo mas adecuado seria utilizar el Éxito de la tarea ya que inicialmente me da una idea de sin con un modelo inicial se logra realizar la tarea o nos puede dar la pauta para un rediseño de sitio, servicio. El tiempo de la tarea se convierte en una métrica que esta supeditada también a la capacidad técnica del usuario pero con el promedio también se puede evaluar que tan difícil puede llegar a ser la navegación. En la detección de Errores como se puede evaluar errores superficiales también pueden aparecer errores bloqueantes los cuales impiden la finalización de la tarea y llevaría a repetir toda la prueba de usabilidad una vez se haya corregido el error bloqueante.
Gracias
excelente info!
Que buena info sobre métricas 💪🏼
Lo que no se puede medir o no se mide, no se puede mejorar, no es iterable. Esta es la premisa de la que surgen las pruebas de usabilidad y las correspondientes métricas, porque su razón de ser es medir qué tanto el usuario puede utilizar el sitio web o producto digital de manera rápida y sencilla. Si no es así, se detectan fallas y se deben hacer las adecuaciones pertinentes para mejorar la usabilidad.
Si lo que busco es que la inserción en el mercado de este nuevo producto sea exitoso, incluiría todos para obtener el mayor rango de información o datos posibles, a excepción de la satisfacción subjetiva. Al ser subjetiva el usuario o participante por no exponer dificultad o errores puede manipular esta respuesta.