Cómo evaluar un prototipo de voz con usuarios

Evaluar un prototipo rápido te permite validar decisiones de diseño antes de pasar a desarrollo, especialmente cuando trabajas con interfaces de voz. Con una evaluación bien planeada puedes detectar fricciones, recopilar expresiones reales de usuarios y descubrir si la conversación se siente natural o forzada.

La idea es simple: observar a una persona interactuando con tu diseño bajo tareas acotadas, en un contexto cercano al real, y aprender de cada reacción para iterar a tiempo.

¿Qué puedes aprender al evaluar un prototipo de voz?

Una sesión bien diseñada te da insights que ningún documento de requerimientos puede entregarte. Cuando observas a un usuario hablándole a tu asistente, descubres expectativas, frustraciones y patrones de lenguaje que cambian la dirección del proyecto.

Durante la evaluación puedes detectar:

• Las expectativas del usuario sobre cómo debería fluir la conversación.
• Reacciones emocionales como frustración, emoción, confusión o estancamiento.
• Qué tan natural e intuitiva resulta la interacción.
• Las expresiones reales que la gente usa para pedir información o ejecutar tareas.

Ese último punto es oro puro para entrenar tu sistema, porque las personas no piden las cosas como tú imaginas en el guion.

¿Cómo armar un plan de evaluación que funcione?

Antes de sentar a alguien frente al prototipo, necesitas claridad. Un plan de evaluación bien hecho asegura que la prueba entregue resultados accionables y mantiene alineado al equipo. [01:30]

Documenta el plan en una herramienta colaborativa como Google Docs para cocrearlo con tu equipo. Estos son los bloques que no pueden faltar.

¿Qué define el contexto y los objetivos?

Empieza describiendo qué estás diseñando. En el caso de ejemplo, un asistente de voz llamado Moon que acompaña a las personas a dormir, con foco en meditación y narración de historias. [03:15]

Luego separa el objetivo general de los específicos. El general puede ser entender la experiencia del usuario al usar el asistente. Los específicos pueden ser evaluar la naturalidad de la conversación, identificar puntos de mejora, recopilar expresiones, medir tiempos de tarea o detectar errores comunes.

¿Cuántos objetivos puede tener una evaluación? Tantos como necesites, siempre que sean medibles. Lo importante es priorizar dos o tres por sesión para no saturar al usuario ni al equipo que observa.

¿Quiénes participan y bajo qué metodología?

Define los perfiles alineados con tus user personas. En el ejemplo, Alex, una persona entre 25 y 30 años. Reclutar bien marca la diferencia, y normalmente se ofrece un incentivo a quienes participan por su tiempo.

La metodología elegida aquí es Mago de Oz con tareas definidas y sesiones en contexto real, en este caso el hogar y lugar de descanso del usuario. La técnica Mago de Oz consiste en que el usuario cree estar interactuando con un sistema autónomo, mientras tú respondes desde otro espacio reproduciendo el prototipo.

¿Qué tareas, herramientas y roles necesitas?

Las tareas deben ser concretas. En el ejemplo se definieron dos:

1. Teniendo presente que es tu primera vez meditando, pídele a Moon una meditación.
2. Pídele a Moon una historia para dormir de magia.

Las herramientas mínimas: un computador, un speaker y una cámara de grabación. Grabar la sesión con permiso del usuario es esencial para revisar reacciones y detalles que se escapan en vivo. [06:45]

Los roles también importan. Idealmente trabajas con otra persona: tú guías la sesión y alguien más observa y toma notas.

¿Cómo se estructura el guion de la sesión?

El guion garantiza consistencia entre todas las evaluaciones. Que cada usuario reciba las mismas tareas, las mismas preguntas y la misma introducción es lo que te permite comparar resultados. La sesión del ejemplo dura 45 minutos y se divide en seis momentos. [08:10]

• Organizar el espacio antes de recibir al usuario.
• Dar una introducción clara sobre el objetivo de la sesión.
• Hacer preguntas de bienvenida para conocer al usuario.
• Ejecutar la sesión de tareas.
• Hacer preguntas de cierre sobre lo que ocurrió.
• Cerrar y agradecer.

En la introducción debes aclarar algo crítico: no estás evaluando al usuario, estás evaluando tu diseño. Si la persona se siente examinada, se frustra y culpa a sí misma cuando algo no funciona, y eso contamina los datos.

¿Por qué hacer preguntas de bienvenida antes de las tareas? Porque ese espacio te permite recopilar datos demográficos, hábitos y rutinas. En el caso de Moon: a qué hora duerme, retos para dormir, qué apps usa, cómo es su rutina antes de acostarse.

¿Cómo se ejecuta una prueba Mago de Oz en vivo?

Durante la sesión real con Jen, la usuaria queda sola en el espacio creyendo que interactúa con Moon directamente. Quien facilita se ubica en otra sala con el computador y, según las respuestas, dispara los audios del prototipo a través del speaker. [13:20]

El flujo de la sesión fue así: Moon saluda y ofrece tres opciones (meditación, historia o música). Jen elige meditación, indica que es su primera vez, selecciona cinco minutos y completa la tarea. Luego pide una historia de magia y elige La luna que se enamoró del sol.

Al terminar, vienen las preguntas de cierre. Aquí es donde aparece el feedback más valioso.

¿Qué reveló el feedback de la usuaria?

Jen calificó la experiencia como fluida y guiada, pero señaló que la voz se sentía robótica y creaba distancia. Su sugerencia: una voz más armónica, con tonalidades, capaz de acentuar y suavizar como una conversación humana real.

Ese hallazgo cambia decisiones de diseño concretas. El sistema cumple su función, el usuario logra el objetivo sin errores, pero la calidez de la voz no acompaña el momento de dormir como debería.

¿Qué hacer después de evaluar el prototipo?

Cada hallazgo debe traducirse en una decisión: mantener, ajustar o descartar. En el caso de Moon, la decisión clara es explorar voces más cálidas y naturales antes de avanzar a desarrollo. Ahí está el verdadero valor de probar con prototipos rápidos: iterar barato, iterar rápido.

Ahora te toca a ti. Evalúa tu prototipo con al menos un usuario y cuéntame en los comentarios qué aprendiste de la sesión, qué cambiaste en tu diseño y qué te sorprendió del proceso.