¡Hola John!
Vamos por partes pues :)
- Cuando no hay data todo se fundamenta sobre hipótesis "a ver que pasa" al estilo de: "voy a probar durante 2-3 meses este tipo de acciones a ver qué retorno nos encontramos". Al final cuando no hay datos tenemos que encontrar la manera más rápida/eficiente/de calidad para obtenerlos. ¿Qué podrías hacer en los próximos 2 meses para obtener todos esos datos que a día de hoy crees que te faltan?
Igualmente, no te preocupes, generalmente siempre faltan datos!
- La experimentación la puedes trabajar desde varias perspectivas. Por ejemplo si eres tu que decides hacer un experimento del estilo: "voy a publicar en medios" deberás marcar tu un lapso de tiempo, "durante dos meses" para ver si estas acciones tienen sentido y si se validan.
Sin embargo cuando utilizas programas de testing como por ejemplo Google Optimize, es el propio Google Optimize quién gestiona el tiempo necesario para validar o invalidar el experimento. ¿Cómo funciona? Sencillo: por muestra estadística.
Por ponerte un ejemplo, imagina que te has comprado una camiseta nueva y quieres saber "si a la gente le gusta", si conoces a pocas personas, seguramente tardarás mucho en preguntar a 1000 personas si realmente tu camiseta les gusta.
Sin embargo si tienes una red increíble tardarás mucho menos tiempo.
En una web funciona igual, cuanto más tráfico tengas antes se validan los experimentos, si tienes menos tráfico, tardarás más. He visto casos de que se han validado en cuestión de horas y otros que se requerían semanas.
También es cierto que si va a tardar mucho en validarse no merece la pena hacerlo porque perderá consistencia. Eso o haces alguna campaña de tráfico para suplir esa falta de tráfico habitual.
¡Espero haberme explicado John! Te mando un abrazo y gracias por preguntar!