¿Qué está haciendo para seguir generando una acumulación de A / B de alta calidad después de un largo tiempo de pruebas de alto tempo?

Answer 1

Buena pregunta, y dado que hemos trabajado con muchas compañías que ejecutan programas de prueba A / B y he tenido el lujo de hablar con algunas de las personas de Optimizely sobre esto, espero tener al menos alguna perspectiva al respecto:

Primero, la forma en que estos programas a menudo fallan es que el equipo comienza a centrarse en la cantidad frente a la calidad: “¡Necesitamos enviar 20 pruebas este mes!” Y luego las ideas de las pruebas se vuelven poco interesantes.

Creo que para mantener las ideas interesantes / ganadoras, la mejor manera es volver a los “primeros principios”. En otras palabras, ¿cuál es la raíz del problema que estamos resolviendo aquí? Recientemente escuché a un cliente decir escépticamente “Nuestro producto es un formulario”. La realidad no podría estar más lejos de la verdad: la forma es la forma en que las personas obtienen acceso al resultado que buscan. Si no estamos utilizando los primeros principios, podríamos preocuparnos por optimizar los tamaños de texto, la colocación de sugerencias, los tamaños de fuente, el orden de los campos, etc. para ver si podemos obtener algo de elevación. Sin embargo, solo puedes obtener mucho de eso. En cambio, supongamos que el cliente vende préstamos para automóviles (no lo hacen). El resultado que desea el usuario final es poder comprar el automóvil a pesar de que no tiene suficiente dinero para hacerlo en efectivo. Tomar un préstamo a menudo da miedo, por lo que tal vez podamos ver cómo lo hacemos fácil. Quizás intentamos mostrar un número 800 prominente a un bajo porcentaje de tráfico para obtener ayuda en el proceso, incluso manejándolo por unos días para ver qué preguntan las personas cuando llaman. Tal vez encuestamos a clientes exitosos usando algo como Encantado: comentarios de los clientes con Net Promoter Score para ver qué dicen los “promotores” sobre por qué nos eligieron frente a otras soluciones. Tal vez ajustamos lo que los campos del formulario realmente piden para ayudarlos a tomar la decisión de seguir adelante con el préstamo.

Llevar esto al siguiente paso es la personalización. Los diferentes segmentos de tráfico necesitan un tratamiento diferente porque se encuentran en diferentes niveles de educación y diferentes etapas del proceso de compra. Tal vez un amigo les habló sobre el sitio, que es tráfico directo u orgánico, ahora tenemos que defender esencialmente la recomendación del amigo. Para el tráfico de búsqueda de Google que proviene de una palabra clave competitiva, tenemos que decir por qué somos mejores que todas las demás soluciones, y tenemos un tiempo súper corto para hacerlo, ya que las personas hacen clic y toman una decisión rápida sobre si proceder, y haciendo clic de nuevo o continuando. Para el tráfico de Facebook, tal vez hicimos una promesa interesante y necesitamos respaldar esa promesa en la página en la que llegaron. Para e-com, los anuncios de la Lista de productos de Google son una fuente de tráfico interesante: a menudo lo que funciona es dejar caer el tráfico en una página de detalles del producto, pero debajo de los detalles del producto, tenemos lo que es esencialmente una página de resultados de búsqueda con otras opciones que son similar al producto original. Wayfair hace esto bien.

En resumen, volvería a los primeros principios y pensaría qué problema está resolviendo para el cliente, y si necesita comenzar a segmentar para resolver los diferentes problemas que tienen los diferentes tipos de clientes que visitan su sitio.