Descubre qué recompensa vende más con una prueba A/B de rasca y gana

Envío gratis o un 10 % de descuento: ¿qué recompensa convierte a más suscriptores en compradores? Esta guía lo responde como lo hace un experimento. Esconde cada recompensa bajo la misma tarjeta de rasca y gana, envía las dos versiones a la vez y deja que decidan las compras.

Retro Revival es una marca de ropa ficticia, y todas las cifras de esta guía son inventadas para ilustrar el ejemplo. Su prueba en cifras: 50.874 suscriptores · 2 variantes de recompensa · ventana de observación de 7 días.

Conoce Retro Revival

Retro Revival diseña ropa de inspiración vintage con materiales reciclados y orgánicos, confeccionada con artesanos independientes. Su nueva colección, Grunge Revival: The 90s Edit, recupera la moda alternativa de los años noventa.

Para lanzarla, el equipo de marketing quiere ofrecer una recompensa a sus suscriptores. En lugar de adivinar cuál funciona, monta un experimento controlado y decide según las compras.

El mismo correo, una sola diferencia

Todos los destinatarios reciben el mismo correo: asunto, texto de la colección, carrusel de productos, tarjeta de rasca y gana y botón de la tienda. Solo cambia la recompensa que aparece bajo la tarjeta. Así, una diferencia en las compras se puede atribuir a la recompensa y no al diseño.

Las dos versiones son variantes de un mismo experimento. Un experimento compara cada variante con un control, y solo otra variante puede salir ganadora. Por eso el control es la oferta que enviarías de todos modos. Aquí es el 10 % de descuento, la variante A. El envío gratis es la variante B.

Las dos variantes comparten un solo correo. En el estudio, elige una variante en el menú Variante de la barra de herramientas y cambia el premio de la tarjeta solo para esa variante. Prueba las dos aquí abajo: rasca la tarjeta, mírala revelada o mira la alternativa que muestran las apps de correo sin rasca y gana.

El botón de la tienda de la tarjeta va Dentro del premio revelado. Donde el rasca y gana funciona, el botón solo aparece cuando se rasca la tarjeta, así que un clic llega después de ver la recompensa. El correo no tiene un segundo botón debajo de la tarjeta, porque en ese se podría hacer clic sin revelar. Dónde va el enlace compara las dos ubicaciones.

Prerregistra antes de enviar

En el paso Hipótesis y métricas, el equipo deja su plan por escrito antes de enviar nada:

• Hipótesis: el envío gratis convertirá a más suscriptores en compradores que el 10 % de descuento.
• Métrica principal: Conversión en compra, la proporción de destinatarios con entrega que compraron. Esta única cifra decide el experimento.
• Métricas secundarias: Tasa de clics únicos e Ingresos por correo entregado. Explican el resultado, pero no lo deciden.
• Métrica de protección: Tasa de bajas. Una ganadora no puede ser significativamente peor en ella.
• Nivel de significación: 5 % (bilateral), con un análisis de Horizonte fijo sobre una ventana de observación de 7 días.

El equipo deja fuera la Tasa de revelado observada y la Tasa de clics tras revelar. MailInApp todavía no registra las revelaciones desde las bandejas de entrada. Los clics tras revelar dependen además de quién eligió revelar, así que esa métrica no es una comparación aleatorizada.

Bloquear prerregistro, en el paso Revisar y bloquear, congela la hipótesis, las métricas, la audiencia y las variantes, y extrae la muestra. Nadie puede cambiar a una métrica que quede mejor cuando lleguen los resultados.

Llega a los suscriptores adecuados

The 90s Edit está pensada para los suscriptores a los que les gustan el rock y los años noventa. En el paso Audiencia y muestra, el equipo elige su lista de 50.874 contactos y añade dos reglas de filtro, Rock–Alternativo Y años noventa. La tarjeta Recuento de la audiencia muestra cada etapa:

• Elegibles va antes de la segmentación. A 4554 contactos no se les puede enviar ningún correo, y la lista Excluidos explica por qué: se dieron de baja, no dieron consentimiento de marketing, tienen una dirección no válida, etc. Quedan 46.320.
• Segmentados aplica el filtro solo a los contactos elegibles. A 11.240 les gusta el Rock–Alternativo y a 14.870 los años noventa, pero solo a 6420 les gustan las dos cosas.
• En el experimento es la muestra: 4000, repartidos en 2000 por variante.

Antes de extraer la muestra, el equipo revisa la Información de la audiencia por el campo customer_type. De los 6420 contactos segmentados, 2311 son clientes y 3981 son posibles clientes. 128 no tienen valor: el grupo Sin valor, lo bastante pequeño como para dejarlo así.

La audiencia depende de la lista que hay detrás. Prepara una base de suscriptores lista para tus pruebas cubre los campos y el consentimiento, y Combina filtros de audiencia con Y y O el propio filtro.

Extrae y asigna de forma justa

El equipo elige Muestra aleatoria equilibrada sobre customer_type. La muestra se extrae por separado entre clientes, posibles clientes y contactos sin valor, así que las dos variantes reciben la misma composición: 720 clientes, 1240 posibles clientes y 40 sin valor cada una. Una muestra aleatoria simple es justa en promedio, pero cualquier extracción concreta puede desviarse.

Cada contacto está en una sola variante, y nadie recibe las dos recompensas. Excluir a los contactos que ya estén en otro experimento evita que la oferta de una prueba anterior se cuele en esta.

¿Bastan 2000 por variante? El Planificador del tamaño de muestra dice que no, para la subida que esperaba el equipo. Pasar las compras del 3,7 % al 5,0 %, una subida de 1,3 puntos, necesita 3943 contactos por variante.

Con 4000 en total, la prueba puede detectar con fiabilidad una subida de unos 1,9 puntos. El equipo sigue adelante de todos modos, sabiendo que una diferencia real más pequeña podría pasar desapercibida. Averigua cuántos contactos necesita tu prueba A/B explica el planificador paso a paso.

Recompensas y lanzamiento

En el paso Recompensa y atribución, la variante A recibe un Descuento porcentual del 10 % y la variante B, Envío gratis. Los códigos de las dos variantes son válidos durante 7 días, así que ninguna oferta tiene más tiempo para funcionar. Cada destinatario recibe su propio código de un solo uso, vinculado a él. Los códigos se generan en el momento del envío en la tienda Shopify o WooCommerce conectada a la lista de contactos del experimento.

El enlace del premio del rasca y gana es la etiqueta de combinación {{discount_url}}, que lleva a cada destinatario a la tienda con su propio código. Las vistas previas de esta página enlazan directamente a la tienda, porque una vista previa no puede generar un código.

Para el envío gratis, el equipo indica un Coste medio de envío por pedido de 5,50 US$. Se cuenta como coste promocional en cada pedido con envío gratis. En WooCommerce, los códigos de envío gratis necesitan además un método Free Shipping que acepte un cupón, y el paso avisa si no hay ninguno.

El mismo paso define la Atribución de pedidos: las reglas que asocian un pedido de la tienda a una variante, fijadas al bloquear. El equipo mantiene las tres predeterminadas, Código de descuento, Enlace con seguimiento y Checkout en el correo. Deja desactivada Dirección de correo (probable), así que cada pedido que cuenta es una coincidencia firme.

Lanzar genera el correo de cada variante tal como se enviará. Se niega a lanzar si el correo de una variante muestra la recompensa de la otra en cualquier parte, alternativa incluida. Después, las dos variantes salen a la vez, intercaladas durante los mismos minutos. Rebotan 40 correos por variante, así que se entregan 1960 por variante. Todas las tasas de abajo son una proporción de esos correos entregados.

Qué pasa después de rascar

Rascar la tarjeta ocurre dentro de la app de correo del destinatario. MailInApp todavía no registra las revelaciones desde las bandejas de entrada, así que esta guía no puede mostrar cuántas personas rascaron, ni quién rascó y luego no hizo clic. Lo que llega a MailInApp es un clic en el enlace del premio.

Como el botón va dentro del premio revelado, un clic en una app de correo donde el rasca y gana funciona llega después de una revelación. En las apps que muestran la alternativa, el premio y su enlace se ven desde el principio.

Las personas únicas que hicieron clic fueron 294 con el envío gratis frente a 265 con el 10 % de descuento: un 15,0 % frente a un 13,5 % de los correos entregados. Es una diferencia de 1,5 puntos, pero p = 0,185. La diferencia en clics es una tendencia, no un resultado significativo: podría deberse al azar.

Las personas que hicieron clic y las que compraron son medidas separadas, cada una sobre los 1960 correos entregados. No son pasos de un embudo. Se puede comprar sin un clic con seguimiento, porque el código de descuento también vincula un pedido a su variante.

Deciden las compras

Cuando termina la ventana, la página de resultados lee la métrica principal. Compraron 98 destinatarios del envío gratis, frente a 72 con el 10 % de descuento: un 5,0 % frente a un 3,7 %.

La frase de resultados dice que el envío gratis rindió 1,33 puntos mejor que el 10 % de descuento. La mejora real probablemente está entre 0,05 y 2,62 puntos, y p = 0,041. Eso está por debajo del nivel de significación del 5 %, así que la diferencia es significativa. En términos relativos, el envío gratis vendió a un 36,1 % más de destinatarios.

El intervalo es amplio, y su extremo inferior está cerca de cero. Es muy probable que el envío gratis venda más aquí, pero no se sabe bien cuánto. Recuerda el planificador: esta prueba solo podía ver con fiabilidad unos 1,9 puntos, así que un resultado de 1,33 puntos fue afortunado.

La métrica de protección Tasa de bajas se mantuvo: 0,20 % con el envío gratis frente a 0,26 % con el 10 % de descuento, así que no bloquea a la ganadora.

Ingresos y promociones muestra el dinero por variante, en dólares estadounidenses:

Los ingresos excluyen impuestos y envío, y los descuentos ya están descontados. No es un cálculo de beneficio.

Los pedidos con envío gratis fueron más pequeños, pero compró más gente. Los ingresos por correo entregado fueron más altos con el envío gratis, pero p = 0,13: no es significativo por sí solo. Es una métrica secundaria, así que explica el resultado sin decidirlo.

El coste promocional es lo que regaló cada recompensa. Para el 10 % de descuento, es el descuento de cada pedido. Para el envío gratis, es la estimación de envío de 5,50 US$ por cada pedido con envío gratis. Ninguna de las dos columnas es beneficio: el coste de los productos vendidos no está en ninguna.

Cada pedido llega a su variante mediante las reglas de atribución, comprobadas en un orden fijo. Decide la primera que coincide, y las demás ya no se comprueban. Solo cuentan los pedidos hechos durante la ventana de 7 días.

Todos los compradores de Retro Revival usaron su código, por eso el canje de códigos coincide con los compradores: 72 y 98 códigos de 2000 por variante. Así que la primera regla decidió todos los pedidos. La tarjeta Pedidos de la página de resultados muestra cuántos pedidos encontró cada regla. Métricas de ingresos cubre los reembolsos y las otras monedas.

Registra la decisión y cierra

El experimento termina con una decisión que el equipo registra él mismo. Registrar decisión abre un cuadro de diálogo: Ganador, la variante B, envío gratis. La justificación menciona la diferencia significativa en compras, los clics y los ingresos no significativos y el intervalo amplio. La evidencia que se guarda con ella viene del análisis: significativa.

Cerrar experimento hace después definitivo el registro. Exportar descarga el informe como PDF, tablas CSV o JSON. Contiene el prerregistro, las cifras por variante, las comprobaciones y la decisión, sin nombres ni direcciones.

El experimento termina aquí. Registrar el envío gratis como ganador responde a la pregunta. No envía nada. Ofrecer el envío gratis al resto de la audiencia es una acción aparte, con su propia audiencia y su propio momento: Envía la versión ganadora al resto de tu audiencia.

Tres conclusiones

1. Cambia una sola cosa. Las dos variantes recibieron el mismo correo, así que la diferencia en compras viene de la recompensa. Un solo correo con un cambio por variante lo mantiene así.
2. Los clics orientan, las compras deciden. El envío gratis atrajo más clics, pero no de forma significativa. Solo la métrica principal, fijada antes del envío, eligió a la ganadora.
3. Una decisión no es un envío. El equipo registró el envío gratis como ganador, con la evidencia. Enviarlo a más personas, teniendo en cuenta su coste de envío, viene después.

¿Y si no hubiera sido concluyente?

Supón que hubieran comprado 85 destinatarios del envío gratis en lugar de 98. Eso es un 4,3 % frente a un 3,7 %, con p = 0,29. La página de resultados indicaría No concluyente: no hay evidencia suficiente para elegir.

Es un resultado normal y útil. Dice que cualquier diferencia es menor de lo que esta prueba podía ver. El equipo registraría No concluyente con su justificación y mantendría el 10 % de descuento como su oferta habitual. Para saber más, podría planificar una muestra mayor o una ventana más larga con el planificador, y lanzar un experimento nuevo. No llamaría ganador al envío gratis porque su tasa fuera más alta.

Primeros pasos

Abre el correo en el estudio y añade una tarjeta de rasca y gana con su Enlace del premio definido como {{discount_url}}. Después inicia un experimento con Ejecutar como experimento, da a cada variante su recompensa y bloquea el plan antes de enviar. Experimentos (pruebas A/B) cubre cada paso, e Interpretar los resultados de un experimento cómo leer lo que vuelve.