¿Cuál es la mejor manera de hacer pruebas A / B para aplicaciones móviles?

EDITAR (agosto de 2016): ya había respondido esta pregunta anteriormente, pero me gustaría actualizar mi respuesta para reflejar el estado actual del mercado.

Todavía es cierto que las plataformas de marketing móvil de terceros ofrecen las soluciones de pruebas A / B más completas, pero se ha vuelto cada vez más importante integrar las pruebas A / B en todos los aspectos de su aplicación. Hay demasiados proveedores de pruebas A / B que solo consideran un pequeño aspecto de la experiencia móvil (mensajes, diseño, etc.).

Sin datos holísticos, es imposible ver si sus cambios están haciendo más daño que bien . No querría optimizar las tasas de apertura de notificaciones push a costa de las clasificaciones y desinstalaciones de la App Store.

Mi compañía, Leanplum , se ha movido en esta dirección. Estamos orgullosos de ofrecer una solución integrada porque sabemos que esta es la única forma de optimizar toda su experiencia de aplicación, y no solo una pequeña parte de ella.

Si está buscando una visión general de más alto nivel de cómo funcionan las pruebas A / B, puede disfrutar de nuestro artículo Mobile A / B Testing 101 .

Como referencia, he dejado mi respuesta anterior a continuación.

Depende de para qué estés tratando de optimizar. Es mejor desglosar sus iniciativas de optimización en qué área del ciclo de vida del cliente está tratando de optimizar. Como práctica recomendada, siempre debe comenzar con la activación y la incorporación, ya que se encuentra en la parte superior del embudo y luego se enfoca en optimizar su compromiso y retención.

El uso de un servicio de terceros como Leanplum es una forma de optimizar su incorporación sin tener que construir ninguna infraestructura interna. Nuestra gestión de contenido implementa cambios sobre la marcha sin reenvío de App Store. Nuestra plataforma totalmente integrada también viene con Analytics, que le permite medir el impacto de sus pruebas A / B. También se utiliza para permitir una mejor orientación para sus pruebas A / B, por ejemplo, en función del comportamiento del usuario anterior, la geografía o la fuente de tráfico.

Para optimizar el compromiso, debe considerar el uso de mensajes en la aplicación. Un gran caso de uso es anunciar nuevas funciones a los usuarios a través de un mensaje en la aplicación cuando abren por primera vez la nueva versión de la aplicación. Puede dirigirse solo a aquellos usuarios que probablemente estén interesados ​​en las nuevas funciones y luego medir el impacto de la campaña de mensajería en la aplicación en su participación.

Para la retención y la reincorporación, debe A / B probar sus notificaciones push. El abandono del usuario puede reducirse significativamente con campañas push activadas que están altamente orientadas. Esto es especialmente cierto para los usuarios que abandonan sus carritos, ya que ya han señalado su intención. Su trabajo consiste en encontrar los mensajes, ofertas o descuentos correctos para que regresen y completen su compra.