A/B testing

On parle souvent d’A/B testing en se disant, il faudrait qu’on le fasse mais on a pas le temps. Je vous arrête tout de suite, il faut rendre l’A/B testing standard et l’industrialiser en le mettant au cœur du process.

L’A/B testing permet de s’affranchir des contraintes extérieures en ayant le même contexte de test pour 2 versions. Il s’ait d’envoyer un contenu A sur la population A et un contenu B sur la population B puis de comparer les résultats.

Sur le papier c’est simple, mais en pratique, il faut avoir une taille suffisante de population pour que le test soit pertinent. Pour cela il existe de nombreux outils. le sample size calculator d’optimizely est pas mal.

Ces outils se basent tous sur des calculs statistiques et nécessite que l’on connaisse a peu près le taux d’ouverture/clique sur un contenu classique.

En email, cela peut servir pour A/B tester l’ouverture dans ce cas, la population est la population ciblée.

Par contre attention, si vous A/B testé du contenu, il faut le faire par rapport aux ouvreurs. Donc pour cela, il faut multiplier la population du calculateur par le ratio d’ouverture.

Exemple: on A/B test un visuel dans un email.

open rate(open/target): 20%

click rate (click/target): 5%

Click to open rate (click/open): 25%

Le but est d’avoir 30% de CTOR, donc on entre sur le calculateur une baseline de 25% et un gain de 20%. car 30% = 25% + (20% de 25% = 5%) .

La population obtenu est de 673 personnes mais il faut que les personnes voient notre contenu dont on doit divisé par notre open rate. la population à cibler sur chaque branche de notre A/B test est donc de: 673 /20% = 3365.

Ce qu’il important d’A/B tester pour un email par ordre d’importance:

– le sujet du mail ==> ouverture

– les CTAs (couleur et wording)

– les visuels

– la longueur du mail/texte

– la structure du mail

Pour le plaisir voici, un article qui date un peu mais qui permet de voir l’impact de l’A/B testing des visuels et des CTAs sur un home page pour l’élection d’Obama

4 réflexions au sujet de « A/B testing »

  1. Ping : Avez vous pensez à l’expéditeur pour augmenter l’ouverture de vos emails ? | Marketing & Hacking

  2. Ping : L’objet de vos emails compte! | Marketing & Hacking

  3. Ping : Optimiser mon taux de clic avec les CTA | Marketing & Hacking

  4. Ping : Obama 2012: Comment l’A/B testing des emails a généré 500 million de $ | Marketing & Hacking

Laisser un commentaire

Entrez vos coordonnées ci-dessous ou cliquez sur une icône pour vous connecter:

Logo WordPress.com

Vous commentez à l'aide de votre compte WordPress.com. Déconnexion / Changer )

Image Twitter

Vous commentez à l'aide de votre compte Twitter. Déconnexion / Changer )

Photo Facebook

Vous commentez à l'aide de votre compte Facebook. Déconnexion / Changer )

Photo Google+

Vous commentez à l'aide de votre compte Google+. Déconnexion / Changer )

Connexion à %s