23
Réussir ses tests A/B Anthony BREBION Meetup Growth Hacking - TheFamily 2 décembre 2014

Comment réussir ses A/B Tests ?

Embed Size (px)

Citation preview

Page 1: Comment réussir ses A/B Tests ?

Réussir ses tests A/B

Anthony BREBIONMeetup Growth Hacking - TheFamily

2 décembre 2014

Page 2: Comment réussir ses A/B Tests ?

Cas d’école

Quoi tester ?

Au programme…

Page 3: Comment réussir ses A/B Tests ?

Methodologicalapproach to testing

DiscoveredA/B testing

Continousimprovements

Test a lot

Most A/B tests are bullshit

Courbe d’apprentissage…

Page 4: Comment réussir ses A/B Tests ?

La conversion = processus complexe

Page 5: Comment réussir ses A/B Tests ?

Alimenter votre stratégie de testing

Tester à l’aveugleTester des éléments secondaires

Identifier vos problèmes de conversionDégager des hypothèses « fortes » de tests

Page 6: Comment réussir ses A/B Tests ?

Construire une hypothèse de test

Retirer le menu de navigation des pages de notre tunnel de commande, améliorera le taux de conversion de chaque étape car l’analyse des clics sur ces pages montre qu’une part importante des internautes quittent le tunnel en utilisant ces liens

Réduire le nombre de pages dans le tunnel améliorera le taux de conversion

Page 7: Comment réussir ses A/B Tests ?

Étoffer votre boîte à outils

Page 8: Comment réussir ses A/B Tests ?

Données quanti et quali

Insights

Usabilitytesting Voice of

customer

Sales and call center

Surveys

Customer services

Competitorevals

MarketresearchEye tracking

Session replay

Web analytics

Searchanalytics

Formsanalytics

Social analytics

A/B and MVT testing

Page 9: Comment réussir ses A/B Tests ?

Collecter et analyser les

données

Formuler l’hypothèse

de test

Designer votre test

Analyser les résultats

Adoptez la bonne méthodologie

Page 10: Comment réussir ses A/B Tests ?

Une partie des résultats sont illusoires

Page 11: Comment réussir ses A/B Tests ?

Cas de figure fréquentConvergence des résultats

Page 12: Comment réussir ses A/B Tests ?

Fiabilité du test > 95%condition nécessaire mais pas suffisante

Page 13: Comment réussir ses A/B Tests ?

Taille de l’échantillonà calculer en amont du test

Page 14: Comment réussir ses A/B Tests ?

Taille de l’échantillonà calculer en amont du test

Page 15: Comment réussir ses A/B Tests ?

Taille de l’échantillonà calculer en amont du test

Page 16: Comment réussir ses A/B Tests ?

La durée du test est primordialeQuelle est la durée minimale ?

Page 17: Comment réussir ses A/B Tests ?

Représentativité de l’échantillonSources de trafic, cycles business, device

Page 18: Comment réussir ses A/B Tests ?

Les solutions ?Faire durer le test et/ou le cibler

Page 19: Comment réussir ses A/B Tests ?

Testez avec peu de trafic

Page 20: Comment réussir ses A/B Tests ?

Testez des changements radicaux

Soignez la phase préparatoire

Limitez le nombre de variations

Mesurez les micro-conversions

Suivez plusieurs indicateurs

Menez plusieurs tests simultanément

Page 21: Comment réussir ses A/B Tests ?

abtasty.com/ressources@ABTasty

Pour en savoir plus

Page 22: Comment réussir ses A/B Tests ?

Q & A

Page 23: Comment réussir ses A/B Tests ?

Anthony [email protected]@ABTasty

Merci