Obstacle n° 3 : absence de base de calcul
Nous examinons à nouveau les résultats d'un test A/B, cette fois-ci pour l'indicateur clé de performance « chiffre d'affaires total » :

Évaluation du test A/B en fonction du chiffre d'affaires total
Le groupe B s'impose clairement avec une augmentation du chiffre d'affaires de près de 14 %. Mais si tu as suivi cet article jusqu'ici, tu sais que l'histoire ne s'arrête pas là. Il manque quelque chose dans le tableau, tu vois quoi ? Exactement : le nombre d'unités vendues/paniers. Une fois les paniers ajoutés, le tableau se présente comme suit :

Évaluation du test A/B en fonction du chiffre d'affaires total et complétée par la valeur moyenne du panier
« C'est bien beau, mais qu'est-ce que ça peut me faire, la valeur moyenne du panier ? Le groupe B a vendu plus de paniers et réalisé plus de chiffre d'affaires, c'est parfait ! » C'est vrai. C'est pourquoi nous examinons également le nombre de visites dans la boutique et les indicateurs clés de performance associés,le taux de conversionetle chiffre d'affaires par visite dans la boutique:

Évaluation du test A/B en fonction du chiffre d'affaires total, de la valeur moyenne du panier, du nombre de visites en boutique, y compris le taux de conversion et le chiffre d'affaires par visite en boutique.
« Encore des chiffres », t'entends-je dire, « mais le groupe B réalise toujours plus de chiffre d'affaires ! » C'est vrai, le groupe B réalise plus de chiffre d'affaires en valeur absolue. Mais si l'on se base sur le nombre de visites en boutique, c'est-à-dire la taille, qui est répartie à parts égales dans un test A/B, le groupe B a réalisé moins de chiffre d'affaires. Pourquoi est-ce si important dans la pratique ?
La répartition des visiteurs de la boutique entre les groupes A et B est aléatoire. Il est donc tout à fait naturel que tantôt l'un, tantôt l'autre groupe ait plus de visiteurs et réalise ainsi un chiffre d'affaires plus élevé. Comparez cette répartition à un lancer de pièce : si vous lancez 10 fois, vous n'obtiendrez pas toujours 5 fois pile et 5 fois face, mais parfois 7 fois pile / 3 fois face, 4 fois pile / 6 fois face, etc.
Pour toi, cela signifie que les chiffres d'affaires ne peuvent être comparés que sur une base identique. Sinon, c'est le hasard qui décidera finalement du gagnant du test A/B lors de la répartition des groupes. Normalise la valeur dans la colonne tout à droite à 1 000 visites pour que ce soit plus clair :

Chiffre d'affaires Test A/B normalisé sur 1 000 visites en boutique
Si l'on part de la même base de calcul, le résultat s'inverse à nouveau. Quel est donc le bon KPI de chiffre d'affaires ? En résumé, on peut dire quele KPI « chiffre d'affaires par visite » est le plus significatif pour le chiffre d'affaires total. Si vous pouvez démontrer une augmentation de ce KPI dans un test A/B, cela signifie que vous avez également augmenté le chiffre d'affaires total.
Restez informé des dernières nouveautés en matière de personnalisation : inscrivez-vous à la newsletter epoq. Inscrivez-vous dès maintenant !