Lexique · Éprouver
Test A/B
Un test A/B compare deux versions d’une même chose — une page, une destination, une accroche — en répartissant le trafic entre elles au hasard. Il répond à une question précise : laquelle des deux produit le meilleur résultat, toutes choses égales.
Tester deux versions, et ne désigner un gagnant qu’au-dessus du seuil. Les quarante termes du métier
À quoi ça sert
Il remplace une opinion par une mesure. Deux personnes peuvent débattre une heure de la meilleure page d’arrivée ; un test tranche en une semaine. Il sert aussi à ne pas casser ce qui marche : la version en place reste servie à la moitié du trafic pendant tout le test.
Comment il se pose
Une seule différence entre les deux versions, un trafic réparti au hasard, et une durée décidée à l’avance. Changer deux choses à la fois rend le résultat inutilisable : on saura qu’une version gagne, jamais pourquoi.
L’erreur classique
Arrêter le test dès que la version préférée passe devant. Sur de petits volumes, l’avance change de camp plusieurs fois par jour — on n’observe pas un gagnant, on observe du hasard.
Un test qui veut dire quelque chose
- Une différenceUne seule. Deux changements, et le résultat n’explique rien.
- Un tirage au hasardChaque clic tombe d’un côté ou de l’autre, au poids décidé.
- Le seuilTrente clics par version, et au moins une vente. Avant, on se taît.
- Le verdict95 % de confiance, ou « aucun écart ». Jamais un gagnant de complaisance.
Trois conditions avant le quatrième temps. Sauter la troisième est ce qui fait déplacer des budgets sur du bruit.
Ce que Subtraq en fait
Subtraq répartit les clics au poids entre les versions et enregistre la variante sur chaque clic. Arrêter un test ne change jamais la destination du lien, et le verdict ne se prononce pas avant trente clics par version et une vente au moins.
À lire ensuite
Un terme seul ne sert à rien. Voici ceux qui le rendent utilisable.
Variante
Lire la définition →Signification statistique
Lire la définition →Taux de conversion
Lire la définition →Les fonctionnalités du produit
Ouvrir la page →« Test A/B », une fois posé sur de vraies ventes
Un test qui désigne un gagnant sur douze clics fait déplacer un budget sur du bruit. Les seuils du produit sont publics : trente clics par version au minimum, et 95 % de confiance avant d’annoncer quoi que ce soit.
Voir les fonctionnalités