Lexique · Éprouver
Variante
Une variante est l’une des versions comparées dans un test A/B — la version en place, ou celle qu’on lui oppose. Chaque clic est attribué à une variante et une seule, et cette attribution est enregistrée avec le clic.
Tester deux versions, et ne désigner un gagnant qu’au-dessus du seuil. Les quarante termes du métier
À quoi ça sert
C’est l’unité à laquelle tous les résultats se rapportent. Sans variante enregistrée sur le clic, on sait qu’un test a eu lieu et pas qui a gagné : les ventes arrivent plus tard, et rien ne permet alors de les rattacher à la version qui les a produites.
Comment elle se définit
Un nom, une destination, et un poids — la part du trafic qui doit lui revenir. Le poids n’a pas besoin d’être égal : on peut envoyer 90 % du trafic sur la version en place et 10 % sur la nouvelle, ce qui allonge le test mais limite le risque.
L’erreur classique
En ajouter une troisième et une quatrième pour aller plus vite. C’est l’inverse qui se produit : chaque variante divise le trafic, et il faut alors bien plus de clics au total pour atteindre un seuil sur l’une d’entre elles.
Deux variantes, une seule différence
Version A
- La page en place.
- 50 % du trafic.
- La référence : on la garde servie.
Version B
- Un seul élément changé.
- 50 % du trafic.
- Elle doit battre A, pas l’égaler.
Tout le reste est identique. C’est cette contrainte qui donne un sens au résultat.
Ce que Subtraq en fait
La variante est écrite sur le clic au moment de la redirection, pas déduite après coup. C’est ce qui permet à une vente arrivée trois semaines plus tard d’être encore rattachée à la bonne version.
À lire ensuite
Un terme seul ne sert à rien. Voici ceux qui le rendent utilisable.
Test A/B
Lire la définition →Signification statistique
Lire la définition →Lien de suivi
Lire la définition →Les fonctionnalités du produit
Ouvrir la page →« Variante », une fois posé sur de vraies ventes
Un test qui désigne un gagnant sur douze clics fait déplacer un budget sur du bruit. Les seuils du produit sont publics : trente clics par version au minimum, et 95 % de confiance avant d’annoncer quoi que ce soit.
Voir les fonctionnalités