Un test A/B (en anglais, A/B testing) partage au hasard vos visiteurs entre votre page actuelle et une variante, puis compare les résultats. Choisir quoi tester fait partie d'une démarche plus large d'optimisation des conversions.
Choisir une hypothèse de test A/B utile
Les visiteurs envoyés sur votre page par vos annonces ont un coût. Plusieurs tests sur la même page peuvent interagir : prévoyez leur combinaison ou testez-les séparément.
Si votre calcul demande 3 000 visiteurs par version et qu’un clic à 2 € apporte un visiteur éligible distinct, il faut 12 000 € de clics. Les retours d’un même visiteur et les échecs de chargement modifient ce calcul. Ce budget doit servir à trancher une question qui compte.
Le calcul du nombre de visiteurs nécessaire se fait avant le lancement, à partir de cinq éléments.
- La part actuelle des visiteurs de la page qui appellent, remplissent le formulaire ou achètent : votre taux de conversion.
- Le plus petit écart qui justifierait de changer votre page.
- Le risque d'erreur que vous acceptez de prendre.
- La chance que vous voulez avoir de détecter cet écart s'il existe.
- La part du trafic que vous envoyez sur chaque version.
La durée du test découle de ce calcul et peut se compter en jours ou en semaines. Aucun minimum valable pour tous les sites ne le remplace.
L'erreur qui coûte le plus cher, c'est de bien tester une question sans enjeu, dont le résultat ne change aucune décision. On la reconnaît quand plusieurs versions d'une même page s'enchaînent sans que personne ne remette en cause l'offre.
Et si votre trafic est trop faible pour tester ?
Si la durée calculée dépasse la période où votre activité reste comparable, le test est mal dimensionné. Voici comment avancer quand même.
Concentrez le trafic au lieu de le diluer. Plusieurs tests en parallèle sur un petit volume risquent tous de rester trop courts pour conclure. Mieux vaut un seul test, sur la page la plus proche de l'action voulue, dont vous attendez le résultat avant d'en lancer un autre.
Choisissez un changement dont l'effet peut être assez grand. Une modification de l'offre peut produire un écart plus grand qu'un ajustement visuel, mais rien ne le garantit d'avance. Ce que vous avez observé doit justifier le test.
Comparez un avant et un après, en le présentant comme tel. Ce n'est plus un test A/B, car les deux versions ne tournent pas en même temps. Notez les variations de trafic, d'offre et de saison, puis lisez le résultat comme un indice et non comme une preuve.
La source des visiteurs peut-elle fausser le test ?
La source des visiteurs peut modifier l'effet d'une variante sans forcément invalider le test. Si le partage entre les versions se fait vraiment au hasard, chaque version reçoit un mélange comparable. En revanche, un partage défectueux ou une mesure différente entre les versions peuvent fausser le résultat. Si les sources de trafic changent pour les deux versions, vérifiez à quel public le résultat s’applique.
Définissez avant le lancement quels visiteurs entrent dans le test, puis vérifiez que les versions reçoivent des mélanges équilibrés. Une moyenne globale peut cacher des effets différents entre les recherches sur votre nom, les recherches générales et les anciens visiteurs que vous reciblez. Analysez seulement les groupes prévus à l'avance et assez nombreux, car un découpage improvisé après coup augmente le risque de fausse alerte.
Quoi tester d'abord, et dans quel ordre
Voici l'ordre que je vous conseille comme point de départ.
- L'offre (prix, promesse, contenu de la prestation, garantie) peut avoir un effet important quand sa valeur est en cause, mais elle coûte plus cher à changer et à assumer.
- Le message (accroche, ordre des arguments, cohérence avec l'annonce) passe en tête quand les visiteurs comprennent mal l'offre ou cherchent une information absente.
- Les freins et les preuves (formulaire, bouton d'action, conditions, avis) passent en premier quand vous observez un abandon, une objection ou une difficulté d'usage.
- Les détails visuels (couleur, espacement, icône) viennent généralement après, sauf si une observation précise les désigne.
Un test de couleur sans problème identifié apporte peu à la décision. Cet ordre reste une tendance, car un bouton invisible, un mot ambigu ou l'absence d'avis clients visibles peuvent bloquer la décision. Dans ce cas, ce que vous observez l'emporte sur l'ordre conseillé, à chaque étape du parcours.
Faut-il tester le titre principal à part ?
Parfois. Le titre principal occupe généralement une place visible et peut confirmer le lien entre la recherche tapée sur Google, l'annonce et la page. Cela ne prouve pas qu'il est l'élément le plus lu, ni qu'il doit passer avant tout le reste.
Testez-le seul si vous observez un problème de compréhension ou de cohérence avec l'annonce, pour attribuer plus nettement l'écart au message. Si l'offre entière change, comparez plutôt deux pages cohérentes, car prétendre isoler le titre serait trompeur.
Classer vos idées de test et trouver les bonnes
Pour chaque idée, notez le problème observé, les visiteurs concernés et l’effort nécessaire. Vérifiez le trafic disponible avant de lui donner une priorité : même une bonne hypothèse peut être impossible à tester dans une période stable. Utilisez ensuite une seule grille, comme l’exemple ICE ci-dessous, avec les mêmes critères pour toutes les idées.
Écrivez les scores dans une simple feuille de calcul partagée, en indiquant les observations qui les justifient. Des notes chiffrées ne rendent pas une hypothèse certaine. La logique vaut pour une page qui vend un produit comme pour une page qui recueille des demandes de contact. Seuls l'indicateur suivi et l'enjeu de la décision changent, et vos critères de notation doivent s'y adapter.
Demandez à l’équipe de décrire les problèmes observés, au-delà des préférences esthétiques. Les bonnes idées de test viennent de plusieurs sources croisées.
- Les cartes de chaleur montrent où les visiteurs cliquent et jusqu'où ils descendent.
- Les étapes du parcours où les visiteurs abandonnent indiquent une étape à examiner.
- Les erreurs techniques peuvent expliquer un abandon inattendu.
- Les sondages, votre fichier de prospects et les retours commerciaux font remonter les objections exprimées.
Une carte de chaleur localise un comportement, sans en donner la cause. Vous proposez une explication, et le test sert justement à la vérifier.
PIE, ICE, PXL : trois grilles pour noter vos idées
PIE, ICE et PXL sont des grilles de notes, pas des modèles statistiques. Elles rendent vos critères visibles, mais elles ne donnent ni la probabilité de gagner, ni l'effet réel à attendre.
- La grille PIE note généralement le potentiel, l'importance et la facilité, pour classer une liste simple.
- La grille ICE note l'impact, la confiance et la facilité, pour choisir entre plusieurs idées sur une même page.
- La grille PXL utilise des critères concrets, comme les observations disponibles, le trafic concerné et l’effort de mise en place.
Choisissez une grille et fixez les règles avant de noter. Exemple fictif avec une grille ICE adaptée : chaque critère reçoit de 1 à 3 points. L’impact décrit l’enjeu commercial, la confiance les observations disponibles et la facilité l’effort de réalisation ; 3 signifie ici un enjeu fort, des observations concordantes ou une mise en place simple. Nous faisons la moyenne des trois notes, sans en déduire une probabilité de réussite.
| Hypothèse | Impact | Confiance | Facilité | Moyenne |
|---|---|---|---|---|
| Afficher la zone desservie près du formulaire, après plusieurs demandes hors zone | 3 | 3 | 3 | 3 |
| Changer la couleur du bouton sans difficulté observée | 1 | 1 | 3 | 1,67 |
La première idée passe devant parce qu’elle traite un problème documenté. Vérifiez encore qu’elle peut être mesurée avec votre trafic. Une note se revoit quand les observations changent ; les trois grilles ne doivent pas être additionnées pour fabriquer un score plus convaincant.
Écrire une idée de test : si, alors, parce que
Une idée floue comme « tester un nouveau titre » donne un résultat qu'on ne sait pas interpréter, même s'il est positif. Une idée bien construite vous apprend quelque chose, même si la variante perd.
La forme à suivre tient en une ligne : si [changement], alors [résultat], parce que [ce que vous avez observé]. « Si le titre nomme le résultat attendu, alors davantage de visiteurs poursuivent vers l'offre, parce que les entretiens montrent que l'accroche est mal comprise. »
Le « parce que » peut s’appuyer sur des sources complémentaires : les cartes de chaleur montrent ce que font les visiteurs, les micro-sondages de sortie recueillent ce qu'ils déclarent. Aucune des deux ne révèle seule la cause : croisez-les avec le parcours et vos données commerciales avant d'écrire votre explication.
- Décrivez ce que vous observez sans transformer tout de suite une coïncidence en cause.
- Formulez en si, alors, parce que, car une idée sans « parce que » n'est pas encore prête.
- Calculez le nombre de visiteurs nécessaire pour savoir si le test est mesurable.
Former l'équipe à ces étapes compte plus que l'outil choisi, même si cela ne garantit aucune variante gagnante.
Combien de temps laisser tourner le test ?
La durée découle du nombre de visiteurs nécessaire et de votre trafic. Elle doit aussi couvrir les cycles prévus, comme les jours de la semaine, le temps de savoir si un prospect est sérieux, les promotions ou la saison. Plusieurs semaines ne sont pas une règle valable partout.
Fixez avant le lancement le nombre de visiteurs visé, la période d'observation et la règle d'arrêt. Arrêter dès que la variante semble gagner augmente le risque de désigner un faux gagnant avec une analyse classique. Une méthode statistique prévue pour un suivi en continu peut autoriser des analyses intermédiaires, mais seulement avec sa propre règle. Vous pouvez en revanche surveiller à tout moment les erreurs techniques ou une dégradation évidente, sans choisir de gagnant trop tôt.
Deux vérifications avant de lancer le test A/B
- Quelle décision ce test vous permettra-t-il de prendre ?
- Qu'avez-vous observé qui justifie l'idée, et votre trafic suffit-il à mesurer l'écart utile ?
Si vous répondez clairement aux deux, classez l'idée dans votre grille et vérifiez le nombre de visiteurs nécessaire. Le bon premier test n'est pas le plus spectaculaire, mais celui dont le résultat changera une décision. Après chaque test, gardez dans un tableur l'idée, l'étape du parcours, le plan, les données et la conclusion.
