A/B Test
Un test A/B est une méthode d’expérimentation qui montre au hasard plusieurs versions d’une même page ou d’un même contenu à des visiteurs comparables, puis mesure laquelle atteint le mieux un objectif fixé à l’avance. Il remplace un débat d’opinions (quel titre, quel visuel, quel bouton) par une mesure sur le comportement réel. Dans la recherche scientifique, la même logique porte le nom d’essai contrôlé randomisé.
Définition et fonctionnement
La version de départ sert de référence et s’appelle la variante de contrôle. Les autres variantes sont comparées à elle sur un seul critère de réussite, le taux de conversion d’un objectif. Le hasard de l’affectation rend la comparaison honnête, puisque les deux groupes ne diffèrent que par la version vue.
Dans Jahia jExperience, un test A/B s’applique à une page entière ou à un contenu placé dans une page. Les notes de version de jExperience 3.6.2 introduisent une compatibilité de Page Builder avec les tests A/B. La procédure de l’Academy, rédigée pour Page Composer, prévoit que le contributeur ajoute des variantes, puis choisisse la variante de contrôle et la stratégie de fin : servir automatiquement la variante qui convertit le mieux, ou garder la variante de contrôle. La date de début comme la date de fin sont facultatives. Quand la date de début est laissée vide, le test démarre immédiatement, dès que la page est publiée. Quand la date de fin est laissée vide, il se poursuit jusqu’à ce que quelqu’un l’arrête ou que le réglage Maximum hits défini pour lui soit atteint. Un objectif doit être défini et il est figé dès le démarrage du test, pour que les résultats restent cohérents.
Les résultats s’affichent par variante : nombre d’affichages, nombre de visiteurs ayant atteint l’objectif, taux de conversion et écart en pourcentage par rapport à la variante de contrôle (le gain relatif, appelé lift dans la documentation). Un filtre par segment permet de voir si une autre variante fonctionne mieux pour une partie de l’audience.
Documentation Academy : créer des tests A/B dans Page Composer
Sources : jExperience 3.6.2, Jahia Academy, notes de version (page datée du 29 septembre 2025).
Termes liés : Taux de conversion · Goal · Content item · Conversion
Ressources sur ce terme
- Comment construire une stratégie de personnalisation de site web
- Données clients et personnalisation
- Comment choisir une plateforme d'expérience digitale (DXP) ?
- Comment connecter Salesforce à votre CMS : défis & enjeux
- Comment justifier et mesurer l’investissement dans une DXP ?
- Personnalisation avec un CMS headless : comment délivrer des expériences réellement adaptatives
Le test A/B et la personnalisation : les différences
Test A/B et personnalisation manipulent tous deux des variantes de contenu, mais pas dans le même but. Le test sert à apprendre, la personnalisation à appliquer ce qu’on sait déjà de chaque visiteur.
| Notion | Différence avec un test A/B |
|---|---|
| Personnalisation | La personnalisation choisit la variante selon des conditions sur le visiteur (segment, comportement, contexte). Le test A/B distribue les variantes au hasard pour comparer leurs résultats. Un test peut d’ailleurs déboucher sur une personnalisation durable, segment par segment. |
| Goal (objectif) | L’objectif est l’action qui définit le succès. Le test A/B ne peut pas désigner de gagnant sans lui : c’est l’objectif qui fournit le critère de comparaison. |
| Taux de conversion | Le taux de conversion est la mesure produite par l’objectif. Le test compare ce taux d’une variante à l’autre et l’exprime aussi en écart par rapport au contrôle. |
Le test A/B en pratique
Une équipe digitale hésite entre deux accroches pour la page d’une offre. Elle crée un test A/B sur le bloc d’accroche, garde la version actuelle comme contrôle et choisit comme objectif la visite de la page de demande de rendez-vous. Elle fixe une date de fin et décide à l’avance de garder le contrôle si l’écart ne se confirme pas.
Trois décisions se prennent avant le lancement, pas après. Elles portent sur l’objectif (il est figé dès le démarrage), sur la durée, enfin sur ce qui se passe à la fin. Les modifier en cours de route reviendrait à changer la règle pendant la partie.
Questions fréquentes
Faut-il un outil d’A/B test séparé quand on utilise déjà Jahia jExperience ?
Pour des pages et des contenus gérés dans Jahia, jExperience permet de créer le test, ses variantes et son objectif, puis de suivre ses résultats. La procédure de l’Academy part d’une page propulsée par Jahia : la première question est donc de savoir quelles pages et quels contenus tester. Une équipe qui teste aussi ailleurs peut garder un outil complémentaire à côté.
Peut-on changer l’objectif d’un test A/B déjà lancé ?
Dans jExperience, l’objectif est figé dès le démarrage du test. C’est voulu. Changer de critère en cours de test mélangerait des mesures qui ne portent pas sur la même action et rendrait les résultats incohérents. Si l’objectif était mal choisi, la bonne pratique consiste à arrêter le test et à en lancer un nouveau.
La variante qui obtient le plus de clics a-t-elle forcément gagné ?
Les clics ne désignent pas le gagnant. C’est la variante qui atteint le mieux l’objectif fixé qui l’emporte. Un bouton plus visible peut générer davantage de clics sans produire davantage de demandes abouties. Il faut aussi un volume suffisant et une période représentative. Un écart observé sur quelques dizaines de visites ne permet pas de conclure.