L'expérimentation A/B vous permet de répartir vos visiteurs entre deux versions ou plus d'une page (ou d'un bouton, ou d'un titre) et de voir laquelle convertit le mieux. Zenovay s'occupe du tirage aléatoire, des statistiques et de l'attribution des conversions — vous choisissez simplement un objectif, écrivez quelques variantes et collez un snippet.
Ce dont vous aurez besoin
- Un compte Zenovay sur les plans Pro, Scale ou Enterprise
- Un objectif déjà configuré (ouvrez le tableau de bord de votre site, allez à l'onglet Journeys → Goals, puis Add Goal). L'expérience mesurera la conversion vers cet objectif.
- L'accès à votre site pour coller une ligne de JavaScript
Étape 1 : Ouvrir l'onglet Experiments
Dans votre tableau de bord, sélectionnez le site que vous souhaitez tester et cliquez sur l'onglet Experiments. Vous y verrez la liste des expériences passées et actives.
Étape 2 : Créer une nouvelle expérience
Cliquez sur New experiment et remplissez :
- Nom — quelque chose de mémorisable comme « Couleur du CTA de checkout »
- Hypothèse (optionnel) — votre meilleure intuition sur la raison pour laquelle le changement devrait aider
- Objectif cible — l'objectif qui se déclenchera quand un visiteur convertit
Étape 3 : Ajouter vos variantes
Ajoutez 2 à N versions :
- La première variante est votre contrôle (votre page existante).
- Chaque variante supplémentaire est un traitement.
- Le traffic split contrôle la répartition des visiteurs. Les valeurs par défaut 50/50 (ou 33/33/33 pour trois variantes) conviennent généralement.
Étape 4 : Coller le snippet sur votre site
Zenovay génère un snippet d'une ligne. Collez-le là où le changement doit s'opérer — typiquement à l'endroit où vous codez en dur le style ou le texte :
const variant = window.zenovay('experiment', 'checkout-cta-color', ['control', 'green', 'orange']);
if (variant === 'green') document.querySelector('.cta').style.background = '#22c55e';
if (variant === 'orange') document.querySelector('.cta').style.background = '#f97316';
C'est tout le code nécessaire. Le tracker de Zenovay affecte une variante à chaque visiteur, la mémorise, et attribue automatiquement toute complétion d'objectif ultérieure à cette variante.
Étape 5 : Lancer
Cliquez sur Launch. L'expérience démarre en moins d'une minute. Laissez-la tourner — donnez-lui au moins quelques jours.
Lire les résultats
Chaque variante reçoit une ligne montrant les visiteurs, les conversions et le taux de conversion. Les variantes de traitement affichent en plus un intervalle de confiance à 95 % sur le gain par rapport à la variante de contrôle. Un badge vert winner apparaît sur un traitement lorsque les trois conditions suivantes sont réunies :
- La p-value corrigée par Bonferroni est inférieure à 0,05.
- Les deux variantes ont atteint au moins la taille d'échantillon minimale configurée (par défaut 100 visiteurs par variante).
- Le traitement a battu le contrôle sur le taux de conversion.
En clair : p < 0,05 signifie qu'il y a moins de 5 % de chances que la différence observée soit le simple fruit du hasard. C'est le seuil standard pour considérer qu'« un résultat est réel ». Bonferroni est la mathématique que nous appliquons pour que la comparaison simultanée de plusieurs variantes ne fasse pas accidentellement gonfler ces 5 %.
Si vous regardez le tableau de bord avant que cette barre soit franchie, le résultat affiché peut encore basculer. N'arrêtez pas l'expérience prématurément simplement parce qu'une variante semble en tête — ce « peeking » augmente le taux de faux positifs.
Limites par plan
| Plan | Expériences simultanées | Variantes par expérience |
|---|---|---|
| Free | — | — |
| Pro | 5 | 4 |
| Scale | 25 | 10 |
| Enterprise | illimité | illimité |
À propos du tracking cookieless
Si votre site charge notre tracker cookieless, chaque onglet de navigateur compte comme un nouveau visiteur pour l'affectation — c'est normal, et le résultat reste statistiquement valide. Cela signifie simplement qu'une même personne ouvrant deux onglets peut voir deux variantes différentes.
Questions fréquentes
Ai-je besoin d'un·e développeur·euse pour lancer un test A/B ?
Pour la configuration de l'expérience elle-même — choisir un objectif, nommer les variantes, fixer la répartition de trafic — non. Tout se passe dans le tableau de bord. Pour appliquer le changement sur la page — couleur de CTA, titre alternatif — vous (ou la personne qui s'occupe de votre site) devez coller une ligne de JavaScript là où le changement doit s'appliquer. Si votre site tourne sur WordPress, Shopify, Webflow ou Squarespace, vous pouvez généralement coller cela directement dans le bloc de code personnalisé de la page.
Combien de temps faut-il faire tourner l'expérience ?
Décidez-le avant le lancement. Une expérience trop courte sur peu de trafic ne donnera pas de réponse claire ; une expérience trop longue gaspille du temps. Comme règle empirique, comptez au minimum une semaine ouvrée complète et n'arrêtez l'expérience que lorsque le seuil de visiteurs par variante que vous aviez fixé est atteint. Arrêter parce qu'une variante a l'air « gagnante » est l'erreur la plus courante.
Quelle est une bonne première expérience ?
Testez quelque chose de petit et clairement visible — la couleur de votre CTA principal, le titre au-dessus de votre CTA, l'ordre de deux sections sur une landing page. Évitez les refontes de mise en page ou les changements multi-pages pour un premier essai ; ils sont plus difficiles à interpréter.
Combien de visiteurs me faut-il ?
Cela dépend de la taille de l'écart à détecter. Un changement attendu important (par exemple doubler le taux de conversion) demande beaucoup moins de visiteurs qu'un petit (1 %). Pour la plupart des tests modestes, prévoyez au moins 10 000 visiteurs par variante ; pour de petits effets, 30 000+. Il existe des calculateurs gratuits en ligne — cherchez « A/B test sample size calculator » et entrez votre taux de conversion actuel.
Puis-je lancer deux expériences en même temps ?
Oui, dans la limite de simultanéité de votre plan (5 sur Pro, 25 sur Scale). Si les expériences touchent le même élément de page, les résultats sont plus difficiles à lire — essayez de répartir les expériences simultanées sur différentes pages ou différentes parties d'une même page.
Mon expérience ne fonctionne pas. Que faire ?
Ouvrez le panneau du snippet dans l'onglet Experiments et vérifiez que le code que vous avez collé correspond. Chargez ensuite votre site dans un navigateur et regardez la console du développeur — si elle affiche undefined ou une erreur, le tracker Zenovay ne se charge pas sur cette page, ou la liste de variantes ne correspond pas au tableau de bord. Si les expositions restent à 0 après une heure de trafic sain, contactez-nous via le formulaire du centre d'aide.
Les visiteurs remarquent-ils que je leur fais passer un test A/B ?
Non. Les variantes sont servies dès le chargement de la page — les visiteurs voient la page à laquelle ils sont affectés et pas l'autre. Seule la variante est visible pour eux.
Puis-je modifier l'expérience après son lancement ?
Vous pouvez la mettre en pause, l'archiver ou y mettre fin. Vous ne pouvez plus modifier les variantes, la répartition de trafic ou l'objectif cible après lancement — cela invaliderait les données collectées. Pour modifier, mettez fin à l'expérience et clonez-la — ouvrez l'expérience et cliquez sur Clone, ce qui copie sa configuration dans un nouveau brouillon modifiable.
Que se passe-t-il si j'atteins la limite d'expériences de mon plan ?
Archivez une expérience terminée. Les expériences archivées (et terminées) conservent leurs données historiques — elles ne comptent simplement plus dans votre quota concurrent. Tout ce qui reste en cours — les expériences draft, running et paused — compte vers le quota, donc archiver une expérience terminée est généralement le moyen le plus rapide de libérer un emplacement.
Et si quelque chose ne va pas ?
Les expériences A/B sont assez tolérantes — au pire, vous perdez une semaine et n'apprenez rien. Mais quelques choses précises peuvent silencieusement mal tourner :
- Les variantes vous semblent identiques sur la page. Ouvrez le panneau du snippet, copiez le code généré par Zenovay et vérifiez que c'est la ligne que vous avez collée. Comparez les slugs de variantes du tableau de bord aux chaînes dans votre code —
'orange'vs'oragne'est la cause la plus courante. - Les expositions restent à zéro après une heure. Le tracker Zenovay ne tourne pas sur la page où vous avez appelé l'expérience. Ouvrez la page dans votre navigateur, ouvrez la console développeur (F12 → onglet Console) et tapez
window.zenovay. Si vous voyezundefined, le tracker ne se charge pas là. Revérifiez l'installation du script. - Les conversions restent à zéro alors que les expositions semblent saines. Le mauvais objectif est sélectionné. Ouvrez l'expérience, vérifiez le nom de l'objectif cible et déclenchez-le vous-même (remplissez le formulaire, cliquez sur le bouton) — confirmez qu'il apparaît dans votre flux d'objectifs en temps réel en moins d'une minute.
- Le résultat change à chaque consultation. C'est normal sur de petits échantillons. N'arrêtez pas encore l'expérience — attendez que le compteur de visiteurs atteigne le seuil que vous aviez décidé avant le lancement.
- Une variante a pris l'essentiel du trafic (par exemple 70/30 au lieu de 50/50). On appelle cela un sample-ratio mismatch. Si vous n'avez pas changé la configuration en cours de route, cela signifie le plus souvent qu'une variante lève une erreur JavaScript avant que les visiteurs ne terminent la page. Regardez la console du navigateur sur chacune des variantes.
Si vous avez tout vérifié et que ça ne fonctionne toujours pas, contactez-nous via le centre d'aide — nous pouvons consulter le journal d'expositions de votre expérience pour trouver la cause.
Vous voulez la référence complète ?
La documentation Expérimentation A/B couvre en détail le modèle statistique complet, les exemples de code spécifiques aux frameworks (React, Vue, GTM), les étapes de dépannage et la posture de confidentialité.