Objectif

Ce guide a pour objectif de vous accompagner pas à pas dans la mise en place d’un test A/B via AB Tasty visant à mesurer l’impact business de la solution iAdvize, à travers la mise en place des “Conversation Starters*”.

*Les Conversation Starters proposent des questions préformatées et intégrées directement aux pages produit et catégories. En ciblant proactivement les interrogations potentielles des visiteurs, comme des informations sur la composition ou des conseils d’utilisation, ils simplifient l’accès aux réponses essentielles dès l’arrivée sur le site et facilitent l’engagement des clients dans le tunnel de conversion. En savoir plus.

L’incrément de valeur apporté par iAdvize peut être mesuré à travers :

• Le taux d’ajout au panier
• Le taux de conversion
• Le revenu par session ou par visiteur

Le principe du test :

• Groupe A : visiteurs non exposés à iAdvize
• Groupe B : visiteurs exposés à iAdvize

Les visiteurs des groupes A et B doivent être restreints aux visiteurs “éligibles” à un affichage iAdvize.

Ce guide vous permet de configurer un test A/B iAdvize via la plateforme AB Tasty, sur votre site web, peu importe l’appareil utilisé (desktop, mobile, tablette).

Prérequis techniques

Configuration de AB Tasty

• AB Tasty est correctement installé sur votre site
• Les objectifs clés sont configurés : ajout au panier, conversion, panier moyen, revenu par visiteur
• Un visiteur n’entre dans un test A/B qu’après avoir donné son consentement via la CMP

👉 Besoin d’aide ? Contactez votre CSM AB Tasty

Configuration d’iAdvize

• iAdvize est bien installé sur votre site
• Les visiteurs peuvent interagir avec les notifications iAdvize appelées “Conversation Starters” et démarrer une conversation avec le Copilot.

👉 Besoin d’aide ? Contactez votre CSM iAdvize ou le support client

Les conditions pour un test réussi

Un test A/B est concluant lorsqu’il démontre une amélioration statistiquement significative sur un KPI clairement défini, avec des résultats fiables et sans biais. Voici quelques recommandations :

1. Définir un objectif clair

• Quel KPI souhaitez-vous améliorer via iAdvize ?
• Quel est le gain minimum attendu sur ce KPI (en %) ?

2. Optimiser l’expérience des utilisateurs éligibles en amont du test 

Avant lancement, pour révéler pleinement la valeur ajoutée d’iAdvize, il est essentiel de :

• Valider l’UX des Conversation Starters sur les pages produits (consulter nos conseils)
• Valider l’UX post-conversation tout le long du parcours utilisateur (s’assurer qu’iAdvize ne cache pas de CTA stratégiques sur les autres pages du site et sur les pages de checkout)
• Vérifier la qualité des contenus (knowledges) sur lesquelles se basent la génération des questions affichées
• S’assurer de la pertinence des réponses du Copilot

👉 Besoin d’aide ? Contactez votre CSM iAdvize ou le support client

3. Configurer un test bien calibré

Pour garantir la validité statistique du test et optimiser sa durée, il faut :

• 2 groupes : avec iAdvize / sans iAdvize
• Répartition 50/50 du trafic
• Aucun autre test ne tourne en parallèle
• 100% du trafic éligible est dédié à ce test
• La durée du test est fixée à l’avance et adaptée au trafic

Durée minimale recommandée selon le trafic mensuel éligible* à iAdvize :

Hypothèses : répartition 50/50, erreur alpha 10%, puissance 50%. 

4. Faire une recette approfondie avant et après lancement

Pour garantir un test A/B robuste, vérifiez :

• La répartition entre les groupes (50/50)
• L’expérience des visiteurs du groupe "avec iAdvize" et le bon affichage des notifications iAdvize sur tout le parcours de navigation
• L’expérience des visiteurs du groupe "sans iAdvize" sur l’ensemble des pages du site

3. Configuration du test

Étape 1 : Créer un trigger

• Rendez-vous sur https://app2.abtasty.com/dashboard
• Allez dans “Librairie” puis dans “Trigger”

• Créez un trigger que nous nommerons ici “Affichage d’un engagement iAdvize”. Ce trigger sera utilisé lors du ciblage. Il permet de vérifier s’il y a l’affichage d’un Conversation Starter iAdvize dans la page.
• Choisissez “Expert”.
• Choisissez “Code” (via un glisser / déposer).
• Saisissez le code suivant puis enregistrez :

  window.iAdvizeInterface = window.iAdvizeInterface || [];

window.iAdvizeInterface.push(function (iAdvize) {

  iAdvize.on('engagementNotification:displayed', function () {

    abResolve(true);

  });

});

Étape 2 : Créer le test

• Allez dans "Web experimentation"
• Cliquez sur "Créer" pour commencer la configuration du nouveau test
• Choisissez "Test A/B"

1- Informations principales

• Complétez le nom et les hypothèses du test.
• Renseignez l’URL de votre site, nécessaire pour la configuration du test.
• Choisissez “Editeur de code” puis “Enregistrer & aller à l’étape suivante”.

2- Editeur de code

• Saisissez le code ci-dessous et collez-le dans l’éditeur 
• Enregistrez & allez à l’étape suivante
• Ce code permet de créer une variation “Sans iAdvize” pour laquelle les conversation starters seront masqués.

#embedded-conversation-starter-container {

  display:none!important;

}

3- Objectifs

• Sélectionner les objectifs du test puis passer à la l’étape suivante

4- Ciblage

• Segment : tous les visiteurs
• Page(s) : ciblez toutes les pages de votre site
  Un scope large est préférable pour couvrir l’ensemble des possibilités d’affichage iAdvize. Le Trigger, défini en étape 1, suffit à cibler les bonnes pages, sans avoir à préciser les URLs.

• Trigger(s) : sélectionnez le Trigger “Affichage d’un engagement iAdvize”

• Fréquence : Tout le temps
• “Enregistrer & Aller à l’étape suivante”

5- Modulation du trafic

• Ajustez le trafic entre les 2 groupes (50/50 est la répartition idéale)
• Editez le nom de la variation 1 → Sans iAdvize puis allez à l’étape suivante

6- Option avancées (facultatif)

7- Recette & Aperçu

• Procédez à la QA de l’expérience de test sur desktop et sur mobile
• Puis finalisez la création du test

Résultats

Une fois le test lancé, vous retrouverez les données dans l’interface AB Tasty, dans la page Reporting dédiée à votre expérience.

Vous pouvez modifier le groupe de référence pour la lecture des résultats, afin que ce soit le groupe “Sans iAdvize” (ou la Variation 1). Cela facilitera la lecture des résultats.

Au survol de “Variation 1” le bouton “référence” apparaît. Il suffit de cliquer dessus. 

Le choix du groupe de référence est automatiquement sauvegardé pour les prochaines consultations de résultats.