Optimisations A/B Testing de Chatbot 🆎
Avec l'A/B Testing mesurez et optimisez les actions de votre chatbot
Emmanuel F avatar
Écrit par Emmanuel F
Mis Ă  jour il y a plus d'une semaine

L’A/B testing consiste Ă  comparer plusieurs versions d’une image, d'un texte, d'un libellĂ© de bouton afin de vĂ©rifier laquelle est la plus performante. Ces variations sont prĂ©sentĂ©es de maniĂšres linĂ©aires ou alĂ©atoires aux utilisateurs de votre chatbot. 

Une analyse statistique en temps rĂ©el permet de consulter l’efficacitĂ© des diffĂ©rentes versions en fonction du taux de clic sur des actions (boutons). En d’autres termes, vous pouvez vĂ©rifier quelle version dĂ©clenche le plus de clics, d’abonnements, d’achats, etc
 Les rĂ©sultats permettent alors de dĂ©terminer la meilleure stratĂ©gie Ă  adopter.

Exemple d'affichage des statistiques A/B Testing :

Dans cet exemple on constate que : 

  • le menu a Ă©tĂ© affichĂ© 10 fois dans votre chatbot

  • les boutons ont Ă©tĂ© cliquĂ©s 6 fois (donc dans 60% des cas)

  • le bouton "Choix 1" a Ă©tĂ© cliquĂ© dans 10% des cas

  • le bouton "Choix 2" a lui Ă©tĂ© cliquĂ© dans 50% des cas

Nous pouvons donc en dĂ©duire trĂšs facilement que le bouton "Choix 2" a de bien meilleures performances que le premier bouton, il mĂ©riterait d'ĂȘtre plus en avant ou le premier bouton mĂ©riterait un nouvel intitulĂ© plus "accrocheur".

Quels éléments utiliser en A/B testing ?

  • Les textes

  • Les images

  • et surtout les libellĂ©s des boutons et quick replies (rĂ©ponses rapide) car ceux sont eux qui permettent de mesurer le taux d'action.

Cependant l’A/B testing de Botnation permet de tester un nombre bien plus important de combinaisons, pour cela il faut coupler les statistiques AB Testing aux rotations.

Les rotations vous permettent d'ajouter plusieurs Ă©lĂ©ments de mĂȘme type (texte, image, vidĂ©o, etc.) en alternance. Botnation choisira en fonction du type de la rotation (linĂ©aire, alĂ©atoire ou optimisĂ©e automatiquement) un des Ă©lĂ©ments Ă  envoyer l'utilisateur de votre chatbot.

Exemple de statistiques d'une rotation linéaire sur 2 versions d'un menu  :

On constate dans cet exemple que :

  • Botnation affichera 1 fois sur 2 de façon linĂ©aire chaque version de ce menu

  • Que la premiere version gĂ©nĂšre toujours 60% d'actions (clics) sur les boutons

  • Que la seconde version gĂ©nĂšre elle par contre 75% d'actions !

  • Que le libellĂ© "Par ici" du premier bouton de la second version gĂ©nĂšre Ă©galement 50 d'actions

Nous pouvons donc en conclure qu'une 3Úme version intégrant le libellé "Par ici" sur le premier bouton et le libellé "Choix 2" sur le second bouton serait éventuellement génératrice de bien plus d'actions.

Et effectivement cela se confirme cette 3Úme version du menu génÚre à présent 88% d'actions sur les boutons grace à une optimisation liée aux statistiques A/B Testing en temps réel de Botnation et la possibilité de mettre plusieurs éléments en rotation.


Profitez Ă©galement du Machine Learning sur vos tests A/B


Le Machine Learning de Botnation affiche automatiquement l'élément le plus performant en fonction de son puissant algorithme d'apprentissage afin de maximiser les actions de vos boutons.

L'Optimizer AI affichera en prioritĂ© la version dĂ©clenchant le plus de clics, d’abonnements, d’achats, etc
 L'Optimizer dĂ©termine en temps rĂ©el la meilleure stratĂ©gie Ă  adopter au lieu de sĂ©lectionner un Ă©lĂ©ment au hasard.

Il vous suffit pour cela d'activer l'option "Optimisée" en rotation de vous éléments.

RĂ©initialisez le A/B testing

Une fois vos mesures enregistrĂ©es, vous aurez peut-ĂȘtre besoin de les rĂ©initialiser. Par exemple, si vous modifiez totalement votre chatbot aprĂšs les premiers retours, les anciens rĂ©sultats ne sont plus forcĂ©ment pertinents.

Dans ce cas, rendez-vous dans ParamÚtres puis ParamÚtres avancés, en bas à droite, le bloc "Réinitialisation de l'AB testing" vous permet de remettre les compteurs à zéro. Pour cela, cliquez sur "Supprimer définitivement les données d'AB Testing".

⚠ Attention, cela est irrĂ©versible !

Nous vous souhaitons de bonnes optimisations de votre chatbot sur Botnation ! 


En savoir plus :

Avez-vous trouvé la réponse à votre question ?