LâA/B testing consiste Ă comparer plusieurs versions dâune image, d'un texte, d'un libellĂ© de bouton afin de vĂ©rifier laquelle est la plus performante. Ces variations sont prĂ©sentĂ©es de maniĂšres linĂ©aires ou alĂ©atoires aux utilisateurs de votre chatbot.Â
Une analyse statistique en temps rĂ©el permet de consulter lâefficacitĂ© des diffĂ©rentes versions en fonction du taux de clic sur des actions (boutons). En dâautres termes, vous pouvez vĂ©rifier quelle version dĂ©clenche le plus de clics, dâabonnements, dâachats, etc⊠Les rĂ©sultats permettent alors de dĂ©terminer la meilleure stratĂ©gie Ă adopter.
Exemple d'affichage des statistiques A/B Testing :
Dans cet exemple on constate que :Â
le menu a été affiché 10 fois dans votre chatbot
les boutons ont été cliqués 6 fois (donc dans 60% des cas)
le bouton "Choix 1" a été cliqué dans 10% des cas
le bouton "Choix 2" a lui été cliqué dans 50% des cas
Nous pouvons donc en dĂ©duire trĂšs facilement que le bouton "Choix 2" a de bien meilleures performances que le premier bouton, il mĂ©riterait d'ĂȘtre plus en avant ou le premier bouton mĂ©riterait un nouvel intitulĂ© plus "accrocheur".
Quels éléments utiliser en A/B testing ?
Les textes
Les images
et surtout les libellés des boutons et quick replies (réponses rapide) car ceux sont eux qui permettent de mesurer le taux d'action.
Cependant lâA/B testing de Botnation permet de tester un nombre bien plus important de combinaisons, pour cela il faut coupler les statistiques AB Testing aux rotations.
Les rotations vous permettent d'ajouter plusieurs Ă©lĂ©ments de mĂȘme type (texte, image, vidĂ©o, etc.) en alternance. Botnation choisira en fonction du type de la rotation (linĂ©aire, alĂ©atoire ou optimisĂ©e automatiquement) un des Ă©lĂ©ments Ă envoyer l'utilisateur de votre chatbot.
Exemple de statistiques d'une rotation linéaire sur 2 versions d'un menu  :
On constate dans cet exemple que :
Botnation affichera 1 fois sur 2 de façon linéaire chaque version de ce menu
Que la premiere version génÚre toujours 60% d'actions (clics) sur les boutons
Que la seconde version génÚre elle par contre 75% d'actions !
Que le libellé "Par ici" du premier bouton de la second version génÚre également 50 d'actions
Nous pouvons donc en conclure qu'une 3Úme version intégrant le libellé "Par ici" sur le premier bouton et le libellé "Choix 2" sur le second bouton serait éventuellement génératrice de bien plus d'actions.
Et effectivement cela se confirme cette 3Úme version du menu génÚre à présent 88% d'actions sur les boutons grace à une optimisation liée aux statistiques A/B Testing en temps réel de Botnation et la possibilité de mettre plusieurs éléments en rotation.
Profitez également du Machine Learning sur vos tests A/B
Le Machine Learning de Botnation affiche automatiquement l'élément le plus performant en fonction de son puissant algorithme d'apprentissage afin de maximiser les actions de vos boutons.
L'Optimizer AI affichera en prioritĂ© la version dĂ©clenchant le plus de clics, dâabonnements, dâachats, etc⊠L'Optimizer dĂ©termine en temps rĂ©el la meilleure stratĂ©gie Ă adopter au lieu de sĂ©lectionner un Ă©lĂ©ment au hasard.
Il vous suffit pour cela d'activer l'option "Optimisée" en rotation de vous éléments.
Réinitialisez le A/B testing
Une fois vos mesures enregistrĂ©es, vous aurez peut-ĂȘtre besoin de les rĂ©initialiser. Par exemple, si vous modifiez totalement votre chatbot aprĂšs les premiers retours, les anciens rĂ©sultats ne sont plus forcĂ©ment pertinents.
Dans ce cas, rendez-vous dans ParamÚtres puis ParamÚtres avancés, en bas à droite, le bloc "Réinitialisation de l'AB testing" vous permet de remettre les compteurs à zéro. Pour cela, cliquez sur "Supprimer définitivement les données d'AB Testing".
â ïž Attention, cela est irrĂ©versible !
Nous vous souhaitons de bonnes optimisations de votre chatbot sur Botnation !Â
En savoir plus :