1. Mailjet
  2. Support
  3. Documentation

A/B testing

Sommaire

Introduction

  • Vous êtes vous déjà demandé quel objet provoque le plus d'ouvertures ?
  • Un bouton « C'est parti » de couleur rouge provoque-t-il plus de clics qu'un bouton de couleur verte ?
  • L'apparition du nom de votre entreprise dans le nom d'expéditeur fait-elle vraiment la différence ?

Arrêtez de vous poser des questions et obtenez des réponses avec Tests A/B de Mailjet !

En quoi consiste exactement Tests A/B ?

Avec Tests A/B de Mailjet, vous pouvez analyser presque n'importe quoi dans votre email et comparer jusqu'à 10 versions simultanément.

Une fois que vous avez choisi les éléments à tester (comme l'objet, le nom d'expéditeur, les images, les boutons, etc.) et combien de versions de l'email vous souhaitez envoyer, vous êtes prêt à lancer le test A/B.

A/B Testing

Vous définissez les critères d'analyse (taux d'ouverture, taux de clic…), puis chaque version est envoyée à un nombre restreint mais égal de destinataires issus de la même liste de contacts.

Notre puissant outil d'analyse affiche les données réelles dans des graphiques intuitifs, vous indiquant quelle version a le plus fait écho chez vos clients.

Vous pouvez ensuite choisir d'envoyer la meilleure version aux autres destinataires de cette liste de contacts ou demander à Mailjet de le faire automatiquement à votre place !

En bref, avec Tests A/B, vous bénéficiez d'un outil d'analyse d'emails très performant qui, combiné à d'autres fonctionnalités de Mailjet (Segmentation, Comparaison de campagnes), vous permet de concevoir l'email le plus efficace et de l'envoyer au groupe de destinataires le plus réceptif.

Créer une campagne A/B

L'utilisation de la fonctionnalité Tests A/B de Mailjet est assez simple :

  • Concevez votre campagne
  • Créez au moins une variante de cette campagne
  • Définissez le critère de test et la taille du groupe de destinataires
  • Analysez les résultats

Pour commencer, rendez-vous sur votre page Campagnes et cliquez sur le bouton « Nouvelle campagne ».

Étape 1 : Configuration

La page « Créer une nouvelle campagne » indique les différents éléments de votre campagne qui doivent être renseignés :

  • 1) Nom de la campagne : le nom interne de votre campagne que seules les personnes ayant accès au compte peuvent voir.
  • 2) Langue : la langue de votre campagne.
  • 3) Objet : l’objet de votre campagne tel qu’il s’affiche dans la boîte de réception du destinataire.
  • 4) De : le nom que vos destinataires verront dans le champ « De », ainsi que l’adresse d’expédition.
  • 5) Liste de contact : cliquez sur le bouton « Sélectionner les destinataires » pour sélectionner une liste de contacts. Si vous disposez d’un abonnement Premium, vous pouvez créer ou sélectionner un segment. Pour en savoir plus sur la segmentation, nous vous invitons à consulter l’article suivant de notre FAQ : Segmenter les listes de contacts

A/B Testing

Cliquez sur « Concevoir l'email » pour sélectionner un modèle d’email et concevoir différentes versions avec Passport, notre outil de création d’emails.

A/B Testing

Étape 2 : Design

Concevez votre campagne avec Passport, notre éditeur d’emails intuitif en glisser-déposer. Glissez-déposez simplement les blocs de contenu dans la campagne, puis cliquez sur une section pour la personnaliser. Pour plus d’informations sur les fonctionnalités de Passport, nous vous invitons à consulter notre guide relatif à Passport.

A/B Testing

Super ! Vous avez créé votre campagne, aussi appelée version A.

Pour créer une version supplémentaire, cliquer sur la liste déroulante, et sélectionner « Créer une nouvelle verison ».

A/B Testing

Voilà la version B créée !

A/B Testing

Chaque fois que vous créez une nouvelle version, elle est la copie exacte de la précédente. Ainsi, si vous créez une version C, elle reprendra tous les éléments de la version B, et ainsi de suite.

Pour modifier l'objet et les informations sur l'expéditeur dans votre version B, cliquez simplement sur le petit crayon.

A/B Testing

Pour supprimer une version, cliquez simplement sur le lien « Supprimer cette version ».

Quand vous supprimez une version, les versions suivantes sont renommées en conséquence.

A/B Testing

Faites attention au nombre de changements que vous effectuez sur une seule version. Avec un nombre trop important de variables, il sera difficile de déterminer quelle variable a eu le plus d'impact. N'oubliez pas : vous pouvez créer jusqu'à 10 versions de la même campagne.

Pour passer à l’envoi de votre campagne, cliquez sur « Récapitulatif & Envoi ».

[Revenir en haut]

Étape 3 : Échantillon pour le test et critères de sélection de la version gagnante

Vous avez créé les différentes versions de la campagne. Retournez sur la page « Créer une campagne ». Vous devez maintenant définir la taille d’échantillon à qui sera envoyé le test et les critères de sélection de la version gagnante qui sera envoyée au reste de la liste de contacts.

La section « Échantillon pour test A/B » est configurée par défaut comme ci-après : la taille de l’échantillon pour le test de 20 % et la version gagnante est automatiquement envoyée au reste de la liste de contacts.

A/B Testing

Cliquez sur l’icône “crayon” pour modifier ce paramétrage.

Taille de l’échantillon pour le test

Saisissez le pourcentage de contacts qui recevront les différentes versions de la campagne. Le nombre ou pourcentage total des contacts sera divisé par le nombre de versions que vous avez à envoyer. (Remarque : s’il est impossible de répartir les contacts de manière égale pour chaque version de la campagne, les contacts restants recevront la dernière version.)

A/B Testing

Les statistiques de ce test sont ensuite collectées pour déterminer quelle version doit être envoyée au reste des contacts.

Sélection de la meilleure version

Vous pouvez désormais choisir comment la version gagnante sera envoyée : mode Automatique ou mode Manuel.

Avec le mode « Automatiquement », vous sélectionnez le critère déterminant la version la plus performante une fois le test terminé (délai à définir dans l'étape suivante).

Une fois la version gagnante choisie, Mailjet l'enverra automatiquement aux contacts restants et vous recevrez une notification par email.

Au cas où deux campagnes obtiennent le même score, Mailjet choisira la campagne gagnante obtenant le meilleur score global et vous recevrez une notification par email.

A/B Testing

Avec le mode « Manuellement », vous pouvez consulter les résultats du test avant de choisir et d'envoyer votre version (au maximum 7 jours après l'envoi de la campagne).

Remarque : il est nécessaire d’attendre au moins 1 heure avant de consulter les résultats du test, et la version gagnante doit être envoyée dans un délai maximum de sept jours après l’envoi initial.

A/B Testing

Choisissez le mode de sélection et cliquez sur « Sauvegarder ».

[Revenir en haut]

Étape 4 : Planifier et envoyer

Lorsque votre campagne est prête, cliquez sur « Envoyer maintenant ».

A/B Testing

Si vous sélectionnez le mode automatiquement, l’échantillon pour le test est envoyé immédiatement, mais vous pouvez planifier la date d’envoi de la version gagnante.

Remarque : il est nécessaire d’attendre au moins 1 heure avant de consulter les résultats du test A/B et de retenir une version gagnante. Si l’échantillon de test est important, nous vous conseillons d’attendre plus longtemps avant de choisir la meilleure version.

A/B Testing

Si vous sélectionnez le mode manuellement, l’échantillon pour le test est envoyé immédiatement, et vous pouvez définir un rappel pour passer en revue et analyser les résultats. La version retenue doit être envoyée manuellement dans un délai maximum de sept jours après l’envoi initial. Si après sept jours, vous ne l’avez toujours pas fait, vous recevrez une notification d’annulation de votre campagne.

A/B Testing

Parfait ! Votre campagne A/B est en cours.

[Revenir en haut]

Accès à votre campagne A/B

Que votre campagne soit en cours ou terminée, vous pouvez la visualiser comme une campagne classique :

À partir de votre page Campagnes, cliquez simplement sur le titre de la campagne.

A/B Testing

Visualisation d'un test A/B en cours - Mode automatique

A/B Testing

Avec un test A/B en cours en mode automatique, vous pouvez :

  • Passer du mode automatique au mode manuel, puis décider de la version gagnante.
  • Modifier les critères de la version gagnante.
  • Changer la date et l'heure d'envoi de la version gagnante.
  • Annuler complètement le test A/B.

    Si aucun message n'a été envoyé, votre campagne sera sauvegardée comme un brouillon que vous pourrez envoyer plus tard. Si des messages ont déjà été envoyés, votre campagne sera sauvegardée comme une campagne normale.

  • Prendre un café et attendre que Mailjet choisisse le gagnant ;)

[Revenir en haut]

Visualisation d'un test A/B en cours - Mode manuel

A/B Testing

Avec un test A/B en mode manuel, vous pouvez sélectionner la version gagnante à tout moment et l’envoyer aux contacts restants : Sélectionnez la version de votre choix dans le menu déroulant et cliquez sur « Envoyer cette version ».

A/B Testing

Voici les autres options disponibles avec un test A/B continu en mode manuel :

A/B Testing

  • Passer du mode manuel au mode automatique. Vous devrez sélectionner le critère d'élection et la date et l'heure d'envoi de la version gagnante.
  • Changer la date et l'heure de votre email de rappel.
  • Annuler complètement le test A/B.

Si aucun message n'a été envoyé, votre campagne sera sauvegardée comme un brouillon que vous pourrez envoyer plus tard. Si des messages ont déjà été envoyés, votre campagne sera sauvegardée comme une campagne normale.

[Revenir en haut]

Visualisation d'un test A/B terminé - Mode manuel ou automatique

Une fois le test A/B terminé, vous pourrez visualiser les données utiles pour avoir une meilleure idée de ce que vos clients ont aimé et adoré dans vos différentes versions.

Le graphique affiche les mesures de données sélectionnées tandis que le tableau indique les détails de tous les statuts de chaque version.

A/B Testing

A) Changez l'unité d'affichage, la période et le type de tableau.

B) Sélectionnez les mesures que vous souhaitez afficher dans le graphique. Si vous survolez le graphique avec la souris, une fenêtre contextuelle affiche les indicateurs clés pour chaque campagne.

C) Changez l'affichage de la campagne sur le graphique en cliquant sur le nom.

D) Boostez votre pouvoir d'analyse en comparant diverses campagnes et comparatifs. Veuillez lire le Guide de comparaison de campagnes pour plus d'informations.

Vous êtes désormais prêt à tester et optimiser vos campagnes à votre guise… ou au moins régulièrement en fonction de la fréquence à laquelle vous communiquez avec vos clients !

Nous vous souhaitons une agréable expérience avec Tests A/B !

[Revenir en haut]

Essayer Mailjet maintenant ?
Créez un compte - sans engagement, sans frais cachés