Le test A/B standard est généralement utilisé pour tester un nombre restreint de versions d'un même message, tandis que le test multivarié permet de tester un grand nombre de variations de contenu dans un seul et même message.
Les tests multivariés peuvent être utilisés aussi bien pour les e-mails que pour les pages. Ils permettent de créer plusieurs variantes d'un seul message en associant différentes combinaisons d'objets, d'images et d'articles. Vous pouvez tester un nombre illimité de combinaisons. Les seules restrictions concernent bien sûr votre public test et vos exigences en termes de performance. Le contenu possible des différents composants MVT est défini dans la configuration du composant concerné. Contrairement au test A/B, pour lequel vous devez définir la version de chaque e-mail, le test multivarié vous permet de définir toutes les variantes d'un même message.
Remarque : Les composants MVT peuvent également être utilisés dans les templates. Dans ce cas, le contenu des composants est défini dans Express. Le test multivarié peut également être utilisé dans l'automatisation.
Chaque combinaison possible de ces différents éléments (images, textes et articles) est testée, avec pour objectif de trouver la combinaison la plus performante et d'envoyer cette version à tous les participants restants. Lorsque vous utilisez le test multivarié, vous commencez par envoyer aléatoirement une rafale de variantes à une audience test et, si certains critères sont respectés, les utilisateurs restants en recevront/visualiseront la meilleure version. La « meilleure version » est choisie s'il y a une « différence statistique significative » entre les différentes variantes ou si un certain temps ou nombre de clics a été atteint. Ce que vous pouvez définir dans les propriétés du message.
La « différence statistique significative » est un calcul statistique qui calcule si le résultat (nombre de clics entre les différentes versions) est ou non le fait d'une coïncidence. Si vous n'avez que 2 clics sur un élément, il y a de fortes chances que ces clics soient le fait d'une coïncidence. Plus vous avez de clics sur un élément, plus les chances s'amenuisent. Pour obtenir plus d'informations, consultez l'article Wikipedia : « Multivariate testing in marketing » ou « F-test ».
Remarque : il faut distinguer les e-mails MVT ayant du contenu statique (texte et articles) de ceux qui ont du contenu dynamique (images).
Les flux d'e-mails MVT ayant du contenu statique (avec ou sans images) sont exécutés par vagues. Dans la première vague, l'e-mail est envoyé à une partie du groupe cible, et ce contenu est statique. Si une combinaison gagnante est trouvée, c'est cette combinaison qui sera envoyée au reste du groupe cible.
Si l'e-mail contient uniquement des images, tous les e-mails seront envoyés en même temps. Lorsque l'image gagnante ou la combinaison d'images gagnante a été trouvée, seules ces images seront renvoyées et affichées au groupe cible à l'ouverture du message (à condition qu'elles ne soient pas mises en cache par le client e-mail).
Les critères de test dépendent du nombre de clics.
1. Créez un e-mail ou une page MVT avec les composants MVT.
Les composants MVT suivants sont prévus :
2. Pré-visualisez les différentes variantes MVT.
3. Sélectionnez quand envoyer ou afficher la « meilleure version » dans les propriétés du message.
4. La sélection par défaut pour chaque variante MVT est de 200 contacts, mais vous pouvez la remplacer dans le Journey MVT, dans les propriétés des composants de la page ou de l'-email MVT, sous l'onglet « Meilleure version ». Si votre audience est trop petite pour envoyer toutes les variantes, la première moitié de vos contacts sera alors utilisée pour envoyer la première vague de messages et la seconde sera ciblée avec la version gagnante.
Lorsque vous activez le Journey MVT, les premiers contacts sélectionnés au hasard recevront les différentes variantes de l'e-mail MVT. Lorsqu'une variante gagnante est disponible pour l'e-mail, les contacts restants seront ciblés avec la variante gagnante.
Pour chaque contact, la variante de la page MVT affichée peut être différente, mais elle aura toujours le même aspect si ce contact visite de nouveau la page. Ce n'est que si une variante gagnante de la page est disponible que le résultat sera toujours la version gagnante pour tous les contacts.
Vous pouvez aussi cliquer sur « Effacer les données multivariées ». Attention : cela supprimera toutes les données multivariées recueillies. Cette fonctionnalité est utile, une fois le Journey testé en interne, pour supprimer toutes les données de test avant de lancer le Journey pour les contacts.
