Marketing et analyse
Test A/B de deux affiches QR : ce que vous comparez vraiment
Presque toute la question « quelle affiche marche le mieux » se règle au goût, et le goût coûte cher : vous imprimez mille exemplaires de la version perdante et vous l’apprenez six mois plus tard. L’alternative est une vraie expérimentation, mais sa version honnête ne compare pas deux affiches entre elles. Elle compare deux situations identiques avec une seule variable changée.
Ce que vous testez n’est pas l’affiche
Placez la version A près de l’entrée et la B près des toilettes, et le résultat est déjà décidé : près de l’entrée, il passe simplement plus de monde. Mettez A à hauteur des yeux et B à hauteur des genoux, et vous avez mesuré la hauteur, pas le design. Accrochez A en juillet et B en septembre, et vous avez mesuré la saison.
C’est pourquoi la plupart des tests d’affiches produisent un chiffre affirmé et une conclusion fausse. La comparaison à laquelle vous pouvez croire n’est pas A contre B. C’est A contre A avec une seule chose changée, au même endroit, à la même heure de la journée et sur le même type de papier.
Quatre conditions pour une répartition honnête
S’il n’existe qu’un seul emplacement, utilisez le principe de l’alternance : A une semaine, B une semaine, de nouveau A, de nouveau B. Quatre périodes, et vous voyez si l’écart a survécu à la permutation ou s’il n’était que la semaine.
Quoi mesurer à la place du nombre de scans
Un scan n’est pas un résultat. C’est le moment où quelqu’un a tendu un appareil photo. Ce que vous voulez, c’est la part des scans qui se sont transformés en ce que l’affiche promettait : une réservation, une commande, un formulaire rempli, un avis.
Ce chiffre a un autre avantage : il ne monte pas simplement parce que vous avez imprimé plus d’affiches. Cent scans sans commande ne sont pas une victoire sur cinquante scans avec douze commandes, même si la première colonne paraît plus grosse.
Si vos analyses ne montrent pas les conversions, prenez l’indicateur honnête suivant : ce qui est arrivé au chiffre d’affaires ou aux réservations pendant les semaines où chaque version était en place, par semaine et dans la même salle. C’est grossier, mais plus difficile à tromper qu’un compteur de scans.
Ne tranchez pas le premier jour
Les cinquante premiers scans montreront un écart, et cet écart sera du bruit. Les gens scannent par grappes : une table de six scanne le même code, un mardi calme ne scanne rien. Les chiffres du début ressemblent à une tendance uniquement parce qu’il n’y a encore rien d’autre sur le graphique.
Décidez donc la règle avant de commencer, et par écrit : « dans quatre semaines, si B dépasse A de plus de vingt pour cent sur les conversions par scan, nous gardons B ». La règle écrite est ce qui vous empêche de déplacer la ligne d’arrivée en silence quand perd la version que vous aimiez.
Trois façons dont le test vous ment
Le même code deux fois
Deux affiches visuellement différentes qui pointent vers le même lien court. Les statistiques se mélangent et vous ne pouvez pas dire quelle affiche a produit quoi. Chaque version a besoin de sa propre destination : deux codes dynamiques et un marqueur dans le lien qui survive à la redirection.
S’arrêter quand « on voit déjà »
Regarder les chiffres chaque matin et figer le test le jour où B passe devant. C’est la façon la plus courante pour un petit test de se fabriquer un gagnant. La règle doit être posée à l’avance et la durée bouclée avant le premier scan.
Deux codes sur une seule affiche
« Que le client choisisse » semble neutre et ne l’est pas : sur une affiche, le code du côté par lequel les gens arrivent gagne, et vous avez mesuré la position gauche-droite plutôt que le message. Une affiche, un code.
Les mathématiques inconfortables des petits nombres
Si environ une personne sur vingt qui scanne fait ce que vous attendez, remarquer une amélioration de dix pour cent demande des milliers de scans par version, pas des dizaines. Un café qui compte quatre-vingts scans par mois ne peut pas trancher un tel écart, et prétendre le contraire fabrique des âneries très sûres d’elles.
Ce n’est pas une raison pour renoncer aux chiffres. C’est une raison de mettre l’effort sur les variables à fort effet, là où l’écart apparaît en jours et non en saisons : où l’affiche est accrochée, à quelle hauteur, et s’il y a au moins une ligne de texte dessus.
Testez par taille d’effet
En pratique, l’emplacement bat la taille, la taille bat la phrase, et la phrase bat les couleurs. Presque personne n’y croit, et presque tout le monde commence par refaire les couleurs.
Un ordre raisonnable pour un petit commerce : le code est-il là où les gens s’arrêtent vraiment pour attendre ? À une hauteur d’où on l’atteint commodément avec un téléphone ? Y a-t-il une ligne courte qui dit ce qui se passe ensuite ? C’est seulement après que vous comparez les formulations, et plus tard encore le design.
Les deux versions doivent fonctionner avant que le test commence
Le dénouement le plus inutile, c’est de découvrir au troisième jour qu’une variante scanne mal dans la vraie lumière de la vraie salle. Plastification rayée, reflet de la vitrine, code imprimé trop petit, logo qui mange la zone de silence : chacune de ces choses transforme la version B en un code qui échoue pour des raisons sans aucun rapport avec votre message.
Testez donc les deux impressions avant de les accrocher : à la distance où les gens se placent réellement, dans la lumière qui y règne réellement, et avec un téléphone qui n’est pas le plus récent de la salle.
Ce qu’il vaut mieux corriger avant de tester quoi que ce soit de fin
Tout ne demande pas une expérimentation contrôlée, et certains changements ont tant de chances d’aider qu’il vaut mieux les faire et garder la mesure pour la fois suivante.
Déplacer l’affiche du mur derrière le comptoir vers la table où l’on attend. Ajouter l’adresse en texte sous le code, pour qu’il fonctionne avec quelqu’un dont l’appareil refuse. Agrandir le code de dix millimètres. Remplacer la plastification brillante par du mat. Retirer le second code que personne ne scanne. Chacune de ces décisions coûte peu et a plus d’effet attendu que n’importe quel choix de couleur.
À quoi ressemble un test terminé
Une page, quatre lignes : quelle variable a changé, quelle destination avait chaque version, combien de temps chacune est restée en place et quel taux de conversion elle a produit. Ajoutez une phrase sur ce que vous ferez autrement. Si le résultat est une égalité, écrivez-le aussi : une égalité qui arrête une discussion répétée vaut plus qu’un faux gagnant qui la relance au trimestre suivant.
Et gardez le visuel perdant. Dans un an la même question reviendra, et avoir le fichier, les dates et les chiffres, c’est la différence entre une décision et encore une opinion.
Les erreurs qui coûtent cher
- Avoir changé le texte, la taille et l’emplacement en même temps, puis conclu quelque chose sur « le design ».
- Les deux affiches pointant vers le même lien, si bien que les statistiques ne les séparent pas.
- Le test arrêté le matin où une version est passée devant.
- Deux codes imprimés sur une affiche, et appeler cela un test divisé.
- Comparer un nombre de scans à un nombre de conversions et déclarer un gagnant.
- Le test d’une semaine qui comparait en réalité une semaine ensoleillée à une semaine de pluie.
Comment monter les deux versions en pratique
Dans le générateur de QR, créez deux codes dynamiques, un par version, et donnez à chacun sa propre destination ou son propre marqueur de suivi ; sinon tout l’exercice est décoratif. Gardez les deux liens dans le même compte pour pouvoir exporter les chiffres côte à côte à la fin.
Dans le Studio QR, faites un seul visuel et dupliquez-le. Changez exactement un élément — la ligne au-dessus du code, la taille ou le fond — et laissez le cadre, le papier et la hauteur de pose identiques, car c’est précisément ce que le test ne pourra plus corriger ensuite.
Vérifiez ensuite les deux fichiers avec le scanner QR avant de lancer l’impression : scannez l’épreuve imprimée, scannez une photo de celle-ci et scannez-la dans la lumière où l’affiche sera réellement accrochée. Une variante qui échoue ici n’avait aucune chance de gagner.