Des tests réfléchis
Mais pour que je puisse valider toutes ces informations, c’est là qu’interviennent les tests AB. Je ne peux pas vraiment apporter un changement et ensuite chercher, oh, eh bien, vous savez, quel type d’impact cela a-t-il eu ? Parce que regarder mes analyses ne me dira pas grand-chose. Les tests AB vont m’aider à valider exactement si ce changement a eu ou non un impact sur mes visiteurs.
Et rappelez-vous, encore une fois, même si nous avons fait des recherches et trouvé un problème, cela ne signifie pas que ma solution va nécessairement trouver un écho auprès des visiteurs. C’est pourquoi j’ai vraiment besoin de le tester AB afin de le valider encore plus.
Poser des questions
L’autre chose est que bien souvent, les gens disent que AB teste tout. AB teste ceci, AB teste cela. Mais cela signifie que je ne mène vraiment aucune recherche. Je choisis n’importe quoi au hasard. Je peux faire venir n’importe quel groupe de designers, je peux faire venir n’importe quel groupe de personnes, et ils auront une centaine de suggestions différentes que je devrais faire sur un site Web. Cela signifie-t-il que je devrais tester AB toutes ces choses ? Parce que les tests AB prennent du temps, des efforts, du développement. Je veux m’assurer que tout ce que je teste est fondé sur une sorte de recherche. Je recherche un processus reproductible et durable. Et la seule façon pour moi d’accéder à ce processus est de faire beaucoup de ces différentes choses. J’essaie vraiment de mener toutes ces recherches.
Vous remarquerez que de nombreux outils de test AB rapportent que seulement 15 à 20 % des tests qu’ils lancent sur leurs plateformes donnent des résultats positifs. C’est fou. 15 à 20%. Il s’agit d’Optimizely, VWO, Google Optimize avant, vous savez, eh bien, évidemment, il est actuellement en train de disparaître ou déjà, mais l’idée est que beaucoup de tests ne fonctionnent pas bien. Et la raison en est qu’ils ne sont pas fondés sur la recherche. Ils ne sont pas examinés. Ce ne sont que des expériences aléatoires auxquelles les gens pensent. Testons simplement cela et voyons comment cela fonctionne.
Maintenant, je dirai que si vous envisagez d’ajouter un élément sur votre site Web, vous voulez vous assurer qu’il est réellement testé. La raison en est que, encore une fois, vous ne voulez pas ajouter quelque chose sur votre site Web qui pourrait avoir un impact sur les performances, qui pourrait avoir un impact sur vos visiteurs sans nécessairement savoir si cela aura ou non un résultat positif, produira un résultat positif pour vous. .
Révisez vos statistiques
Le troisième point que je veux souligner est que vous voulez revoir vos statistiques. Vous n’avez donc pas besoin d’un diplôme en statistiques. Je n’ai certainement pas de diplôme en statistiques, je vais vous le dire. Mais vous devez comprendre certaines bases.
Votre test a-t-il duré suffisamment longtemps ?
Tout d’abord, vous voulez vous assurer que votre test dure suffisamment longtemps. J’ai parlé un peu de ces études de cas sensationnelles. Bien souvent, lorsque vous fouillez dans les données de ces études de cas sensationnelles, elles n’ont pas duré assez longtemps, elles n’ont pas abouti à un résultat significatif. Vous voulez donc vous assurer d’éviter les faux positifs et négatifs afin de vous assurer que vous atteignez une taille d’échantillon spécifique. Parfois, la taille de votre échantillon peut n’être que de trois jours.
Exécutez votre test pendant au moins une semaine
Nous vous recommandons toujours de mener une expérience pendant au moins une semaine afin de pouvoir vous assurer que le test couvre un cycle économique complet, n’est-ce pas ? Parce que encore une fois, quand je pense à mes clients et quand ils viennent, je veux penser aux week-ends, je veux penser à la semaine entière. Donc on dit toujours un minimum d’une semaine. Nous avions un client, par exemple, pour lequel nous constations toujours une augmentation des conversions le 15 du mois et la fin du mois, et ce sont les jours de paie. Encore une fois, vous voulez vous assurer que vous l’avez exécuté suffisamment longtemps, au moins une semaine.
Regardez 85 % à 90 % de chances de gagner
Et quand vous pensez à la chance de gagner, je dis toujours : envisagez une chance de gagner de 85 à 90 %. Et la raison pour laquelle, encore une fois, parce qu’il y a toujours une chance qu’il s’agisse d’un faux positif, vous voulez vous assurer de réduire encore plus cette chance. Assurez-vous donc simplement de regarder toutes ces statistiques, de prendre en compte tous ces domaines, de déterminer la taille d’un échantillon, il existe de nombreuses calculatrices. Vous pouvez simplement regarder la taille de votre échantillon et déterminer quelle est la taille de l’échantillon avant de lancer l’expérience afin de vous assurer que vous ne rencontrez aucun problème en ce qui concerne les statistiques de l’expérience.