Hypothèse de test
Hypothèse de test : une prédiction qu'on peut avoir tort
Une hypothèse de test énonce trois choses : le changement qu'on applique, l'effet chiffré qu'on attend sur un indicateur précis, et la raison pour laquelle on l'attend. Sans ces trois parties, un test produit un résultat qu'on ne saura interpréter ni réutiliser ailleurs.
La structure en trois parties d’une hypothèse de test
| Partie | Exemple |
|---|---|
| Changement | Déplacer le prix au dessus du bouton |
| Effet attendu | Deux points de conversion en plus sur le formulaire |
| Raison | Les enregistrements montrent une hésitation à cet endroit |
La troisième partie est celle qu’on oublie. C’est pourtant elle qui rend le résultat transposable à d’autres pages du site.
Le critère qui sépare une hypothèse d’un souhait
Il doit exister un résultat mesurable qui la contredirait. Une formulation qu’aucune donnée ne peut démentir n’apprend rien, quel que soit le chiffre obtenu.
C’est le seul filtre à appliquer avant de lancer un test coûteux en trafic. Une page qui reçoit peu de visites ne peut pas se permettre d’en gaspiller sur une question mal posée au départ.
Pourquoi une seule variable à la fois
Deux changements simultanés produisent un résultat sans cause identifiable. Le test dit que quelque chose a marché sans dire quoi.
Les tests multivariés répondent à cette limite, au prix d’un trafic bien plus élevé.
Ce qu’une hypothèse ne garantit pas
D’avoir raison. Une hypothèse démentie proprement vaut mieux qu’un test gagnant dont on ignore la raison.
Les confusions fréquentes et ce qui les sépare
- Hypothèse au sens statistique
- L'hypothèse nulle statistique affirme l'absence d'effet. L'hypothèse de test, elle, affirme un effet et sa cause.
- Idée d'optimisation
- Une idée propose un changement. Une hypothèse y ajoute l'effet attendu et le raisonnement, donc la possibilité d'être démentie.
Mis à jour le