Test bayésien

Le test bayésien transforme vos données en une probabilité simple qu'une version soit meilleure qu'une autre. Il part de ce que vous estimez raisonnable, puis ajuste cette hypothèse à mesure que les résultats arrivent. Le résultat peut s'énoncer ainsi : « il y a 96 % de chances que la version B soit meilleure », une formulation que beaucoup d'équipes trouvent plus simple à exploiter. Vous pouvez vous arrêter tôt lorsque la probabilité est suffisamment élevée, ou continuer à apprendre tant que le résultat reste incertain. Exemple : après une journée de test d'un nouveau titre sur une partie de votre trafic, vous observez une hausse du taux de clic et 95 % de chances que le nouveau titre en soit la cause et vous le déployez alors auprès de tous.