La velocità è sopravvalutata negli A/B test?

Velocità dei test. Viene spesso indicata come l'indicatore del successo dell'ottimizzazione. In parole povere, se riuscite a eseguire quanti più spesso i test, l'ipotesi è che imparerai maggiormente.

E lungo il percorso, costruirete i muscoli che compongono una sana cultura della sperimentazione.

Ma il test della velocità è sopravvalutato? Il 7 aprile, Kameleoon si è unito a 4 leader della sperimentazione per risolvere la questione. Leggete i punti salienti qui sotto o guardate la replica qui. 

Ton Wesseling

È più facile iniziare con la quantità e poi passare alla qualità. Se si inizia con la qualità, tutti inizieranno a criticare i test: "ipotesi sbagliate, intuizioni sbagliate, sbagliate, sbagliate, sbagliate...". Non date questo segnale. Invece, andate avanti. Create tester felici. Se non emergono intuizioni, rallentate e correggete i test.

Si ottengono più risultati investendo sulla quantità piuttosto che sulla complessità. Quando si ricevono risorse per scalare un programma di test, l'obiettivo finale è massimizzare il numero di risultati reali. Non si vuole massimizzare la percentuale di test vincenti. Si vuole avere il maggior numero possibile di test che raggiungano un'alta percentuale di vittorie. Se la percentuale di vittorie diminuisce, è necessario investire nella qualità.

Verdetto: Non sopravvalutato

Els Aerts

Non incentivate la quantità per il gusto della quantità. Sebbene sia importante massimizzare il potenziale di test, è importante trovare un equilibrio tra l'esecuzione del maggior numero possibile di test e la garanzia di eseguire i test più validi fin dall’inizio.

Qualità ≠ complessità. Per eseguire test di alta qualità non sono necessarie ricerche molto complesse. È possibile esaminare un sito web e, sulla base di dati di base, formulare ottime ipotesi di test. Pertanto, velocità e qualità non si escludono a vicenda.

Avere un piano e un processo in atto è estremamente importante. Anche se la larghezza di banda per i test è bassa, se non si pianifica bene e non si prepara il prossimo test quando il primo si sta esaurendo, non si riesce a massimizzarlo.

Verdetto: Sopravvalutato

Marianne Stjernvall

Se sei alle prime armi con i test, inizia con qualcosa. Non deve essere l'idea migliore in assoluto, ma devi solo andare avanti, trovare dati e iniziare a conoscere i tuoi utenti. All'inizio forse non troverai i grandi vincitori, ma imparerai molto.

Non tutti i test vengono creati con l'obiettivo di generare entrate. In alcuni casi, l'obiettivo è conoscere i clienti o testare l'implementazione di un software. Ha senso avere quantità diverse di tipi di test. Ad esempio, una parte è costituita da test rapidi, per imparare a conoscere i clienti, un'altra richiede tempi più lunghi e ricerche. Poi alcuni test di sviluppo.

Ottenere il consenso per iniziare. Forse avete solo uno specialista di CRO che si affida agli sviluppatori per eseguire i test. Per raggiungere una certa velocità, è necessario il consenso degli sviluppatori.

Verdetto: Non sopravvalutato

Brian Massey

Non si tratta di test, ma di idee. L'importante è la velocità delle idee, ovvero la rapidità con cui le idee vengono raccolte. Gli A/B test sono solo un modo per raggiungere le idee e progettare esperimenti per dimostrarne l'erroneità.

I test hanno un costo. Una grande quantità di test poco performanti può diventare costosa, poiché riduce il numero complessivo di conversioni. Può diventare costoso se ogni test, 1 su 3 o 4 è un "perdente", se il tuo obiettivo è testare in modo arbitrariamente veloce.

Verdetto: Sopravvalutato

Non perdere la prossima sessione dal vivo. Segui Kameleoon su LinkedIn per conoscere i prossimi webinar con i maggiori esperti mondiali di sperimentazione.