Che cos’è un test A/B? — Strumento gratuito
Un test A/B mette a confronto due versioni che differiscono per un solo elemento. Perché quell’unica variabile è tutta la disciplina, quanti risultati servono perché una vincitrice significhi qualcosa, e gli errori che producono conclusioni sicure ma sbagliate.
Pubblicare due versioni di un post o di un annuncio che differiscono per un solo elemento — titolo, immagine, call to action — e confrontare i risultati. Cambiare più di una variabile rende impossibile spiegare chi ha vinto.
Che cos’è
Un test A/B, o split test, mette due versioni dello stesso post o dello stesso annuncio una contro l’altra e confronta cosa succede. La versione A è di solito quello che avresti pubblicato comunque; la versione B cambia esattamente una cosa. L’obiettivo non è trovare un post migliore, è capire quale elemento ha mosso il numero, così la lezione sopravvive a questo singolo post.
Come si misura
La metrica si sceglie prima, non dopo: tasso di clic per un post con link, tasso di conversione per un annuncio, visualizzazione completa per un video. Poi servono abbastanza risultati perché la differenza significhi qualcosa. Un calcolo di significatività è ciò che separa una differenza reale dal rumore, e più le due versioni sono vicine, più risultati servono per vederla.
Frainteso spesso
L’errore più comune non è cambiare due variabili, è fermarsi troppo presto. All’inizio di un test le due versioni si superano di continuo, quindi se guardi e ti fermi appena una è avanti troverai una vincitrice quasi sempre, anche quando le versioni sono identiche. Il secondo errore è testare qualcosa di troppo piccolo: cambiare un’emoji non batterà il rumore con nessun campione raggiungibile, quindi il test costa una settimana e non restituisce nulla. Testa l’offerta, il gancio o il formato prima della punteggiatura.
Quando conta
Conta soprattutto dove stai spendendo, perché è lì che una differenza di due punti si accumula. Sull’organico l’uso onesto è più stretto: non puoi tenere costanti pubblico e momento, quindi tratta i confronti organici come fonte di ipotesi che un test a pagamento può davvero risolvere.
Termini correlati
Caratteristiche
- Definizione chiara, con la regola della variabile unica esplicitata
- Perché una differenza nei numeri non è una differenza tra le versioni
- Quanto far durare un test, e perché fermarsi al primo vantaggio è l’errore classico
- Cosa l’organico può e non può testare onestamente, rispetto al pagamento
- Link al calcolatore di significatività per verificare un risultato invece di stimarlo a occhio
Domande frequenti
Quante variabili posso cambiare insieme?
Una. Non è una preferenza di stile, è ciò che rende il risultato spiegabile: se la versione vincente ha titolo nuovo e immagine nuova, il test dice che ha vinto la coppia e nulla su quale metà abbia fatto il lavoro.
Quanto deve durare un test?
Abbastanza da raccogliere un campione che non si ribalti con una manciata di risultati, e almeno un ciclo completo del tuo schema settimanale. Un test da martedì a giovedì misura da martedì a giovedì, non il tuo pubblico.
Quando posso dichiarare una vincitrice?
Quando la differenza supera il rumore, ed è quello che dice un calcolo di significatività. Fermarsi appena una versione passa avanti è il modo più comune di ottenere una risposta sicura e sbagliata, perché i vantaggi iniziali si ribaltano di continuo.
Posso fare test A/B sui post organici?
Solo in modo approssimativo. Non puoi mostrare due versioni allo stesso pubblico nelle stesse condizioni, quindi un confronto organico si porta dietro l’ora, il giorno della settimana e l’algoritmo. Trattalo come un indizio e riserva i test veri al pagamento.
E se non c’è differenza?
È un risultato, e utile. Significa che l’elemento che hai cambiato non è ciò che limita il post, quindi il test successivo dovrebbe spostarsi su altro e non su una variazione più piccola della stessa cosa.
