Tip:
Highlight text to annotate it
X
Video n. 5: Esperimenti campagna AdWords: Capire i risultati dell'esperimento e il loro significato statistico
Durante il passaggio 3 di Impostazione di un esperimento della campagna AdWords, lascia che l'esperimento continui e
monitorane i risultati. Questa lezione ti aiuterà a comprendere alcuni dei risultati che
potresti ottenere durante il corso dell'esperimento.
Mentre l'esperimento nella campagna è in corso, i dati si accumulano e potrai controllarli e provare
segmenti a livello di campagna, gruppo di annunci e parola chiave. Come promemoria, se non
visualizzi righe di controllo e di esperimento separate per una delle schede, attivale facendo clic su
Segmenta e spostando il mouse verso il basso per fare clic su Esperimento.
Man mano che accumuli risultati, noterai diversi tipi di indicatori statistici
nell'interfaccia che ti aiutano a capire se le metriche che confronti
sono differenti.
Una differenza statisticamente significativa è una differenza che non si è verificata per caso.
Se una metrica non ha subito modifiche significative a livello statistico, è possibile che
non sia stata influenzata dalla modifica sperimentale.
Un'icona capovolta rappresenta una metrica che non ha subito modifiche significative
a livello statistico. Qualsiasi differenza osservata potrebbe essere solo un rumore sperimentale.
Un'icona grigia rivolta verso l'alto rappresenta una metrica che è aumentata in modo
significativo. Se applicassi le modifiche sperimentali a tutte le aste, ti aspetteresti
l'aumento di questa metrica.
Un'icona rivolta verso il basso rappresenta una metrica che ha subito una diminuzione
significativa. Se applicassi le modifiche sperimentali a tutte le aste, ti aspetteresti
la diminuzione di questa metrica.
Queste icone hanno tre gradazioni che indicano quanto puoi essere sicuro che i risultati
sono dovuti alle modifiche sperimentali e non al caso:
Una singola freccia rivolta verso l'alto o il basso indica una probabilità del 95% che la metrica aumenti
o diminuisca. In altre parole, le statistiche indicano che, applicando le modifiche sperimentali,
vi è una probabilità di solo il 5% che la metrica non si sposti nella direzione
indicata se non si altera il resto.
Due frecce rivolte verso l'alto o il basso indicano una probabilità del 99% che la metrica aumenti
o diminuisca. In altre parole, le statistiche indicano che, applicando le modifiche sperimentali,
vi è una probabilità di solo l'1% che la metrica non si sposti nella direzione
indicata se non si altera il resto.
Tre frecce rivolte verso l'alto o il basso indicano una probabilità del 99,9% che la metrica aumenti
o diminuisca. In altre parole, le statistiche indicano che, applicando le modifiche sperimentali,
vi è una probabilità di solo lo 0,1% che la metrica non si sposti nella direzione
indicata se non si altera il resto.
Tieni presente che se esegui un esperimento con i segmenti di esperimento/controllo in qualsiasi
rapporto diverso da 50/50 (ad esempio, 70/30 o 20/80), le statistiche che la tua campagna ha accumulato nei
segmenti di controllo ed esperimento non possono essere confrontate singolarmente. Ad esempio, immagina
di eseguire un esperimento 90/10. Se non apportassi modifiche all'esperimento,
ti aspetteresti 900 impressioni nel controllo ogni 100 impressioni nel segmento di
esperimento. Pertanto, se notassi 900 impressioni nel segmento di controllo e 400 impressioni
nel segmento di esperimento, ciò implicherebbe un aumento statisticamente significativo delle impressioni
(perché 400 è molto più grande di 100 che è il risultato previsto se nessuna modifica
venisse apportata, il che implica che, applicando le modifiche, ti aspetteresti un aumento delle impressioni)
anche se come valore nominale 900 è maggiore di 400.
Le suddivisioni 50/50 sono più facili da confrontare (in quanto i numeri assoluti dovrebbero essere gli stessi se le tue
modifiche non hanno nessun impatto) e molte campagne non hanno un volume di traffico sufficiente per
poter raggiungere correttamente una conclusione con suddivisioni non 50/50. Pertanto, consigliamo alla
maggior parte degli inserzionisti di eseguire esperimenti 50/50 a meno che non siano pronti per fare qualche calcolo
da soli per determinare la modifica percentuale della metrica se le modifiche sperimentali venissero applicate
a tutte le aste.