Optymalizator Witryn Google (Google Website Optimizer, GWO) to fantastyczne narzÄ™dzie, niezbÄ™dne w pracy każdego szanujÄ…cego siÄ™ marketera - czyli takiego, który testuje.
W poprzednim artykule pisałem o tym, żeby
uważać na długości testu. Tym razem zajmę się pułapkami w testach A/B.
Na czym polega TEST A/B - jeśli go robisz, jesteś w elicie
Test A/B (Split test) jest najpopularniejszym typem testu wykorzystywanego przez marketerów na caÅ‚ym Å›wiecie.
Test A/B polega na tym, że losowo wyÅ›wietlamy odbiorcom wersjÄ™ kontrolnÄ… (dotychczas najlepsza, A) oraz wersjÄ™ testowÄ… (pretendenta, B). NastÄ™pnie mierzymy ile osób, które widziaÅ‚o wersjÄ™ A lub wersjÄ™ B wykona zakÅ‚adanÄ… akcjÄ™.
Amatorzy porównujÄ… nastÄ™pnie wynik wersji A z wynikiem wersji B i na tej
podstawie podejmujÄ… decyzje marketingowe.
Zaawansowani marketerzy zanim podejmÄ… decyzjÄ™ badajÄ…
jeszcze poziom istotnoÅ›ci otrzymanych wyników. Tj. wykorzystujÄ… testy statystyczne aby okreÅ›lić,
jak bardzo (statystycznie) prawdziwe
sÄ… otrzymane wyniki. Innymi sÅ‚owy jeÅ›li jedna wersja jest skuteczniejsza od drugiej o 100%, ale wynik ten oparto o zbyt małą próbkÄ™, wynik może być nieprawdziwy - zachwiany przez czynniki zewnÄ™trzne.
Google Website Optimizer teoretycznie robi z każdego amatora testowania profesjonalistę, ponieważ GWO automatycznie wylicza poziom istotności. GWO podaje obok każdego wyniku prawdopodobne odchylenie realnego wyniku od zmierzonego oraz procentową szansę danej wersji na pobicie oryginału:
Gdy GWO wyliczy, że istotność jednego z wyników jest wystarczajÄ…co duża, pojawia siÄ™ zielony komunikat informujÄ…cy nas, która kombinacja statystycznie
rzecz biorÄ…c jest najlepsza:
Jednak cytując Jeana Rigaux: "Istnieją trzy rodzaje kłamstwa: przepowiadanie pogody, statystyka i komunikat dyplomatyczny." Cały
czas w powyższym teście podkreślałem, że
statystycznie.... Problem polega na tym, że Google nie zawsze ma rację, zwłaszcza w testach A/B.
Pełna treść tego i 447 pozostałych artykułów zarezerwowana jest dla Płatnych Abonentów CzasNaE-Biznes.
Zapisz siÄ™ na Darmowy Kurs E-Biznesu...
Zaraz po zapisaniu się otrzymasz dostęp do tego artykułu. Dodatkowo co 3 dni będziesz otrzymywał 1 lekcję nt. e-biznesu.