5 greșeli care strică un test A/B

1. Oprești testul prea devreme

După două zile, o variantă pare cu 30% mai bună și ești tentat să o păstrezi. În primele zile, însă, cifrele se schimbă mult de la o zi la alta. Convertix indică un câștigător doar după cel puțin șapte zile și cel puțin 100 de conversii pe fiecare variantă, ca să nu te păcălească întâmplarea.

Ce faci: lasă testul să ruleze cel puțin o săptămână și uită-te la mesajul din raport, nu doar la diferența procentuală.

2. Prea multe variante pe trafic mic

Patru variante noi par mai multe șanse de reușită. Dar fiecare variantă împarte aceiași vizitatori, iar fiecare are nevoie de date proprii. Pe un site cu puțin trafic, testul poate rula luni de zile fără o concluzie.

Ce faci: cu trafic mic, testează pagina originală și o singură variantă nouă, cu o schimbare importantă. Vezi și Convertix pentru startup-uri.

3. Schimbi testul din mers

Pui testul pe pauză, modifici varianta și îl reiei. Sau schimbi paginile ori procentul de vizitatori din audiență cât timp rulează. Rezultatele vor amesteca atunci vizitatori care au văzut lucruri diferite.

Ce faci: verifică variantele cu previzualizarea înainte de pornire. Dacă trebuie să schimbi ceva important, e mai curat să închei testul și să pornești unul nou.

4. Măsori acțiunea greșită

O variantă aduce mai multe clicuri pe buton, dar nu și mai multe comenzi. Dacă obiectivul principal e clicul, testul o declară câștigătoare.

Ce faci: alege ca obiectiv principal acțiunea cea mai apropiată de vânzare pe care o poți măsura. Vezi Cum alegi conversia care decide câștigătorul.

5. Ignori avertizările

Convertix îți arată „Traficul pare dezechilibrat” când o variantă primește mult mai mulți sau mai puțini vizitatori decât procentul setat. Cauza e adesea o redirecționare, o pagină păstrată în cache sau un script blocat. Îți arată și erorile JavaScript apărute în variante, în raportul de rezultate.

Ce faci: când vezi o avertizare, verifică instalarea și varianta înainte să tragi concluzii.

Pe scurt

Un test bun are o singură idee clară, o conversie care contează, destui vizitatori și răbdare. Restul îl face raportul: îți spune când ai un câștigător și când e mai bine să mai aștepți.