Разширено тестване 9 съвета от експерт, който тества 4000 A

Аят Шукайри, съосновател и вицепрезидент на Invesp, има 11 години опит в A/B тестване. С над 4000 успешни внедрявания на оптимизация на процента на реализация (CRO), Shukairi е натрупал повече от богатство от знания.

Ето 9 заключения, които тя направи след 4000 теста.

  • Често се фокусираме върху грешните неща

Шукайри посъветва да спрем да се фокусираме върху краткосрочния план. Дългосрочните планове за тестване трябва да се вземат предвид при изпълнението на стратегии.

Освен това тя напомни на публиката, че е най-добре да бъдете скептични относно гигантските повдигания, когато тествате; ако видите огромно увеличение на процента на реализация (CVR), тогава проверете дали: (a) сте провели теста достатъчно дълго, за да получите значими резултати, и (b) този тест не е експериментално отклонение.

  • Създайте завладяващо съдържание за вашия уебсайт

Има три типа A/B тестване:

  • тестване на ниво артикул;
  • тестване на ниво страница (оформление);
  • тестване на потока от посетители.

Shukairi отбелязва, че тестването на ниво страница може да доведе до 7-9 процента подобрение в CVR, докато тестването на потока ви дава големи подобрения (успешните внедрявания могат да покажат 16-18 процента подобрение). Но дори и най-добрите тестери ще спрат в даден момент без завладяващ разказ. Намерете своята история за вашата целева аудитория.

  • Не приемайте, че знаете всичко за клиентите

Проучвайте клиентите чрез провеждане на качествени изследвания. Проучванията за разкриване на мотивация трябвапроведени преди провеждането на A/B тестове. Добре проектираното проучване на пазара е от съществено значение за разработването на добра хипотеза.

  • Включете всички в тестването

Уверете се, че получавате информация и данни от всеки, който се интересува от философията на CRO. Колкото повече информация, дискусии и участие получавате от различни отдели, толкова по-успешни ще бъдат вашите CRO усилия.

Shukairi отбеляза, че само 13 процента от A/B тестовете отчитат значителни повдигания, което означава, че 87 процента не го правят. Нека този факт промени начина, по който мислите за CRO. По-често вашите тестове няма да стимулират значим растеж. Това означава, че трябва да настоявате и обновявате своя провал, като използвате неуспешни A/B тестове, за да създадете проучвателни възможности.

  • Сравнете и съгласувайте целите на уебсайта си и общите KPI на бизнеса

Инструментът за тестване е ефективен само поради полезния материал, който идва от него. Следователно, когато измервате резултатите от вашите A/B тестове, може да се наложи да актуализирате отчетите си, за да сте сигурни, че измервате KPI, които най-точно отговарят на вашите бизнес цели. Използвайте данни, за да идентифицирате проблеми, които възпрепятстват растежа на бизнеса, и се уверете, че проблемите, които адресирате, имат пряко въздействие върху KPI.

Има ключова статистика, която повечето тестери използват недостатъчно: статистическа мощност. Статистическа мощност - вероятността за отхвърляне на основната (или нулева) хипотеза при тестване на статистически хипотези в случай, че конкурентната (или алтернативна) хипотеза е вярна. Колкото по-висока е мощността на статистическия тест, толкова по-малка е вероятността да се направи грешка от тип II (заключение заче всъщност ефект няма).

Тестовете с висока статистическа мощност и висок праг на доверие ще намалят шанса за фалшиво положителен резултат, така че винаги събирайте значителен размер на извадката, преди да започнете да определяте резултатите.

  • Внимавайте с неправилно представяне на резултатите от A/B теста

Изпълнявайте тестове за дълго време и не правете промени, докато тече тестът. Всички промени, които правите в тестовата среда по време на теста, ще изкривят резултатите ви. Това включва съкращаване на чакащи промени, промяна на процента на разпределение на трафика и т.н. Ако абсолютно трябва да направите промени в средата си, ще трябва да изпълните отново тестовете си и да започнете от нулата.

Общият съвет, даден от Ayat Shukairi, е „Променете начина, по който мислите за оптимизирането на процента на реализация“.