Как използваме A/B тестване, за да разберем кои реклами работят най-добре. В процеса на избор на най-добрия сайт за провеждане на експерименти тествахме и съставихме селекция от услуги за тестване. С полезни коментари. И ние споделяме с вас!

Каква функционалност беше важна за нас?

• Възможността за безплатно тестване на услугата с пълна сила. Тоест на истинска рекламна кампания с големи потоци от посетители.
• Възможност за качване на вашата версия на страницата. Това означава, че искаме да създадем собствена красива страница и да я качим в услугата, да направим промени в онлайн редактора там и да стартираме теста.
• Удобен и без бъгове онлайн редактор на страници.
• Правилно закрепване на целите за тестване. Простите цели могат да бъдат конфигурирани директно в услугите. Всъщност, според тях и за междинните цели, можете да сравните реализациите на опциите и да изберете печелившата.

Как да подредите колекцията?

• Обслужване- адресът на услугата, тук всичко е просто.
• A/B или MVT- коя от опциите за тестване поддържа услугата.

1. A/B тестване е, когато вариантите на тестваната страница се различават с една променлива (различен бутон, различно заглавие и т.н.). . Например в една версия бутонът „Поръчай“ е червен, а в другата – зелен. Като цяло страниците са идентични.
2. MVT е многовариантно тестване. Когато вариантите на страницата, която се тества, се различават по много различни начини. Първата версия е синя, с червен бутон "Поръчай" и шарка на пеперуди в заглавката на страницата. Вторият вариант е лилав, със зелен бутон "Поръчай" и шарка на еднорози. Третият вариант обикновено е черно-бял, с мигащ бутон „Поръчай“ и снимка на клиента на заден план.

Някои услуги за целеви страници поддържат само A/B тестване, някои както A/B, така и MVT.

• Тарифни планове- колко пари иска услугата за своите услуги. Какви параметри определят прохладата на тарифния план?

1. Броят на посетителите, които могат да отидат на страницата (ако има повече посетители, отколкото позволява тарифният план, експериментът се деактивира).
2. Броят на домейните, хостващи целеви страници.
3. Броят на самите експерименти, които могат да се изпълняват в услугата.
4. Броят акаунти, които могат да бъдат създадени в услугата.

Различните тарифи включват различни параметри, тук какъв вид услуга струва много.

• Шаблони\онлайн редактор- Някъде има готови шаблони, някъде има редактор, с който можете да променяте променливи.
• Демо версия- колко дни можете да използвате тази услуга безплатно.
• Коментари- нашите лични коментари за работата на всяка услуга.

Избор от услуги за A/B тестване

Рускоезични услуги

Услуга №1

• Обслужване: http://abtest.ru/
• Поддръжка за тестване: A/B
• Тарифни планове:тестването е безплатно, услугата умира и е в бета версия.
• шаблони\редактор:онлайн редактор.
• коментари:Позволява ви да качвате вашите целеви страници. Ужасно бъгав редактор.

Услуга №2

• Обслужване: http://lpgenerator.ru/
• Поддръжка за тестване: A/B.
• Тарифни планове:

1. $37 , 3500 посетители, 2 домейна, 25 страници.
2. $58 , 9000 посетители, 5 домейна, 50 страници.
3. $119 , трафикът, броят на домейните и броя на страниците не е ограничен, свързвайки вашите собствени домейни.
4. $440 , трафик, броят на домейните и страниците не е ограничен, свързване на собствени домейни, 15 клиентски акаунта, лична марка.

• Шаблони\Редактор:шаблони и онлайн редактор.
• Демо версия: 14 дни.
• коментари:Има набор от шаблони и платени и безплатни. Нямаше инструмент за качване на собствени сайтове за редактиране в редактора. Редакторът е прост, но отнема време за научаване.

Услуги на английски език

Услуга №3

• Обслужване: http://unbounce.com/
• Поддръжка за тестване: A/B.
• Тарифни планове:

1. $49 — 5000 посетители.
2. $99 - 25 000 посетители.
3. $199 — 200 000 посетители

За всички планове: неограничен брой тестове и страници във всички планове, статистика, онлайн конструктор на страници.

• Шаблони\Редактор:шаблони и онлайн конструктор(!).
• Демо версия: 30 дни.
• коментари:Редакторът е доста удобен и приятен за използване. Не намерих как да кача страницата си за редактиране. Шаблоните на страници са скучни и безинтересни. Услугата има не просто онлайн редактор на блокове, а пълноправен онлайн конструктор, с който можете да създадете прост уебсайт от нулата.

Услуга №4

• Обслужване: https://vwo.com/
• Тествана поддръжкаи аз: A/B, MVT и тестване на мобилни приложения.
• Тарифни планове:

1. $49 , 10 000 посетители.
2. $129 , 30 000 посетители.
3. Индивидуален тарифен план- около милион посетители на месец, тестване на мобилни, свързани акаунти, личен консултант.

• шаблони\редактор:онлайн редактор.
• Демо версия: 14 дни.
• коментари:услугата има красив интерфейс, но има проблеми при зареждането на страницата й.

Услуга №5

• Обслужване: http://www.convert.com/.
• Поддръжка за тестване: A/B&MVT
• Тарифни планове:

1. $9 , 2000 посетители.
2. $29 , 10 000 посетители, MVT.
3. $59 , 30 000 посетители, MVT.
4. $99 , 50 000 посетители, MVT + тестване на мобилен сайт.
5. $139-$1499 , тарифни планове за агенции. Неограничен брой проекти и тестове, онлайн поддръжка, интеграция с Google-Analytics.

• шаблони\редактор:онлайн редактор.
• Демо версия: 15 дни.
• коментари:Удобен редактор на вашите страници. Няма шаблони. Всичко е красиво, сочно и удобно, но от време на време спира да брои цели, бяха открити грешки / плитки на услугата, коригирани от техническата поддръжка, но на следващия ден пикапът на целите отново излетя по неизвестна причина.

Услуга №6

• Обслужване: http://www.clickthroo.com/
• Поддръжка за тестване: A/B.
• Тарифни планове:

1. $195 , 50 000 посетители, 5 проекта.
2. $395 , 100 000 посетители, 10 проекта.
3. $695 , 100 000 посетители, неограничен брой проекти.
4. $1195 , 250 000 посетители, неограничен брой проекти.

• шаблони\редактор:шаблони и онлайн редактор.
• Демо версия: 14 дни демо достъп.
• коментари:Правите заявка за демо достъп, като попълвате огромен формуляр и не го получавате. Добре, разбирате, но след няколко работни дни.

Услуга №7

$1295 - до 10 000 посетители на месец. Неограничен брой проекти, страници, тестове, домейни, техническа поддръжка.

шаблони\редактор:шаблони и онлайн редактор.

Демо версия:безплатно демо.

Развитието е един от основните компоненти, които са необходими за постигане на определен успех. Всеки бизнес се нуждае от развитие; без него той просто ще умре, ще загуби своята актуалност. Пазарът е много нестабилен. Всеки път се нуждае от свой специфичен продукт. Поради факта, че светът не стои на едно място, всеки бизнес трябва да се адаптира към аудиторията, да търси нови, по-добри пътища за развитие.
Разбира се, на първо място, един предприемач трябва да направи нови уникални предложения за продажба. Те от своя страна трябва да са качествени и интересни, за да привлекат голям брой клиенти. За тези, които се страхуват, че промените ще имат отрицателно въздействие върху работата, има AB тест.

AB тестването е практиката на тестване на множество промени на едно и също място, за да ви помогне да разберете кои промени ще са от най-голяма полза за проекта.

Този метод ще покаже броя на целевите действия, времето, прекарано от потребителите на страницата на вашия проект, също така ще покаже размера на приходите и степента на отпадане.

Ръководство за настройка:

Отидете в Google Analytics, категория „Поведение“, секция „Експерименти“.Нека ви дам прост пример:искате да опитате да промените червения бутон на страницата на продукта на син. За да проверите дали това е ефективно или не, трябва да създадете две версии на страницата. Дайте името на старата версия "A", на новата версия "B". Използвайте Google Експерименти, за да покажете на посетителите две различни опции, например в рамките на една седмица.

Посочете страниците за тестване. Възможно е задаване на допълнителни опции за теста.

• Задайте кода на експеримента само НАЧАЛНА СТРАНИЦА, не е необходимо да инсталирате кода на експеримента за опция B. Като има предвид, че стандартният код на Google Анализ трябва да е и на двете.

Поставяме кода в сайта или го изпращаме на програмиста

• Тестването е чудесно за много задачи, които включват промяна на външния вид на уеб страница. Можете да тествате всеки елемент на вашия сайт: различни снимки, различни заглавия, различно съдържание. Дори само преместването на различни елементи наоколо може да има драматичен ефект върху производителността. Тествайте формуляра за контакт вдясно на страницата срещу същия формуляр вляво и бихте могли да получите два пъти повече съобщения, изпратени от него. След като поставим кода, ще видим името на експеримента и състоянието „Изпълнение“:

Състояние "В ход"

• Когато щракнете върху него, ще видим цялата статистика за тестване:

Статистическите данни за експеримента ще бъдат достъпни, като щракнете върху него

• Сега, когато посещават тестваната страница, потребителите ще видят връзка във формата:

Между другото, ако искате да видите как работи експериментът и дали е конфигуриран правилно, отидете на тествания сайт от различни браузъри, Google ще покаже опция B след 3-5 опита. Така ще се уверите, че експериментът е конфигуриран правилно.

Имайте предвид, че ще видите леки разлики и колебания дори без промени в собствения ви сайт. Това се влияе от различни фактори, като сезон на годината, източници на трафик, събития, икономика, конкурентни дейности. По този начин, ако сте опитали тестване през седмицата, по-добре е да го повторите следващата седмица или веднага да настроите теста за 2 седмици.

И не забравяйте, че можете да тествате различни елементи на вашия сайт едновременно, не е нужно да завършвате един тест, преди да започнете следващия.

AB тестване— страхотна възможност да подобрите съдържанието на вашия проект!
Ако обичате синия цвят, това не означава успех на сините бутони на сайта)
Абонирайте се за полезен частен бюлетин

Дмитрий Дементи

Както знаете, в бизнеса няма статични състояния. Компанията трябва непрекъснато да се развива, за да отговори на текущата пазарна ситуация, нуждите на клиентите и собствениците. След като спре развитието, проектът веднага започва да се влошава. Например, не можете да създадете онлайн магазин, да добавите 200 продукта към сайта и да правите месечна печалба от 100 хиляди рубли. За да не спадне поне рентабилността на проекта, предприемачът трябва непрекъснато да разширява асортимента, да увеличава обхвата на аудиторията чрез реклама и публикуване на полезно съдържание, да подобрява поведенческите показатели на сайта и процента на конверсия.

Един от инструментите за разработване на уеб проекти е A/B тестването. Този метод ви позволява да измервате предпочитанията на аудиторията и да влияете на ключови показатели за ефективност на сайта, включително реализации, време, прекарано на страницата, средна стойност на поръчката, степен на отпадане и други показатели. В тази статия ще научите как правилно да провеждате A/B тестване.

Какво е A/B тестване

A/B тестването е маркетингова техника, използвана за оценка и управление на ефективността на уеб страница. Този метод се нарича още split testing (от англ. split testing – разделно тестване).

A/B тестването ви позволява да оцените количествената производителност на две версии на уеб страница, както и да ги сравните една с друга. Сплит тестването също помага да се оцени ефективността на промените в страницата, като добавяне на нови елементи на дизайна или призиви за действие. Практическият смисъл на използването на този метод е да се намерят и внедрят компоненти на страницата, които повишават нейната ефективност. Обърнете внимание отново, A/B тестването е приложен маркетингов метод, с който можете да повлияете на конверсията, да стимулирате продажбите и да увеличите рентабилността на уеб проект.

Сплит тестването започва с оценка на показателите на съществуваща уеб страница (A, контролна страница) и търсене на начини за подобряването й. Например, създали сте онлайн магазин. Представете си целевата страница на този магазин с 2% процент на реализация. Маркетологът иска да увеличи тази цифра до 4%, така че планира промени, които ще помогнат за решаването на този проблем.

Да кажем, че специалист смята, че промяната на цвета на бутон за преобразуване от неутрално синьо към агресивно червено ще го направи по-видим. За да види дали това води до повече продажби и повече реализации, търговецът създава подобрена версия на уеб страницата (B, нова страница).

С помощта на инструменти за разделно тестване, експертът на случаен принцип разделя трафика между страници А и Б на две приблизително равни части. Относително казано, половината от посетителите попадат на страница А, а другата половина на страница Б. В същото време търговецът има предвид източниците на трафик. За да се гарантира валидността и обективността на тестването, е необходимо да се насочат към страници А и Б 50% от посетителите, дошли на сайта от социални мрежи, естествено търсене, контекстна реклама и др.

След като събере достатъчно информация, търговецът оценява резултатите от теста. Както беше посочено по-горе, процентът на реализация на страница А е 2%. Ако беше 2,5% на страница B, тогава промяната на бутона за преобразуване от син в червен наистина увеличи ефективността на приземяването. Коефициентът на конверсия обаче не достигна желаните 4%. Ето защо търговецът допълнително търси начини да подобри страницата чрез A/B тестване. В този случай страницата с червения бутон за преобразуване ще действа като контролна страница.

Какво да тествате

Както бе отбелязано по-горе, разделното тестване е приложен метод, който ви позволява да влияете на различни показатели на уебсайта. Следователно изборът на обекта на тестване зависи от целите и задачите, които маркетологът си поставя.

Например, ако степента на отпадане на целевата страница е 99% и повечето посетители напускат целевата страница в рамките на 2-3 секунди след приземяването, струва си да помислите за промяна на визуалните компоненти на страницата. С помощта на A/B тест маркетологът може да намери най-добрата опция за оформление на страницата, да избере атрактивна цветова схема и изображения и да използва четим шрифт. И ако маркетологът е изправен пред задачата да увеличи броя на абонаментите, той може да опита да промени съответната форма за преобразуване. Разделният тест ще помогне на специалист да избере оптималния цвят на бутона, най-добрата текстова опция, броя на полетата във формуляра за абонамент или неговото местоположение.

Най-често търговците тестват следните елементи на уеб страници:

• Текстът и външният вид на бутоните за преобразуване, както и тяхното местоположение.
• Заглавие и описание на продукта.
• Размери, външен вид и местоположение на формулярите за преобразуване.
• Оформление и дизайн на страницата.
• Цената на продукта и други елементи от бизнес предложението.
• Изображения на продукти и други илюстрации.
• Количеството текст на страница.

Какви инструменти за разделно тестване да използвате

За да извърши A/B тестване, търговецът трябва да използва една от специализираните услуги. Най-популярният от тях е Google Content Experiments, достъпен за потребителите на системата Анализ. До средата на 2012 г. този инструмент се наричаше Google Website Optimizer. С него можете да тествате различни елементи на страницата, включително заглавия, шрифтове, бутони и формуляри за преобразуване, изображения и др. Услугата Content Experiments остава безплатна, което е едно от основните й предимства. Недостатъците му включват необходимостта от работа с HTML код.

Можете също да използвате следните руски и чуждестранни инструменти за разделно тестване:

• Optimizes е най-популярната платена услуга за A/B тестване в интернет. Цената за използването му варира от $19 до $399 в зависимост от вида на абонамента. Предимствата на тази услуга включват възможността за създаване на експерименти във визуален интерфейс, което спестява маркетолога от необходимостта да работи с HTML кода на тестваните страници.
• RealRoi.ru е друга домашна услуга, която ви позволява да провеждате A / B тестване. Сред основните предимства може да се отбележи, че е безплатен и много лесен за използване. Можете да видите как работи подробно в следното видео:
• Visual Website Optimizer е платена услуга, която ви позволява да тествате различни елементи на страница. За да използва този инструмент, търговецът трябва да е запознат с HTML кода. Цените на абонамента варират от $49 до $249.
• Unbounce е услуга, предназначена за създаване и оптимизиране на целеви страници. По-специално, ви позволява да извършвате A / B тестване. Цената на използването му е от 50 до 500 долара на месец. Домашен аналог - LPGгенератор. Тази услуга ви позволява да тествате само страниците, създадени с нея.

Как да тествате A/B с експерименти със съдържание

Услугата Google Analytics Experiments ви позволява да тествате едновременно ефективността на пет варианта на страница. Използвайки го, маркетолозите могат да извършват A/B/N тестване, което се различава от стандартните A/B експерименти по възможността за наблюдение на ефективността на няколко нови страници, всяка от които може да има няколко нови елемента.

Маркетологът има способността самостоятелно да определя дела на трафика, участващ в тестването. Минималната продължителност на теста е две седмици, максималната е ограничена до три месеца. Специалистът може да получава данни за резултатите от теста по електронна поща.

За да разделите теста с експерименти със съдържание, изпълнете следните стъпки:

1. Влезте в акаунта си в Google Analytics, изберете сайта, на който искате да тествате ефективността. След това изберете менюто "Поведение - Експерименти".

1. Въведете URL адреса на страницата, която ще тествате, в съответния формуляр и щракнете върху бутона „Стартиране на експеримента“.

1. Изберете име и цел за тестване. Определете процента на трафика, участващ в експеримента. Решете дали искате да получавате известия по имейл за напредъка на теста. Щракнете върху бутона "Напред", след като изберете необходимите опции.

1. Изберете вариантите на страницата, която да бъде тествана. Добавете ги към съответните формуляри и щракнете върху Напред.

1. Създайте код за експеримент. Ако не знаете как да го вградите в страницата, изберете опцията „Изпращане на код до уеб администратора“. Ако не се потите при споменаване на HTML код, изберете опцията „Вмъкване на код ръчно“.

Изберете „Вмъкване на код ръчно“, ако знаете как да боравите с HTML код

1. Копирайте кода, отбелязан на предишната илюстрация, и го поставете в изходния код на контролната страница. Кодът трябва да се вмъкне директно след етикета . След като завършите това действие, щракнете върху бутона „Запазване на промените“.

1. Проверете за тестовия код на контролната страница и щракнете върху бутона „Стартиране на експеримента“. Имайте предвид, че кодът трябва да бъде добавен само към контролната страница.

Ще можете да оцените първите резултати от теста няколко дни след началото на експеримента. За да следите резултатите от теста, изберете подходящия експеримент от списъка и отидете на страницата с отчети.

Идеи, които определено трябва да бъдат тествани с разделно тестване

Както бе отбелязано по-горе, A/B тестването помага за повишаване на ефективността на уеб страниците. За да може този маркетингов метод да донесе резултати, търговецът трябва да генерира идеи, които могат да повлияят положително на определени показатели на сайта. Не можете просто да вземете промени от тавана, да ги приложите и да тествате ефективността. Например, показателите на сайта е малко вероятно да се променят, ако просто решите да промените фона на страницата от син на светлозелен.

Маркетологът трябва да види начини за подобряване на страниците и да разбере защо те трябва да работят. Разделеното тестване просто помага да се тестват предположенията на специалиста. Всеки търговец обаче понякога попада в ситуация, в която всички идеи са тествани, но желаният резултат не е постигнат. Ако се окажете в тази ситуация, опитайте да приложите следните промени и вижте дали работят:

• Премахнете допълнителните полета от формуляра за преобразуване. Може би вашите потенциални абонати не искат да разкриват паспортните си данни.
• Добавете думите „безплатно“ или безплатно към страницата за преобразуване. Разбира се, публиката знае, че абонаментът за бюлетина е безплатен. Но понякога думата безплатно прави истински чудеса, защото безплатният оцет е сладък.
• Публикувайте видеоклип на вашата целева страница. Това обикновено има положителен ефект върху редица показатели, включително степен на отпадане, процент на реализация и време на страницата.
• Увеличете периода, през който потребителите могат да тестват вашия продукт безплатно. Това е прост и ефективен начин за увеличаване на реализациите за компании, продаващи софтуер и уеб услуги.
• Експериментирайте с цвета на бутоните за преобразуване. В някои случаи агресивните червени бутони работят добре. Въпреки това, понякога те дразнят потребителите. Използвайте A/B тест, за да намерите най-ефективния цвят на бутоните за вашия уебсайт.
• Обещайте бонуси на първите 10 или 100 купувачи (абонати). Не бързайте да премахвате това обещание дори след края на промоцията. Много потребители не очакват да бъдат сред късметлиите, но все пак подсъзнателно реагират на изгодна оферта.

Как и защо да тестваме различни варианти на страници

Сплит тестването ви позволява да оцените ефективността на промените в уеб страниците. Този маркетингов метод има приложна стойност. Тя ви позволява почти постоянно да подобрявате страниците чрез подобряване на различни показатели.

За да тествате тази или онази промяна, трябва да създадете нова версия на страницата и да запазите старата. И двете опции трябва да имат различни URL адреси. След това трябва да използвате една от услугите за провеждане на разделени тестове, например Content Experiments. Оценката на резултатите от теста може да се извърши най-малко две седмици след началото на експеримента.

Смятате ли, че си струва да направите A/B тестване? В какви случаи този маркетингов метод остава загуба на време?

как-проводит-а-б-тестиране

(split testing, A / B тестване, Split testing) на сайта е маркетингов метод, който се състои в наблюдение на контролните (A) и тестовите (B) групи елементи - страници на сайта, които се различават само по някои показатели, за да увеличаване на конверсията на сайта. Страниците се показват на посетителите последователно в равни дялове и след достигане на необходимия брой импресии, въз основа на получените данни се определя най-голямата опция за реализация.

Етапи на A/B тестване

Като цяло целият процес на A/B тестване може да бъде обобщен в 5 стъпки:

Етап 1.Поставяне на цели (бизнес цели, реализация, цели на уебсайта)

Стъпка 2Фиксиране на първоначалните статистически данни

Стъпка 3Тестова настройка и процес

Стъпка 4Оценка на резултатите и прилагане на най-добрия вариант

Стъпка 5Повторете експеримента на други страници или с други елементи, ако е необходимо

Продължителност на теста

Продължителността на експеримента зависи от наличния трафик в сайта. Процент на конверсия, както и разлики в тестваните опции. Много услуги автоматично определят продължителността. Средно 100 действия за реализация в сайта са достатъчни и отнемат около 2-4 седмици.

Страници за тестване

За тестване можете да изберете всяка страница от сайта, която е важна по отношение на конверсията. Най-често това е главната страница, страниците за регистрация / оторизация, страниците с фуния за продажби. В този случай е по-добре да обърнете внимание на следните точки:

1. Най-посещаваните страници на сайта
2. Страници с висока посещаемост
3. Страници за отказ

Първият е необходим за чистотата на експеримента, вторият и третият за идентифициране на слабостите на сайта.

Най-често за тестване се избират бутони, текст, слоган-призив за действие и оформлението на страницата като цяло. За да изберете елемент, можете да използвате следния алгоритъм на действия:

• Излага се хипотеза за поведението на посетителя
• Предлага се решение за промяна на елементите (по-добре е да вземете 1-2, не повече)

1. Добавете думата "Безплатно"
2. Изпратете обяснително видео
3. Залепете бутона за регистрация в горната част на страницата
4. Намалете броя на полетата в приложението
5. Добавете брояч за специални оферти
6. Добавете безплатна пробна версия
7. Променете цветовете на бутоните или текста върху тях

Автоматизация на тестовете

Има няколко платени и безплатни инструмента за автоматизиране на процеса на тестване с различен набор от функции. Може да се види голям списък. Най-популярните могат да бъдат експерименти в Google Analytics. Той е безплатен, русифициран, лесен за научаване и ако на сайта е инсталиран брояч, тогава не е нужно да чакате събирането на първоначални данни и можете да започнете експеримента само с няколко щраквания.

A/B тестване с Google Analytics

Помислете за процеса на създаване на тест в Google Analytics. За да направите това, отидете в раздела Отчети->Поведение->Експерименти. Въведете URL адреса на страницата, която тествате, и щракнете върху „Стартиране на експеримента“.

Следващата стъпка е да попълните полетата: името на експеримента, целта (можете да изберете от конфигурираните цели за сайта), покритието на посетителите на сайта за експеримента (по-добре е да зададете 100%).

Във втората стъпка ще трябва да посочите адресите на главната (контролна) страница и нейните варианти.

Ако всичко е направено правилно, системата ще даде зелена светлина за започване на тестване.

Резултатът от експеримента е много визуален и може да изглежда така:

Противно на общоприетото схващане (все пак се създават дублиращи се страници), подобно тестване не оказва негативно влияние върху позицията на сайта. Достатъчно е да напишете rel="canonical" на алтернативни страници.

Важно за A/B тестването

1. Тестовите версии на страниците не трябва да се различават с повече от 2 елемента
2. Трафикът между страниците трябва да бъде равномерно разпределен
3. Когато правите настройки, изберете нови посетители на сайта
4. Резултатите могат да бъдат оценени само от широка извадка, за предпочитане поне 1000 души.
5. Оценете резултатите едновременно
6. Не трябва да се доверявате на себе си, не всички потребители мислят така, както вие, така че предпочитаната от вас опция може да не е печеливша.
7. Резултатите от A / B тестване може не винаги да доведат до желаните резултати при увеличаване на реализациите. Така че трябва да експериментирате с други елементи.

Процесът на вземане на решение за проектиране винаги е бил популярна тема за обсъждане. Защо някои дизайнери правят избор, който други не биха, и защо някои дизайни изглежда работят по-добре от други?

От академични изследвания до скици и анекдоти, светът на дизайна е страстен за процеса. Най-дълго се забави шегата за Google и неговите 41 нюанса синьо.

Опитвайки се да определи кой от двата нюанса на синьото да използва за текст на връзката, Google тества не само основните 2, но и 39 между тях. Историята описва приблизително минутно решение, но подчертава бързо нарастващия подход към вземането на решения. Тя се основава на експерименти, алтернативи и, най-важното, данни.

"A/B тестването може да осигури стойност, но не трябва да идва за сметка на други области на дизайна."

Но защо Google тества 41 нюанса на синьото и как този подход може да помогне на вас или вашата организация? В тази статия ще разгледаме A/B тестване (или многовариантно тестване): какво представлява, защо трябва да се използва и неговите ограничения.

A/B и многовариантно тестване накратко

Накратко, A/B тестването е метод за сравняване на 2 версии на нещо една срещу друга, за да се определи коя версия е по-добра. Предмет на тестване може да бъде изображение, бутон, заглавие и т.н.

Многовариантното тестване е разширение на A/B тестването, при което се сравняват повече от 2 версии и (често) се включват повече вариации. Това ще ви позволи да изпитате няколко елемента наведнъж и как те взаимодействат.

За простота, останалата част от тази статия ще обхваща само A/B тестване, но за многовариантното тестване принципите остават същите.

Защо A/B тестване

Целта на A/B тестването е да ви позволи да правите постепенни подобрения на вашия уебсайт или приложение. Като контрастирате вашето приложение или уебсайт с един или повече варианти, можете постоянно да подобрявате дизайна си, да получавате валидиране от реални потребители.

При A/B тестването всеки тест генерира нови данни за това какво работи и какво не. Това, което работи, може да бъде включено в уебсайт или приложение и да образува нов и подобрен дизайн.

A/B тестване в реалния свят

За да разберете как може да се използва A/B тестването и какво може да направи за вас, можете да разгледате стотици примери на уебсайтове като Who Test Won. Можете също да разгледате тези популярни проучвания:

Основен процес на A/B тестване

Стъпка 1: Къде да тествате

За провеждане на A/B тестване ще ви е необходим уебсайт или приложение. (A/B тестването насърчава постепенното подобряване на съществуващ продукт и не е подходящо за тестване на редизайн или нови продукти и услуги.)

Трябва да решите коя област от вашия сайт или приложение искате да проучите и в идеалния случай да се опитате да подобрите. Областта на обучение може да бъде избрана въз основа на различни източници:

• Анализ:дали вашите анализи показват, че конкретна страница или екран дразнят потребителите. Всички ваши потребители излизат ли от една и съща страница?
• Тестване на използваемост:Тестването на използваемостта разкри ли проблемна област или взаимодействие? Тествахте ли ново решение и сега искате да го тествате в голям мащаб?
• Интуиция или лична неприязън:Вярвате ли, че нещо може да бъде подобрено и искате да го тествате с данни? Има ли нещо, което винаги сте не харесвали и къде искате да приложите алтернативи?

Най-често тези три източника определят предмета на тестване. Въоръжени с това знание, можете да преминете към стъпка 2.

Стъпка 2: Какво да тествате (и какво да измервате)

Един от ключовите аспекти на A/B тестването е, че променяте само една променлива в даден момент. На пръв поглед това изглежда като проста задача, но можете тихо да прекрачите границата и да добавите още променливи.

Например, ако искате да тествате бутон, можете да опитате да промените неговия текст:

Или променете цвета:

Но ако комбинирате и двете опции и тествате бутона с различен текст и различен цвят, ще намалите драстично стойността на теста.

Сравнявайки тези два бутона един с друг, няма да можете да посочите защо дават различни резултати: какъв вид повишаване на производителността донесе промяната на текста или промяната на цвета.

„За да се проведе ценно A/B тестване, е изключително важно да се ограничат промените до една променлива.“

Така че, за да се проведе ценно A/B тестване, е от съществено значение да се ограничат промените до една променлива. Ако искате да тествате няколко променливи едновременно, трябва да направите многовариантен тест, където можете да тествате тези множество променливи и да получите по-добра представа какъв ефект е имала всяка промяна.

Който и тест да изберете да проведете, трябва също да подчертаете ключовия показател, който ще проследявате. В случай на бутони най-вероятно ще измерите броя на хората, които щракват върху тях. Когато става въпрос за промени в заглавието, вероятно ще гледате степента на отпадане или времето, прекарано в сайта.

Това, което проследявате, става това, което тествате. Просто се уверете, че знаете какво се опитвате да подобрите, преди да започнете A/B тестване.

Стъпка 3: Как да тествате

След като вече сте разбрали какво и къде ще тествате, нека да поговорим как ще го направим. Има много приложения за A/B тестване. Ето най-популярните:

• Google Analytics
• Оптимизирано
• Визуален оптимизатор на уебсайтове
• A/B Вкусно

Тези (и други) предлагат основен процес на A/B тестване, но се различават по функции. Вашият избор ще зависи от вашите умения за разработчик, гъвкавостта, от която се нуждаете, или просто от цената.

Много големи организации често използват повече от един инструмент, в зависимост от необходимото количество работа или личните предпочитания, така че изборът на правилния инструмент ще зависи от вашите лични обстоятелства.

Стъпка 4: Колко голям е тестът

И така, вие сте се договорили за местоположението на теста, променливите, които ще оптимизирате, и как технически ще приложите всичко това. Последният въпрос, на който остава да се отговори, е: колко потребители ще бъдат тествани?

Някои инструменти (като Google Analytics) не ви позволяват да определите кой ще види оригиналната версия и кой ще види алтернативната версия или дори колко дълго ще продължи тестът. За начинаещ това може да бъде полезна функция, тъй като опростява целия процес.

"A/B тестването не може да ви каже дали решавате правилния проблем."

Ако искате сами да зададете тези променливи, тогава си струва да помислите колко дълго ще продължи тестът и какъв процент от потребителя ще види оригиналната версия и какъв процент от алтернативата.

Ако работите в организация, която не поема рискове, покажете алтернативата само на 5-10% от потребителите, а останалите разделете 50:50. В крайна сметка изборът ще зависи от вашите амбиции и нивото и вида на трафика, който вашият уебсайт или приложение получава.

Когато отговаряте на въпроса как да разделите теста и колко време трябва да отнеме, задайте си въпроса: колко голям трябва да бъде тестът, за да мога да съм сигурен, че резултатите са верни?

Това се обозначава с техническия термин "статистическа значимост" или "статистическа значимост". Вашата цел е да създадете тест с достатъчно голям размер на извадката, така че да можете да кажете с над 95% сигурност „Тяхната промяна причини този резултат“.

Как ще разделите теста зависи от вас, но колко време ще отнеме може да зависи от количеството трафик, който уебсайтът или приложението получава. Не се притеснявайте, колкото и плашещо да звучи, има много онлайн калкулатори, които да ви помогнат да разберете дали резултатите ви са статистически значими или трябва да увеличите времето си за тестване.

• Калкулатор на значимостта на Visual Website Optimizer
• Kissmetrics калкулатор на стойност

Стъпка 5: Анализирайте и решете

Ето резултатите! Изпълнихте теста, уверихте се, че е статистически значим и сега имате числата.

Като се има предвид цялата свършена работа, броя на участващите хора, всеки очаква да види нещо като този резултат:

Но по-често това, което ще получите, е следното:

Не се разочаровайте (и не се отчайвайте) - A/B тестването прави постепенни подобрения. И въпреки че са възможни големи промени, всяко подобрение е чудесно начало и ви извежда на прав път.

Дори ако данните показват, че не сте направили никакви подобрения, сега сте в по-силна позиция, защото знаете кое работи и кое не.

„Данните не се равняват на разбиране“

Ако тестът е бил успешен, следващите стъпки зависят от вас. Можете да изпратите нова версия възможно най-скоро. Или, ако сте направили малък тест, можете да направите още един тест с много хора.

Какво ще направите с получената информация в крайна сметка зависи от вас!

Разбиране на ограниченията на A/B тестването

Колкото и мощно да е A/B тестването, важно е също така да се разберат неговите недостатъци и ограничения. Въпреки нарастващата си популярност, A/B тестването не е панацея, която може да спаси всяка компания, а по-скоро друг инструмент във вашия арсенал.

Когато обмисляте използването на A/B тестване, важно е да разберете какво не може да направи:

• Кажи, защо. A/B тестването е фантастичен инструмент, който ви помага да разберете какво работи и кое не. Не може обаче да ви каже защо. За да направите това, трябва да проведете висококачествено потребителско проучване. Много е важно да разберете, че данните не са равни на разбиране.
• Помогнете ви да тествате редизайна на приложението или уебсайта си. Докато на теория бихте могли да сравните целия дизайн на страницата с алтернативата и да получите данни за успеха, няма да можете да разберете какво точно в дизайна причинява разликата. Докато не направите потребителско проучване, резултатът ще бъде безсмислен.
• Кажете ви дали решавате правилния проблем.Поради постепенното естество на A/B тестването, то може да бъде мощен инструмент за непрекъснато подобряване на вашия уебсайт или приложение. A/B тестването не може да ви каже дали решавате правилния проблем. Можете да фокусирате тестовете си върху началната страница и да видите подобрения, но друга част от сайта може да е проблемът. Това е концепция, известна като локален максимум.

Какво може да направи A/B тестването за вас?

Ако всичко това е събудило апетита ви за A/B тестване, тогава вероятно вече имате необходимата информация, за да започнете. Някои малки детайли може да се различават или вашата организация може да има специфични изисквания, но общите принципи остават същите.

A/B тестването, когато се използва правилно, може да бъде чудесен инструмент. Това може да позволи на вашата компания постепенно да се подобрява и да увеличава успеха ви.

Но е важно да се разбере, че A/B тестването е само един инструмент в много по-големия арсенал на всеки дизайнер. В писмото си за оставка Дъг Боуман, бивш ръководител на визуалния дизайн в Google, също припомни анекдота за 41-те нюанса на синьото на Google. По този начин, въпреки че A/B тестването може да осигури голяма стойност, то не трябва да бъде за сметка на други области на дизайна.