Jak korzystamy z testów A/B, aby dowiedzieć się, które reklamy działają najlepiej. W procesie wyboru najlepszej platformy do przeprowadzania eksperymentów przetestowaliśmy i skompilowaliśmy wybór usług do testów. Z pomocnymi komentarzami. I podzielimy się z Tobą!

Jaka funkcjonalność była dla nas ważna?

• Możliwość bezpłatnego przetestowania usługi w pełnej mocy. Oznacza to, że w prawdziwej kampanii reklamowej z dużym przepływem odwiedzających.
• Możliwość wgrania swojej wersji strony. Oznacza to, że chcemy stworzyć własną piękną stronę i wgrać ją do serwisu, wprowadzić tam zmiany w edytorze online i uruchomić test.
• Wygodny i pozbawiony błędów edytor stron internetowych.
• Prawidłowe podpięcie celów testowych. Proste cele można konfigurować bezpośrednio w usługach. Właściwie według nich i do celów pośrednich można porównać konwersje opcji i wybrać zwycięską.

Jak uporządkować kolekcję?

• Usługa- adres usługi, tutaj wszystko jest proste.
• A/B lub MVT- która z opcji testowania obsługuje usługę.

1. Testy A/B mają miejsce, gdy warianty testowanej strony różnią się jedną zmienną (inny przycisk, inny tytuł itp.). . Na przykład w jednej wersji przycisk „Zamów” jest czerwony, w drugiej zielony. Ogólnie strony są identyczne.
2. MVT to testowanie wielowymiarowe. Gdy odmiany testowanej strony różnią się na wiele różnych sposobów. Pierwsza wersja jest niebieska, z czerwonym przyciskiem „Zamów” i wzorem motyli w nagłówku strony. Druga opcja jest fioletowa, z zielonym przyciskiem „Zamów” i wzorem jednorożców. Trzecia opcja jest ogólnie czarno-biała, z migającym przyciskiem „Zamów” i zdjęciem klienta w tle.

Niektóre usługi stron docelowych obsługują tylko testy A/B, niektóre zarówno A/B, jak i MVT.

• Plany taryfowe- ile pieniędzy usługa chce za swoje usługi. Jakie parametry określają chłód planu taryfowego?

1. Liczba odwiedzających, którzy mogą przejść na stronę (jeśli jest więcej odwiedzających, niż pozwala na to plan taryfowy, eksperyment jest wyłączony).
2. Liczba domen hostujących strony docelowe.
3. Liczba samych eksperymentów, które można uruchomić w usłudze.
4. Liczba kont, które można utworzyć w serwisie.

Różne taryfy zawierają różne parametry, tutaj jaka usługa jest dużo warta.

• Szablony\edytor online- Gdzieś są gotowe szablony, gdzieś jest edytor, za pomocą którego można zmieniać zmienne.
• Wersja demo- ile dni możesz bezpłatnie korzystać z tej usługi.
• Uwagi- nasze osobiste komentarze na temat pracy każdego serwisu.

Wybór usług do testów A/B

Usługi rosyjskojęzyczne

Usługa nr 1

• Usługa: http://abtest.ru/
• Wsparcie testowe: A/B
• Plany taryfowe: testowanie jest bezpłatne, usługa umiera i jest w fazie beta.
• Szablony\redaktor: edytor online.
• Uwagi: Umożliwia przesyłanie stron docelowych. Strasznie zapluskwiony edytor.

Usługa nr 2

• Usługa: http://lpgenerator.ru/
• Wsparcie testowe: A/B.
• Plany taryfowe:

1. $37 , 3500 odwiedzających, 2 domeny, 25 stron.
2. $58 , 9000 odwiedzających, 5 domen, 50 stron.
3. $119 , ruch, liczba domen i liczba stron nie jest ograniczona, łącząc własne domeny.
4. $440 , ruch, liczba domen i stron nie jest ograniczona, łączenie własnych domen, 15 kont klientów, branding osobisty.

• Szablony\edytor: szablony i edytor online.
• Wersja demo: 14 dni.
• Uwagi: Dostępny jest zestaw szablonów oraz płatny i bezpłatny. Nie było narzędzia do przesyłania własnych witryn do edycji w edytorze. Edytor jest prosty, ale jego nauczenie się wymaga czasu.

Usługi w języku angielskim

Usługa #3

• Usługa: http://unbounce.com/
• Wsparcie testowe: A/B.
• Plany taryfowe:

1. $49 — 5000 odwiedzających.
2. $99 - 25 000 odwiedzających.
3. $199 — 200 000 odwiedzających

Na wszystkich planach: nieograniczona liczba testów i stron we wszystkich planach, statystyki, kreator stron internetowych.

• Szablony\edytor: szablony i konstruktor online(!).
• Wersja demo: 30 dni.
• Uwagi: Edytor jest dość wygodny i przyjemny w obsłudze. Nie udało mi się znaleźć sposobu na przesłanie strony do edycji. Szablony stron są nudne i nieciekawe. Usługa ma nie tylko edytor bloków online, ale pełnoprawny konstruktor online, za pomocą którego możesz stworzyć prostą stronę internetową od podstaw.

Usługa nr 4

• Usługa: https://vwo.com/
• Testowane wsparciei ja: Testy A/B, MVT i aplikacji mobilnych.
• Plany taryfowe:

1. $49 , 10 000 odwiedzających.
2. $129 , 30 000 odwiedzających.
3. Indywidualny plan taryfowy- około miliona odwiedzających miesięcznie, testowanie na urządzeniach mobilnych, połączonych kontach, osobisty konsultant.

• Szablony\redaktor: edytor online.
• Wersja demo: 14 dni.
• Uwagi: usługa ma piękny interfejs, ale występują problemy podczas ładowania jej strony.

Usługa nr 5

• Usługa: http://www.convert.com/.
• Wsparcie testowe: A/B&MVT
• Plany taryfowe:

1. $9 , 2000 zwiedzających.
2. $29 , 10 000 odwiedzających, MVT.
3. $59 , 30 000 odwiedzających, MVT.
4. $99 , 50 000 odwiedzających, MVT + testowanie witryn mobilnych.
5. $139-$1499 , plany taryfowe dla agencji. Nieograniczona ilość projektów i testów, wsparcie online, integracja z Google-Analytics.

• Szablony\redaktor: edytor online.
• Wersja demo: 15 dni.
• Uwagi: Wygodny edytor Twoich stron. Brak szablonów. Wszystko pięknie, soczyście i wygodnie, ale co jakiś czas przestaje liczyć cele, wykryto błędy / ławice serwisu, poprawione przez wsparcie techniczne, ale następnego dnia odbiór celów ponownie odleciał z niewiadomego powodu.

Usługa #6

• Usługa: http://www.clickthroo.com/
• Wsparcie testowe: A/B.
• Plany taryfowe:

1. $195 , 50 000 odwiedzających, 5 projektów.
2. $395 , 100 000 odwiedzających, 10 projektów.
3. $695 , 100 000 odwiedzających, nieograniczona liczba projektów.
4. $1195 , 250 000 odwiedzających, nieograniczona liczba projektów.

• Szablony\redaktor: szablony i edytor online.
• Wersja demo: 14-dniowy dostęp do wersji demo.
• Uwagi: Prośbę o dostęp do wersji demo składasz wypełniając ogromny formularz i nie dostajesz go. OK, rozumiesz, ale po kilku dniach roboczych.

Usługa nr 7

1295 USD - do 10 000 odwiedzających miesięcznie. Nieograniczona ilość projektów, stron, testów, domen, wsparcie techniczne.

Szablony\redaktor: szablony i edytor online.

Wersja demo:darmowe demo.

Rozwój jest jednym z głównych elementów niezbędnych do osiągnięcia pewnego sukcesu. Każdy biznes potrzebuje rozwoju, bez niego po prostu umrze, straci na znaczeniu. Rynek jest bardzo zmienny. Za każdym razem potrzebuje swojego specyficznego produktu. W związku z tym, że świat nie stoi w miejscu, każdy biznes musi dostosować się do odbiorców, szukać nowych, lepszych dróg rozwoju.
Oczywiście przede wszystkim przedsiębiorca musi przedstawić nowe, unikalne propozycje sprzedaży. Te z kolei muszą być wysokiej jakości i interesujące, aby przyciągnąć dużą liczbę klientów. Dla tych, którzy boją się, że zmiany wpłyną negatywnie na pracę, jest test AB.

Testowanie AB to praktyka testowania wielu zmian w tej samej lokalizacji, aby pomóc Ci zrozumieć, które zmiany przyniosą największe korzyści projektowi.

Ta metoda pokaże liczbę ukierunkowanych działań, czas spędzony przez użytkowników na stronie twojego projektu, pokaże również kwotę przychodów i współczynnik odrzuceń.

Instrukcja konfiguracji:

Przejdź do Google Analytics, kategoria „Zachowanie”, sekcja „Eksperymenty”.Podam prosty przykład: chcesz spróbować zmienić czerwony przycisk na stronie produktu na niebieski. Aby sprawdzić, czy jest to skuteczne, czy nie, musisz utworzyć dwie wersje strony. Podaj nazwę starej wersji „A”, nowej wersji „B”. Użyj Eksperymentów Google, aby pokazać odwiedzającym dwie różne opcje, na przykład w ciągu tygodnia.

Określ strony do testowania. Istnieje możliwość określenia dodatkowych opcji testu.

• Ustaw kod eksperymentu na tylko STRONA GŁÓWNA, nie musisz instalować kodu eksperymentu dla opcji B. Podczas gdy standardowy kod Google Analytics powinien znajdować się na obu.

Kod wklejamy na stronę lub wysyłamy do programisty

• Testowanie świetnie sprawdza się w przypadku wielu zadań, które wymagają zmiany wyglądu strony internetowej. Możesz przetestować dowolny element na swojej stronie: różne zdjęcia, różne nagłówki, różne treści. Nawet samo przeniesienie różnych elementów może mieć dramatyczny wpływ na wydajność. Przetestuj formularz kontaktowy po prawej stronie z tym samym formularzem po lewej, a możesz otrzymać z niego dwa razy więcej wiadomości. Po umieszczeniu kodu zobaczymy nazwę eksperymentu i status „Uruchomiony”:

Status „W toku”

• Po kliknięciu zobaczymy wszystkie statystyki testów:

Statystyki eksperymentu będą dostępne po kliknięciu

• Teraz, odwiedzając testowaną stronę, użytkownicy zobaczą link w formacie:

Przy okazji, jeśli chcesz zobaczyć, jak eksperyment działa i czy jest poprawnie skonfigurowany, wejdź na testowaną stronę z różnych przeglądarek, po 3-5 próbach Google pokaże opcję B. W ten sposób upewnisz się, że eksperyment jest poprawnie skonfigurowany.

Pamiętaj, że nawet bez zmian we własnej witrynie zobaczysz niewielkie różnice i wahania. Wpływają na to różne czynniki, takie jak pora roku, źródła ruchu, wydarzenia, ekonomia, działania konkurencji. Tak więc, jeśli próbowałeś testować w ciągu tygodnia, lepiej powtórzyć je w następnym tygodniu lub od razu ustawić test na 2 tygodnie.

I nie zapominaj, że możesz testować różne elementy swojej witryny w tym samym czasie, nie musisz kończyć jednego testu przed rozpoczęciem kolejnego.

Testowanie AB— świetna okazja do ulepszenia treści swojego projektu!
Jeśli kochasz niebieski kolor, nie oznacza to sukcesu niebieskich przycisków na stronie)
Zapisz się do przydatnego prywatnego biuletynu

Dmitrij Demencja

Jak wiadomo, w biznesie nie ma statycznych stanów. Firma musi stale się rozwijać, aby sprostać aktualnej sytuacji rynkowej, potrzebom klientów i właścicieli. Po zatrzymaniu rozwoju projekt natychmiast zaczyna się degradować. Na przykład nie możesz stworzyć sklepu internetowego, dodać 200 produktów do strony i zarabiać miesięcznie 100 tysięcy rubli. Aby opłacalność projektu przynajmniej nie spadła, przedsiębiorca musi stale poszerzać asortyment, zwiększać zasięg odbiorców poprzez reklamę i publikowanie przydatnych treści, poprawiać wskaźniki behawioralne i współczynnik konwersji witryny.

Jednym z narzędzi do tworzenia projektów internetowych jest testowanie A/B. Ta metoda pozwala mierzyć preferencje odbiorców i wpływać na kluczowe wskaźniki wydajności witryny, w tym konwersje, czas spędzony na stronie, średnią wartość zamówienia, współczynnik odrzuceń i inne dane. Z tego artykułu dowiesz się, jak prawidłowo przeprowadzić testy A/B.

Czym są testy A/B

Testy A/B to technika marketingowa używana do oceny i zarządzania wydajnością strony internetowej. Ta metoda jest również nazywana testami dzielonymi (od angielskiego split testing - oddzielne testowanie).

Testy A/B umożliwiają ocenę ilościowej wydajności dwóch wersji strony internetowej, a także porównanie ich ze sobą. Testy podzielone pomagają również ocenić skuteczność zmian na stronie, takich jak dodawanie nowych elementów projektu lub wezwania do działania. Praktycznym znaczeniem stosowania tej metody jest znalezienie i wdrożenie komponentów strony, które zwiększają jej skuteczność. Zwróć uwagę, testy A/B to stosowana metoda marketingowa, dzięki której możesz wpłynąć na konwersję, stymulować sprzedaż i zwiększyć rentowność projektu internetowego.

Testy dzielone rozpoczynają się od oceny metryk istniejącej strony internetowej (A, strona kontrolna) i szukania sposobów na jej ulepszenie. Na przykład utworzyłeś sklep internetowy. Wyobraź sobie stronę docelową tego sklepu ze współczynnikiem konwersji 2%. Marketer chce zwiększyć tę liczbę do 4%, więc planuje zmiany, które pomogą rozwiązać ten problem.

Powiedzmy, że specjalista uważa, że ​​zmiana koloru przycisku konwersji z neutralnego niebieskiego na agresywną czerwień sprawi, że będzie on bardziej widoczny. Aby sprawdzić, czy skutkuje to większą sprzedażą i większą liczbą konwersji, marketer tworzy ulepszoną wersję strony internetowej (B, nowa strona).

Za pomocą podzielonych narzędzi testowych ekspert losowo dzieli ruch między stronami A i B na dwie w przybliżeniu równe części. Relatywnie połowa odwiedzających trafia na stronę A, a druga połowa na stronę B. Jednocześnie marketer ma na uwadze źródła odwiedzin. Aby zapewnić ważność i obiektywność testów, konieczne jest skierowanie na strony A i B 50% odwiedzających, którzy weszli na witrynę z sieci społecznościowych, bezpłatnych wyników wyszukiwania, reklam kontekstowych itp.

Po zebraniu wystarczającej ilości informacji marketer ocenia wyniki testu. Jak wspomniano powyżej, współczynnik konwersji strony A wynosi 2%. Jeśli na stronie B było to 2,5%, to zmiana przycisku konwersji z niebieskiego na czerwony naprawdę zwiększyła skuteczność lądowania. Jednak współczynnik konwersji nie osiągnął pożądanych 4%. Dlatego marketer dalej szuka sposobów na ulepszenie strony poprzez testy A/B. W takim przypadku strona z czerwonym przyciskiem konwersji będzie działała jako strona kontrolna.

Co testować

Jak wspomniano powyżej, testy dzielone to stosowana metoda, która pozwala wpływać na różne wskaźniki witryny. Dlatego wybór przedmiotu testów zależy od celów, jakie stawia sobie marketer.

Na przykład, jeśli współczynnik odrzuceń strony docelowej wynosi 99%, a większość odwiedzających opuszcza stronę docelową w ciągu 2-3 sekund po wylądowaniu, warto zastanowić się nad zmianą komponentów wizualnych strony. Za pomocą testu A/B marketer może znaleźć najlepszą opcję układu strony, wybrać atrakcyjny schemat kolorów i obrazy oraz użyć czytelnej czcionki. A jeśli marketer stanie przed zadaniem zwiększenia liczby zapisów, może spróbować zmienić odpowiedni formularz konwersji. Test dzielony pomoże specjaliście wybrać optymalny kolor przycisku, najlepszą opcję tekstową, liczbę pól w formularzu subskrypcji czy jego lokalizację.

Najczęściej marketerzy testują następujące elementy stron internetowych:

• Tekst i wygląd przycisków konwersji oraz ich lokalizacja.
• Tytuł i opis produktu.
• Wymiary, wygląd i lokalizacja formularzy konwersji.
• Układ i projekt strony.
• Cena produktu i inne elementy oferty biznesowej.
• Zdjęcia produktów i inne ilustracje.
• Ilość tekstu na stronie.

Jakich narzędzi do testowania dzielenia użyć

Aby wykonać testy A/B, marketer musi skorzystać z jednej z wyspecjalizowanych usług. Najpopularniejsze z nich to Eksperymenty z treścią Google, dostępne dla użytkowników systemu Analytics. Do połowy 2012 r. narzędzie to nosiło nazwę Optymalizator witryny Google. Dzięki niemu możesz testować różne elementy strony, w tym nagłówki, czcionki, przyciski i formularze konwersji, obrazy i nie tylko. Usługa Eksperymenty z treścią pozostaje bezpłatna, co jest jedną z jej głównych zalet. Do jego wad należy konieczność pracy z kodem HTML.

Możesz również użyć następujących rosyjskich i zagranicznych narzędzi do testów dzielonych:

• Optimizely to najpopularniejsza płatna usługa testów A/B w Internecie. Koszt korzystania z niego waha się od 19 do 399 USD w zależności od rodzaju subskrypcji. Zaletą tej usługi jest możliwość tworzenia eksperymentów w interfejsie wizualnym, dzięki czemu marketer nie musi pracować z kodem HTML testowanych stron.
• RealRoi.ru to kolejna usługa krajowa, która umożliwia przeprowadzanie testów A / B. Wśród głównych zalet można wyróżnić to, że jest darmowy i bardzo łatwy w użyciu. Możesz zobaczyć, jak to działa szczegółowo w następującym filmie:
• Visual Website Optimizer to płatna usługa, która umożliwia testowanie różnych elementów strony. Aby skorzystać z tego narzędzia, marketer musi znać kod HTML. Ceny subskrypcji wahają się od 49 do 249 USD.
• Unbounce to usługa przeznaczona do tworzenia i optymalizacji stron docelowych. W szczególności umożliwia wykonanie testów A/B. Koszt użytkowania to od 50 do 500 dolarów miesięcznie. Domowy analog - LPGgenerator. Ta usługa pozwala testować tylko strony utworzone za jej pomocą.

Jak przeprowadzić test A/B za pomocą eksperymentów z treścią

Usługa Eksperymenty Google Analytics umożliwia jednoczesne testowanie skuteczności pięciu odmian strony. Za jego pomocą marketerzy mogą przeprowadzać testy A/B/N, które różnią się od standardowych eksperymentów A/B możliwością monitorowania wydajności kilku nowych stron, z których każda może zawierać kilka nowych elementów.

Marketer ma możliwość samodzielnego określenia proporcji ruchu zaangażowanego w testowanie. Minimalny czas trwania testu to dwa tygodnie, maksymalny jest ograniczony do trzech miesięcy. Specjalista może otrzymać dane o wynikach badań drogą mailową.

Aby podzielić test z eksperymentami z treścią stron, wykonaj następujące kroki:

1. Zaloguj się na swoje konto Google Analytics, wybierz witrynę, której działanie chcesz przetestować. Następnie wybierz menu „Zachowanie - Eksperymenty”.

1. Wprowadź adres URL strony, którą będziesz testować, w odpowiednim formularzu i kliknij przycisk „Rozpocznij eksperyment”.

1. Wybierz nazwę i cel testowania. Określ procent ruchu uczestniczącego w eksperymencie. Zdecyduj, czy chcesz otrzymywać powiadomienia e-mail o postępach testu. Kliknij przycisk „Dalej” po wybraniu wymaganych opcji.

1. Wybierz odmiany strony do przetestowania. Dodaj je do odpowiednich formularzy i kliknij Dalej.

1. Utwórz kod eksperymentu. Jeśli nie wiesz, jak umieścić go na stronie, wybierz opcję „Wyślij kod do webmastera”. Jeśli nie spocisz się na wzmiankę o kodzie HTML, wybierz opcję „Wstaw kod ręcznie”.

Wybierz „Wstaw kod ręcznie”, jeśli wiesz, jak obsługiwać kod HTML

1. Skopiuj kod zaznaczony na poprzedniej ilustracji i wklej go do kodu źródłowego strony kontrolnej. Kod należy wstawić bezpośrednio po tagu . Po wykonaniu tej akcji kliknij przycisk „Zapisz zmiany”.

1. Sprawdź kod testowy na stronie kontrolnej i kliknij przycisk „Rozpocznij eksperyment”. Pamiętaj, że kod wystarczy dodać do strony kontrolnej.

Będziesz mógł ocenić pierwsze wyniki testu w kilka dni po rozpoczęciu eksperymentu. Aby śledzić wyniki testów, wybierz odpowiedni eksperyment z listy i przejdź do strony raportów.

Pomysły, które zdecydowanie należy przetestować za pomocą testów dzielonych

Jak wspomniano powyżej, testy A/B pomagają zwiększyć skuteczność stron internetowych. Aby ta metoda marketingowa przyniosła rezultaty, marketer musi generować pomysły, które mogą pozytywnie wpłynąć na niektóre dane w witrynie. Nie możesz tak po prostu brać zmian z sufitu, wdrażać je i testować skuteczność. Na przykład mało prawdopodobne jest, aby dane witryny uległy zmianie, jeśli po prostu zdecydujesz się zmienić tło strony z niebieskiego na jasnozielone.

Marketer musi znaleźć sposoby na ulepszanie stron i zrozumieć, dlaczego powinny działać. Testy dzielone po prostu pomagają przetestować założenia specjalisty. Jednak każdy marketer czasami znajduje się w sytuacji, w której wszystkie pomysły zostały przetestowane, ale pożądany efekt nie został osiągnięty. Jeśli znajdziesz się w takiej sytuacji, spróbuj wprowadzić następujące zmiany i sprawdź, czy działają:

• Usuń dodatkowe pola z formularza konwersji. Być może Twoi potencjalni subskrybenci nie chcą ujawniać swoich danych paszportowych.
• Dodaj słowa „bezpłatny” lub bezpłatny do strony konwersji. Oczywiście odbiorcy wiedzą, że subskrypcja newslettera jest bezpłatna. Ale czasami słowo „darmowy” czyni prawdziwe cuda, ponieważ darmowy ocet jest słodki.
• Opublikuj film na swojej stronie docelowej. Zwykle ma to pozytywny wpływ na szereg wskaźników, w tym współczynnik odrzuceń, współczynnik konwersji i czas spędzony na stronie.
• Wydłuż okres, w którym użytkownicy mogą bezpłatnie testować Twój produkt. To prosty i skuteczny sposób na zwiększenie konwersji dla firm sprzedających oprogramowanie i usługi internetowe.
• Poeksperymentuj z kolorem przycisków konwersji. W niektórych przypadkach dobrze sprawdzają się agresywne czerwone przyciski. Czasami jednak denerwują użytkowników. Użyj testu A/B, aby znaleźć najbardziej efektywny kolor przycisku dla Twojej witryny.
• Obiecaj bonusy pierwszym 10 lub 100 kupującym (subskrybentom). Nie spiesz się z usunięciem tej obietnicy nawet po zakończeniu promocji. Wielu użytkowników nie spodziewa się, że znajdzie się w gronie szczęśliwców, ale mimo to podświadomie reaguje na dochodową ofertę.

Jak i dlaczego testować różne odmiany stron

Testy dzielone pozwalają ocenić skuteczność zmian na stronach internetowych. Ta metoda marketingowa ma zastosowanie. Pozwala na niemal ciągłe ulepszanie stron poprzez ulepszanie różnych metryk.

Aby przetestować tę lub inną zmianę, musisz utworzyć nową wersję strony i zapisać starą. Obie opcje muszą mieć różne adresy URL. Następnie powinieneś skorzystać z jednej z usług do przeprowadzania testów dzielonych, na przykład Eksperymenty z treścią. Ocenę wyników testu można przeprowadzić co najmniej dwa tygodnie po rozpoczęciu eksperymentu.

Czy uważasz, że warto robić testy A/B? W jakich przypadkach ta metoda marketingowa pozostaje stratą czasu?

kak-provodit-a-b-testirovanie

(split testing, A/B testing, Split testing) w serwisie to metoda marketingowa polegająca na monitorowaniu kontrolnych (A) i testowych (B) grup elementów - stron serwisu, które różnią się tylko niektórymi wskaźnikami w celu zwiększyć konwersję witryny . Strony wyświetlają się odwiedzającym naprzemiennie w równych częściach, a po osiągnięciu wymaganej liczby wyświetleń, na podstawie otrzymanych danych określana jest największa opcja konwersji.

Etapy testów A/B

Ogólnie cały proces testowania A/B można podsumować w 5 krokach:

Krok 1. Ustalanie celów (cele biznesowe, konwersja, cele witryny)

Krok 2 Naprawianie wstępnych danych statystycznych

Krok 3 Konfiguracja testu i proces

Krok 4 Ocena wyników i wdrożenie najlepszej opcji

Krok 5 W razie potrzeby powtórz eksperyment na innych stronach lub z innymi elementami

Czas trwania testu

Czas trwania eksperymentu zależy od dostępnego ruchu w witrynie. Współczynnik konwersji, a także różnice w testowanych opcjach. Wiele usług automatycznie określa czas trwania. Średnio wystarczy 100 działań powodujących konwersję w witrynie i zajmuje to około 2-4 tygodni.

Strony do testów

Do testów możesz wybrać dowolną stronę witryny, która jest ważna z punktu widzenia konwersji. Najczęściej jest to strona główna, strony rejestracji/autoryzacji, strony lejków sprzedażowych. W takim przypadku lepiej zwrócić uwagę na następujące punkty:

1. Najczęściej odwiedzane strony witryny
2. Strony z dużą liczbą odwiedzin
3. Strony z odmową

Pierwsza jest niezbędna do czystości eksperymentu, druga i trzecia do zidentyfikowania słabych punktów w witrynie.

Najczęściej do testów wybierane są przyciski, tekst, hasło-wezwanie do działania oraz układ strony jako całości. Aby wybrać element, możesz użyć następującego algorytmu działań:

• Postawiono hipotezę dotyczącą zachowania odwiedzającego
• Proponuje się rozwiązanie zmiany elementów (lepiej wziąć 1-2, nie więcej)

1. Dodaj słowo „Bezpłatny”
2. Prześlij film wyjaśniający
3. Przyklej przycisk rejestracji na górze strony
4. Zmniejsz liczbę pól w aplikacji
5. Dodaj licznik ofert specjalnych
6. Dodaj bezpłatną wersję próbną
7. Zmień kolory przycisków lub tekst na nich

Automatyzacja testów

Istnieje kilka płatnych i bezpłatnych narzędzi do automatyzacji procesu testowania z różnymi zestawami funkcji. Można wyświetlić dużą listę. Najpopularniejszym może być eksperymenty w Google Analytics. Jest bezpłatny, zrusyfikowany, łatwy do nauczenia, a jeśli na stronie jest zainstalowany licznik, nie musisz czekać na zebranie początkowych danych i możesz rozpocząć eksperyment za pomocą zaledwie kilku kliknięć.

Testy A/B z Google Analytics

Rozważ proces tworzenia testu w Google Analytics. W tym celu przejdź do zakładki Raporty->Zachowanie->Eksperymenty. Wprowadź adres URL testowanej strony i kliknij „Rozpocznij eksperyment”.

Następnym krokiem jest wypełnienie pól: nazwa eksperymentu, cel (można wybrać spośród skonfigurowanych celów dla witryny), zasięg odwiedzających witrynę dla eksperymentu (lepiej ustawić 100%).

W drugim kroku będziesz musiał określić adresy strony głównej (kontrolnej) i jej wariantów.

Jeśli wszystko zostanie wykonane poprawnie, system zapali zielone światło, aby rozpocząć testowanie.

Wynik eksperymentu jest bardzo wizualny i może wyglądać tak:

Wbrew powszechnemu przekonaniu (w końcu powstają duplikaty stron) takie testowanie nie wpływa negatywnie na pozycję serwisu. Wystarczy wpisać rel="canonical" na alternatywnych stronach.

Ważne o testach A/B

1. Wersje testowe stron nie powinny różnić się o więcej niż 2 elementy
2. Ruch między stronami powinien być równomiernie rozłożony
3. Podczas wprowadzania ustawień wybierz nowych odwiedzających witrynę
4. Wyniki może ocenić tylko szeroka próba, najlepiej co najmniej 1000 osób.
5. Oceniaj wyniki w tym samym czasie
6. Nie powinieneś ufać sobie, nie wszyscy użytkownicy myślą tak jak Ty, więc preferowana opcja może nie być zwycięska.
7. Wyniki testów A/B mogą nie zawsze przynosić pożądane rezultaty w zwiększaniu konwersji. Musisz więc poeksperymentować z innymi elementami.

Proces podejmowania decyzji projektowych zawsze był popularnym tematem dyskusji. Dlaczego niektórzy projektanci dokonują wyborów, których nie dokonaliby inni i dlaczego niektóre projekty wydają się działać lepiej niż inne?

Od badań akademickich po szkice i anegdoty, świat projektowania pasjonuje się procesem. Żart o Google i jego 41 odcieniach niebieskiego utrzymał się najdłużej.

Próbując określić, którego z 2 odcieni niebieskiego użyć w tekście linku, Google przetestowało nie tylko 2 główne, ale 39 pomiędzy. Historia opisuje mniej więcej minutę decyzji, ale podkreśla szybko rozwijające się podejście do podejmowania decyzji. Opiera się na eksperymentach, alternatywach i, co najważniejsze, danych.

„Testowanie A/B może zapewnić wartość, ale nie powinno odbywać się kosztem innych obszarów projektowania”.

Ale dlaczego Google przetestował 41 odcieni niebieskiego i jak to podejście może pomóc Tobie lub Twojej organizacji? W tym artykule przyjrzymy się testom A/B (lub testom wielowymiarowym): co to jest, dlaczego należy go używać i jakie są jego ograniczenia.

Testy A/B i wielowymiarowe w skrócie

Krótko mówiąc, testy A/B to metoda porównywania 2 wersji czegoś ze sobą w celu określenia, która wersja jest lepsza. Przedmiotem testów może być obrazek, przycisk, tytuł itp.

Testowanie wielowymiarowe jest rozszerzeniem testów A/B, w którym porównuje się więcej niż 2 wersje i (często) uwzględnia więcej odmian. Pozwoli ci to doświadczyć kilku elementów jednocześnie i ich interakcji.

Dla uproszczenia, w dalszej części tego artykułu omówimy tylko testy A/B, ale w przypadku testowania na wielu odmianach zasady pozostają takie same.

Dlaczego testy A/B

Celem testów A/B jest umożliwienie wprowadzania stopniowych ulepszeń w witrynie lub aplikacji. Kontrastując swoją aplikację lub witrynę z co najmniej jedną odmianą, możesz stale ulepszać swój projekt i uzyskiwać weryfikację od prawdziwych użytkowników.

W testach A/B każdy test generuje nowe dane o tym, co działa, a co nie. To, co działa, może zostać włączone do strony internetowej lub aplikacji i stworzyć nowy, ulepszony projekt.

Testy A/B w prawdziwym świecie

Aby zrozumieć, w jaki sposób można wykorzystać testy A/B i co może dla Ciebie zrobić, możesz zapoznać się z setkami przykładów na stronach takich jak Który test wygrał. Możesz również rzucić okiem na te popularne badania:

Podstawowy proces testowania A/B

Krok 1: Gdzie testować

Aby przeprowadzić testy A/B, potrzebujesz strony internetowej lub aplikacji. (Testowanie A/B promuje stopniowe ulepszanie istniejącego produktu i nie nadaje się do testowania przeprojektowanych lub nowych produktów i usług).

Musisz zdecydować, który obszar swojej witryny lub aplikacji chcesz zbadać, a najlepiej spróbować ulepszyć. Kierunek studiów można wybrać na podstawie różnych źródeł:

• Analityka: czy Twoje analizy pokazują, że dana strona lub ekran irytuje użytkowników. Czy wszyscy Twoi użytkownicy wychodzą z tej samej strony?
• Test użyteczności: Czy testy użyteczności ujawniły problematyczny obszar lub interakcję? Przetestowałeś nowe rozwiązanie i chcesz je teraz przetestować na dużą skalę?
• Intuicja lub osobista niechęć: Czy wierzysz, że coś można poprawić i chcesz to przetestować na danych? Czy jest coś, czego zawsze nie lubiłeś i gdzie chcesz zastosować alternatywy?

Najczęściej te trzy źródła określają przedmiot badań. Uzbrojony w tę wiedzę, możesz przejść do kroku 2.

Krok 2: Co testować (i co mierzyć)

Jednym z kluczowych aspektów testowania A/B jest zmiana tylko jednej zmiennej na raz. Na pierwszy rzut oka wydaje się to prostym zadaniem, ale możesz po cichu przekroczyć granicę i dodać więcej zmiennych.

Na przykład, jeśli chcesz przetestować przycisk, możesz spróbować zmienić jego tekst:

Lub zmień kolor:

Ale jeśli połączysz obie opcje i przetestujesz przycisk z innym tekstem i innym kolorem, drastycznie zmniejszysz wartość testu.

Porównując te dwa przyciski ze sobą, nie byłbym w stanie wskazać, dlaczego dają różne wyniki: jaki wzrost wydajności przyniosła zmiana tekstu, czy zmiana koloru.

„Aby przeprowadzić wartościowe testy A/B, kluczowe jest ograniczenie zmian do jednej zmiennej”.

Tak więc, aby przeprowadzić wartościowe testy A/B, konieczne jest ograniczenie zmian do jednej zmiennej. Jeśli chcesz przetestować wiele zmiennych jednocześnie, powinieneś wykonać test na wielu zmiennych, w którym możesz przetestować te wiele zmiennych i lepiej zorientować się, jaki wpływ miała każda zmiana.

Niezależnie od tego, który test zdecydujesz się przeprowadzić, powinieneś również podkreślić kluczowe dane, które będziesz śledzić. W przypadku przycisków najprawdopodobniej zmierzysz liczbę osób, które w nie klikną. Jeśli chodzi o zmiany tytułu, prawdopodobnie będziesz patrzeć na współczynniki odrzuceń lub czas spędzony w witrynie.

To, co śledzisz, staje się tym, co testujesz. Po prostu upewnij się, że wiesz, co chcesz poprawić, zanim rozpoczniesz testy A/B.

Krok 3: Jak testować

Teraz, gdy już wiesz, co i gdzie będziesz testować, porozmawiajmy o tym, jak to zrobimy. Istnieje wiele aplikacji do testowania A/B. Oto najpopularniejsze:

• Google Analytics
• Optymalizuj
• Wizualny Optymalizator Witryny
• A/B Smaczne

Te (i inne) oferują podstawowy proces testowania A/B, ale różnią się funkcjami. Twój wybór będzie zależał od Twoich umiejętności programistycznych, elastyczności, której potrzebujesz lub po prostu ceny.

Wiele dużych organizacji często używa więcej niż jednego narzędzia, w zależności od ilości wymaganej pracy lub osobistych preferencji, więc wybór odpowiedniego narzędzia będzie zależał od osobistych okoliczności.

Krok 4: Jak duży jest test

Uzgodniłeś więc lokalizację testu, zmienne, które będziesz optymalizować, i sposób, w jaki technicznie to wszystko zaimplementujesz. Ostatnie pytanie, na które należy odpowiedzieć, to: ilu użytkowników będzie testowanych?

Niektóre narzędzia (takie jak Google Analytics) nie pozwalają określić, kto zobaczy oryginalną wersję, a kto alternatywną, a nawet jak długo będzie trwał test. Dla początkującego może to być przydatna funkcja, ponieważ upraszcza cały proces.

„Testowanie A/B nie może powiedzieć, czy rozwiązujesz właściwy problem”.

Jeśli chcesz samemu ustawić te zmienne, to warto zastanowić się, jak długo będzie trwał test i jaki procent użytkownika zobaczy wersję oryginalną, a jaki alternatywę.

Jeśli pracujesz w organizacji, która nie akceptuje ryzyka, pokaż alternatywę tylko 5-10% użytkowników, a resztę podziel 50:50. Ostatecznie wybór będzie zależeć od Twoich ambicji oraz poziomu i rodzaju ruchu, jaki otrzyma Twoja witryna lub aplikacja.

Odpowiadając na pytanie, jak podzielić test i jak długo ma to zająć, zadaj sobie pytanie: jak duży powinien być test, abym miała pewność, że wyniki są prawidłowe?

Określa się to terminem technicznym „istotność statystyczna” lub „istotność statystyczna”. Twoim celem jest stworzenie testu z próbą na tyle dużą, aby można było powiedzieć z ponad 95% pewnością: „Ich zmiana spowodowała ten wynik”.

To, jak podzielisz test, zależy od Ciebie, ale to, jak długo to potrwa, może zależeć od natężenia ruchu w witrynie lub aplikacji. Nie martw się, choć brzmi to onieśmielająco, istnieje wiele kalkulatorów online, które pomogą Ci dowiedzieć się, czy Twoje wyniki są statystycznie istotne, czy też musisz wydłużyć czas testowania.

• Kalkulator znaczenia Visual Website Optimizer
• Kalkulator wartości Kissmetrics

Krok 5: Przeanalizuj i zdecyduj

Oto wyniki! Przeprowadziłeś test, upewniłeś się, że jest statystycznie istotny, a teraz masz liczby.

Biorąc pod uwagę całą wykonaną pracę, liczbę zaangażowanych osób, każdy spodziewa się zobaczyć coś takiego:

Ale najczęściej otrzymasz to:

Nie denerwuj się (i nie rozpaczaj) — testy A/B wprowadzają stopniowe ulepszenia. I chociaż możliwe są duże zmiany, każda poprawa jest świetnym początkiem i kieruje Cię na właściwą drogę.

Nawet jeśli dane pokazują, że nie dokonałeś żadnych ulepszeń, jesteś teraz na silniejszej pozycji, ponieważ wiesz, co działa, a co nie.

"Dane nie równają się zrozumieniu"

Jeśli test wypadł pomyślnie, kolejne kroki należy do Ciebie. Nową wersję możesz przesłać tak szybko, jak to możliwe. Lub, jeśli zrobiłeś mały test, możesz zrobić kolejny test z wieloma osobami.

To, co zrobisz z uzyskanymi informacjami, zależy ostatecznie od Ciebie!

Zrozumienie ograniczeń testów A/B

Chociaż testy A/B są potężne, ważne jest również zrozumienie ich wad i ograniczeń. Pomimo rosnącej popularności testy A/B nie są panaceum, które może uratować każdą firmę, ale raczej kolejnym narzędziem w Twoim arsenale.

Rozważając użycie testów A/B, ważne jest, aby zrozumieć, czego nie można zrobić:

• Powiedz dlaczego. Testy A/B to fantastyczne narzędzie, które pomoże Ci zrozumieć, co działa, a co nie. Jednak nie może powiedzieć, dlaczego. Aby to zrobić, musisz przeprowadzić wysokiej jakości badania użytkowników. Bardzo ważne jest, abyś zrozumiał, że dane nie oznaczają zrozumienia.
• Pomóż przetestować przeprojektowanie aplikacji lub strony internetowej. Chociaż teoretycznie możesz porównać cały projekt strony z alternatywą i uzyskać dane o sukcesie, nie będziesz w stanie dowiedzieć się, co jest w projekcie, który powoduje różnicę. Dopóki nie przeprowadzisz badań użytkowników, wynik będzie bez znaczenia.
• Powiedz, czy rozwiązujesz właściwy problem. Ze względu na przyrostowy charakter testów A/B może to być potężne narzędzie do ciągłego ulepszania witryny lub aplikacji. Testy A/B nie mogą powiedzieć, czy rozwiązujesz właściwy problem. Możesz skoncentrować swoje testy na stronie głównej i zobaczyć ulepszenia, ale problemem może być inna część witryny. Jest to pojęcie znane jako lokalne maksimum.

Co mogą dla Ciebie zrobić testy A/B?

Jeśli to wszystko zaostrzyło Twój apetyt na testy A/B, prawdopodobnie masz już informacje, których potrzebujesz, aby zacząć. Niektóre drobne szczegóły mogą się różnić lub Twoja organizacja może mieć określone wymagania, ale ogólne zasady pozostają takie same.

Testy A/B, jeśli są używane prawidłowo, mogą być świetnym narzędziem. Może pozwolić Twojej firmie na stopniową poprawę i zwiększenie sukcesu.

Ale ważne jest, aby zrozumieć, że testy A/B to tylko jedno narzędzie w znacznie większym arsenale każdego projektanta. W swojej rezygnacji Doug Bowman, były szef projektowania wizualnego w Google, również przypomniał anegdotę o 41 odcieniach niebieskiego Google. Tak więc, nawet jeśli testy A/B mogą zapewnić dużą wartość, nie powinny odbywać się kosztem innych obszarów projektowania.