Testy A/B zdjęć i kart produktów: jak testować i nie przepalać wyświetleń

Główne zdjęcie, tytuł i pierwszy ekran infografiki decydują o tym, czy kupujący kliknie, czy przewinie dalej. Ale zmienianie ich na oślep jest niebezpieczne: jeden nieudany test potrafi zbić wyświetlenia na tydzień, a odzyskanie pozycji w wynikach wyszukiwania bywa trudniejsze niż ich utrata. Karta produktu na platformie sprzedażowej żyje w ciągłej walce o uwagę: obok w siatce stoją dziesiątki podobnych towarów, a ty masz ułamek sekundy, żeby się wyróżnić. Każda zmiana okładki albo tytułu porusza nie tylko kliknięcia, ale i ranking algorytmiczny, który uczy się na nowej treści.

Dlatego podejście "zmieniłem i patrzę" prawie zawsze wprowadza w błąd: na wynik wpływają sezonowość, reklama, dzień tygodnia, zmiany cen u konkurentów i po prostu losowość małych liczb. Żeby wnioskom można było wierzyć, test trzeba postawić jak eksperyment: z hipotezą, kontrolą, ustalonymi warunkami i wystarczającą ilością danych. Poniżej rozbieramy, jak testować starannie, co dokładnie liczyć, jak czytać wynik i jakie błędy zamieniają pożyteczny test w przepalanie wyświetleń.

Na platformie sprzedażowej nie widzisz kupującego twarzą w twarz, ale widzisz jego zachowanie w liczbach: ile razy kartę pokazano, ile razy kliknięto, ile razy dodano do koszyka i ile razy kupiono. Każda zmiana zdjęcia albo tekstu zmienia te liczby, i często nie w tę stronę, którą podpowiada gust. Projektant jest pewien, że nowa infografika jest "czystsza" i "nowocześniejsza", a CTR spada o 15 procent, bo z okładki zniknął kluczowy obiekt, który przyciągał wzrok w siatce. Estetyka i sprzedaż wcale nie zawsze idą w parze: to, co pięknie wygląda na dużym monitorze projektanta, nierzadko przegrywa na miniaturce wielkości paznokcia w aplikacji mobilnej.

Dlatego decyzje o karcie podejmuje się nie na naradzie i nie według zasady "mnie tak bardziej się podoba", lecz na podstawie porównania dwóch wariantów na realnym ruchu. To właśnie jest test A/B: pokazujesz odbiorcom wersję A i wersję B, mierzysz odzew i zostawiasz zwycięzcę. Brzmi prosto, ale trudność w tym, że wbudowanych uczciwych narzędzi do testów rozdzielnych platformy prawie nie mają. Większość marketplace'ów nie pozwala pokazać połowie kupujących jednej okładki, a połowie drugiej w tym samym momencie. Znaczy to, że trzeba pracować z testami sekwencyjnymi i kontrolnymi kartami produktu, a to wymaga dyscypliny: jednakowe warunki, niezmienna cena, równy budżet reklamowy.

Jeszcze jeden powód, by testować, a nie zgadywać, jest taki, że intuicja słabo się skaluje. Jeden produkt być może wyczujesz, ale w asortymencie ze stu pozycji zgadywanie każdej okładki jest niemożliwe. Za to proces testowania jest powtarzalny: raz zrozumiawszy, że w twojej kategorii lepiej działa produkt "w użyciu" niż na białym tle, przenosisz wniosek na dziesiątki kart. Test oszczędza nie tylko wyświetlenia, ale i czas na niekończące się spory o gustach.

Ważne rozumieć też drugą stronę: testowanie wymaga dyscypliny i nie lubi pośpiechu. Zachowanie kupujących jest niestabilne, zależy od dnia tygodnia, pogody, aktywności konkurentów i kilkunastu czynników, których nie kontrolujesz. Dlatego pojedyncza obserwacja prawie nic nie znaczy, a wartość pojawia się, gdy testujesz systemowo i gromadzisz statystykę. Jeden test odpowiada na jedno wąskie pytanie, seria testów buduje zrozumienie twojej kategorii. Nie oczekuj od pierwszego porównania olśnienia, oczekuj dyscypliny, która z czasem da przewagę nad konkurentami zmieniającymi okładki na wyczucie.

Nie testuj wszystkiego naraz. Jeśli jednocześnie zmieniłeś główne zdjęcie, tytuł i kolejność infografiki, a metryka wzrosła, nie dowiesz się, co zadziałało, a co ciągnęło w dół. Możliwe, że zdjęcie podniosło kliknięcia o 30 procent, a nowy tytuł je częściowo zjadł, i w sumie widzisz skromny plus, biorąc go za pełny sukces. Testuj po jednym elemencie na iterację, w kolejności malejącego wpływu na lejek. To wolniejsze, ale każdy wniosek zostaje u ciebie w skarbnicy wiedzy i stosuje się do przyszłych kart.

Hierarchia wpływu na lejek

• Główne zdjęcie (okładka) wpływa na CTR w wynikach najsilniej. Kupujący widzi je w siatce wyszukiwania razem z ceną i oceną, i to właśnie okładka decyduje, czy wzrok się zatrzyma, czy prześlizgnie dalej. Testuj je pierwsze: ujęcie, tło (czyste białe kontra lifestyle z otoczeniem), obecność produktu "w dłoni" albo w scenariuszu użycia, skala obiektu w kadrze, czytelność na małej miniaturce. Często wygrywa nie najładniejsze, lecz najbardziej zrozumiałe zdjęcie, na którym w ułamek sekundy jasno widać, co to za produkt.
• Tytuł wpływa i na CTR (jego część jest widoczna w wynikach pod zdjęciem), i na ranking przez słowa kluczowe w wyszukiwaniu. Testuj strukturę: "marka + typ + kluczowa korzyść + parametr" kontra "typ + przeznaczenie + marka". Sprawdzaj, które słowo stoi pierwsze, bo właśnie początek tytułu kupujący czyta w pierwszej kolejności, a ogon często ucina interfejs.
• Infografika na drugim do czwartym zdjęciu wpływa na konwersję z kliknięcia w zakup. Tutaj kupujący jest już wewnątrz karty, i decyduje tekst na obrazkach: wymiary i gabaryty, skład i materiały, scenariusz użycia, odpowiedzi na typowe obiekcje i porównanie z alternatywami. To praca już nie na kliknięcie, lecz na zaufanie.
• Opis, charakterystyki i opinie zamykają ostatnie wątpliwości. Je też można testować, ale efekt zwykle jest subtelniejszy i widoczny tylko przy dużym ruchu.

Jak wybrać, co testować najpierw

Porównaj swoje metryki ze średnimi w kategorii. Jeśli CTR okładki jest niższy niż w kategorii, problem jest na górze lejka, i szlifowanie infografiki na piątym slajdzie nie ma sensu: mało kto do niej w ogóle dociera. Jeśli natomiast kliknięcia są w normie, a zakupów mało, kop w głąb karty. Praktyczna reguła: napraw lejek z góry na dół, wyświetlenie, potem kliknięcie, potem zakup. Najpierw doprowadź do tego, żeby w kartę klikano, i dopiero potem walcz o konwersję wewnątrz.

Formułuj hipotezę jako twierdzenie, które da się sprawdzić. Nie "zróbmy ładniej", lecz "jeśli dodać na okładkę produkt w dłoni dla skali, CTR wzrośnie, bo kupującemu stanie się jasny realny rozmiar". Taką hipotezę łatwo potwierdzić albo obalić liczbami, i uczy ona cię na przyszłość niezależnie od wyniku testu.

Pomysły na hipotezy okładki na start

Jeśli nie wiesz, od czego zacząć, oto sprawdzone kierunki, które często dają zauważalny przyrost CTR w kategoriach produktowych:

• Skala i kontekst. Dodać obok znajomy przedmiot albo dłoń, żeby kupujący od razu zrozumiał realny rozmiar. Szczególnie ważne dla akcesoriów, naczyń, drobnego sprzętu, gdzie gabaryty nie są oczywiste.
• Tło. Porównać czyste białe tło, które wygląda katalogowo i schludnie, z tłem lifestyle, gdzie produkt pokazano w środowisku użycia. W jednych kategoriach wygrywa sterylność, w innych żywa scena, z góry nie zgadniesz.
• Ujęcie. Kadr frontalny kontra trzy czwarte, które dodaje objętości. Czasem zmiana kąta sprawia, że produkt wygląda "drożej" bez żadnego retuszu.
• Akcent na korzyści. Pokazać kluczową cechę wprost na okładce: otwarte wieczko, fakturę materiału, kompletację. Kupujący nie powinien domyślać się, co jest w środku.
• Minimum tekstu na okładce. Zbędne plakietki i napisy na pierwszym zdjęciu nierzadko przeszkadzają, a nie pomagają, sprawdź wersję bez nich.

Bierz po jednym pomyśle naraz, formułuj oczekiwany wynik i przyczynę, i dopiero potem uruchamiaj. Dokumentuj każdą hipotezę i jej wynik w prostej tabeli: data, co zmieniano, metryki bazowe, metryki końcowe, wniosek. Po kilku miesiącach taka tabela stanie się twoją wewnętrzną instrukcją po kategorii, cenniejszą niż jakiekolwiek ogólne porady z internetu.

Dwie podstawowe metryki pokrywają 90 procent decyzji o karcie, i obie liczy się w jednym działaniu. Najważniejsze, żeby nie pomylić, za co odpowiada każda, inaczej łatwo ucieszyć się wzrostem kliknięć i nie zauważyć spadku sprzedaży.

CTR (klikalność w wynikach) odpowiada za okładkę, tytuł i cenę, czyli za wszystko, co widać jeszcze przed wejściem w kartę:

CTR = kliknięcia / wyświetlenia × 100 procent

CR (konwersja w zamówienie) odpowiada za całą treść wewnątrz karty, zwłaszcza za infografikę, opis, charakterystyki, opinie i ocenę:

CR = zamówienia / przejścia do karty × 100 procent

Wskaźnik końcowy, który faktycznie optymalizujesz, to zamówienia z wyświetlenia = CTR × CR. To właśnie on, a nie osobna metryka, mówi, czy karcie zrobiło się lepiej, czy gorzej. Czasem nowa okładka podnosi CTR, ale przyciąga "nie tych" ludzi, którzy klikają z ciekawości i nie kupują, i wtedy CR spada mocniej, niż wzrósł CTR. W takim przypadku jaskrawa okładka szkodzi, choć według jednej metryki wygląda na zwycięstwo. Zawsze patrz na parę CTR i CR razem.

Co za co odpowiada

Skąd brać liczby

• Allegro: sekcja statystyk sprzedaży i analityki ofert w panelu sprzedawcy, gdzie widać wyświetlenia, przejścia, dodania do koszyka i zamówienia.
• Amazon: raporty Business Reports i statystyki ofert, gdzie dostępne są wyświetlenia, sesje, CTR i konwersja w zamówienie.

Minimalny horyzont obserwacji, na którym liczby przestają skakać, to zwykle tydzień: tak wygładza się różnica między dniami roboczymi a weekendem, bo w weekend zachowanie kupujących jest zauważalnie inne. Zdejmuj metryki w te same dni tygodnia i w tym samym oknie, inaczej porównujesz nieporównywalne. I koniecznie zapisz wartości bazowe przed startem testu, żeby było z czym porównywać, po fakcie odtworzenie czystego punktu odniesienia jest prawie niemożliwe.

Metryki pośrednie, które przyspieszają wnioski

Zamówienia gromadzą się powoli, zwłaszcza przy niedrogich produktach, i można na nie czekać tygodniami. Żeby wcześniej dostrzec kierunek trendu, patrz na sygnały pośrednie, których jest zauważalnie więcej pod względem wolumenu:

• Dodania do koszyka. Jest ich wielokrotnie więcej niż zakupów, dlatego statystycznie istotna różnica pojawia się wcześniej. Wzrost koszyków przy nowej treści z reguły zwiastuje wzrost zamówień.
• Dodania do ulubionych. Sygnał odłożonego zainteresowania, przydatny dla drogich produktów z długim cyklem decyzyjnym.
• Głębokość przeglądania karty, jeśli platforma ją pokazuje: czy kupujący doszedł do infografiki i opinii.

Te metryki nie zastępują końcowych zamówień z wyświetlenia, ale pomagają wcześniej zrozumieć, czy test idzie w dobrą stronę, czy pora go zatrzymać, nie dopalając wyświetleń na z góry słabym wariancie.

Częsta pułapka uśredniania

Platformy pokazują uśrednione liczby za okres, a w nich chowa się niejednorodność. CTR może być wysoki w pierwsze dni po zmianie, dopóki algorytm daje nowej treści podwyższony zasięg, a potem osiąść. Jeśli zdjąć metrykę tylko za pierwsze dni, wniosek będzie zawyżony. Dlatego odrzucaj krótki okres rozpędu po zmianie treści i licz na ustabilizowanym odcinku, inaczej porównasz rozpęd jednej wersji z ustalonym stanem drugiej.

Uczciwego równoległego testu A/B, gdy dwie wersje jednej karty pokazuje się tej samej publiczności jednocześnie, platformy w czystej postaci nie dają. Dlatego sprzedawcy używają roboczych schematów, każdy ze swoimi kompromisami. Wybór zależy od tego, czy masz podobne pozycje i jak drogo tracić wyświetlenia na topowym produkcie.

Test sekwencyjny (przed i po)

Pokazujesz wersję A jeden do dwóch tygodni, zapisujesz metryki, potem stawiasz wersję B na taki sam okres i porównujesz. To najbardziej dostępny sposób, ale jego głównym wrogiem są czynniki zewnętrzne: sezonowość, reklama konkurentów, zmiany popytu. Żeby się nie oszukać:

• Testuj w porównywalnych okresach, bez świąt i wyprzedaży między nimi, inaczej skok popytu przypisze się twojemu nowemu zdjęciu.
• Trzymaj stawki reklamowe i budżet niezmienne w obu okresach, reklama napędza ruch innej jakości.
• Nie zmieniaj ceny podczas testu, cena jest silniejsza niż jakiekolwiek zdjęcie i zagłuszy cały efekt.
• Bierz równe co do długości okna, tydzień kontra tydzień, a nie pięć dni kontra dziesięć.

Test na bliźniakach (kontrolna pozycja)

Jeśli masz dwie podobne pozycje w jednej kategorii o zbliżonym popycie, sprawdź hipotezę na jednej, a drugą trzymaj jako kontrolę bez zmian. Jeśli u testowanego produktu metryka wzrosła, a u kontrolnego została taka sama, znaczy to, że zadziałała właśnie twoja zmiana, a nie ogólny trend kategorii. To najlepszy dostępny sposób odcięcia sezonowości: oba produkty żyją w tych samych warunkach zewnętrznych.

Naprzemienność wersji

Dla produktów ze stabilnym ruchem działa metoda z naprzemiennością: tydzień A, tydzień B, znów tydzień A, znów B. Jeśli zwycięzca powtarza się w obu cyklach, wniosek jest pewniejszy niż przy pojedynczym porównaniu, bo przypadkowe szczęście jednego tygodnia już nie wyjaśnia wyniku.

Jak nie przepalić wyświetleń

Każda zmiana okładki na krótki czas może zbić pozycje, dopóki platforma uczy się na nowej treści i na nowo ocenia jej odzew. Dlatego zachowaj ostrożność:

• Nie testuj na topowych pozycjach w szczycie sezonu, strata tygodnia wyświetleń na flagowcu kosztuje drożej niż jakikolwiek wniosek.
• Zmieniaj po jednym elemencie, żeby wycofanie było szybkie i jednoznaczne.
• Zachowuj poprzednią wersję plików i tytułów, żeby przywrócić zwycięzcę w minutę, a nie składać go od nowa.
• Nie uruchamiaj nowego testu, dopóki metryki poprzedniego się nie ustabilizowały, nakładanie testów na siebie miesza obraz.
• Najpierw dotrzyj hipotezy na produktach drugiego szeregu, a na flagowca przenoś już sprawdzone rozwiązanie.

Reguła jest prosta: test powinien kosztować mniej niż potencjalna wygrana. Na produkcie z dwoma zamówieniami tygodniowo statystyki nie zbierzesz nawet przez miesiąc, więc testuj tam, gdzie jest wolumen ruchu. Na rzadkich produktach opieraj się na wnioskach uzyskanych na chodliwych odpowiednikach.

Porównanie schematów testowania

Nie ma uniwersalnie najlepszego schematu. W praktyce sprzedawcy łączą je: hipotezę szybko sprawdzają testem sekwencyjnym, a sporny albo drogi wynik potwierdzają na kontrolnej pozycji lub naprzemiennością. Im wyższa cena błędu, tym pewniejszy powinien być schemat.

Główny błąd początkujących to zatrzymanie testu trzeciego dnia po zobaczeniu, że wariant B "chyba lepszy". Na małych liczbach różnica najczęściej jest przypadkowa: para dodatkowych zamówień w udany dzień z łatwością tworzy iluzję wzrostu, która znika w następnym tygodniu. Potrzebny jest minimalny wolumen odzewu, a nie minimalny okres. Liczyć trzeba przejścia i zamówienia, a nie dni kalendarza.

Zgrubny drogowskaz: na każdy wariant warto zebrać przynajmniej kilkaset przejść do karty i parę dziesiątek zamówień, inaczej rozrzut przewyższa efekt. Jeśli CTR wzrósł z 4 procent do 4,3 procent przy paru setkach wyświetleń, to szum, a nie zwycięstwo: na takim wolumenie przypadkowe wahania spokojnie dają podobną różnicę. Realne, zasługujące na uwagę zmiany są zwykle widoczne jako różnica w dziesiątkach procent, a nie w ułamkach procenta. Im mniej masz ruchu, tym większą różnicę trzeba zobaczyć, żeby jej uwierzyć. To bezpośredni skutek statystyki: przy małej liczbie obserwacji przypadkowe wahania są duże, i tylko duży efekt przebija się przez szum. Przy strumieniu tysięcy wyświetleń dziennie zauważalna staje się i zmiana o kilka procent, a przy dziesiątkach wyświetleń nawet dwukrotna różnica może okazać się zbiegiem okoliczności.

Prosty sprawdzian istotności

• Różnica mniejsza niż 10 procent na małej próbie, uznaj test za nieokreślony i przedłuż zbieranie danych.
• Różnica 20 procent i więcej przy setkach przejść na każdy wariant, najprawdopodobniej jest realna i można się na niej oprzeć.
• Jeśli metryki skaczą z dnia na dzień mocniej niż różnica między A i B, danych jest jeszcze mało, daj testowi dojrzeć.
• Jeśli w dwóch cyklach naprzemienności wygrywa ten sam wariant, zaufanie do wyniku gwałtownie rośnie.

Na co jeszcze patrzeć oprócz średniej

Wartość średnia wprowadza w błąd, jeśli wewnątrz okresu był wyskok. Zajrzyj w dzienną dynamikę: czy ruch był równy, czy skok zamówień nie przypadł na jeden dzień po zewnętrznym powodzie w rodzaju wpisu bloggera albo akcji platformy. Jeden anomalny dzień potrafi w pojedynkę "zrobić" zwycięzcę, którego naprawdę nie ma. Jeśli usunąć ten dzień i przewaga znika, wniosek jest niepewny.

Przykład wniosku z obliczeniem

Było: okładka na białym tle, CTR 3,8 procent, CR 6 procent, zamówień z wyświetlenia 0,23 procent. Stało się: okładka z produktem w użyciu, CTR 4,9 procent, CR 5,7 procent. Liczymy wynik wzorem zamówienia z wyświetlenia = CTR × CR: 4,9 procent × 5,7 procent = 0,28 procent. Mimo niewielkiego spadku konwersji z 6 procent do 5,7 procent, końcowe zamówienia z wyświetlenia wzrosły z 0,23 procent do 0,28 procent, czyli mniej więcej o 20 procent. Wniosek: wariant B wygrywa, jego zostawiamy. A spadek CR naprawiamy osobno już infografiką wewnątrz karty, bo nowa okładka przyprowadziła więcej ludzi, i część z nich warto dopchnąć treścią. Tutaj dobrze widać, dlaczego nie można patrzeć na CTR w oderwaniu: pod względem konwersji wariant B przegrał, ale w rezultacie wygrał.

Co robić z wynikiem nieokreślonym

Często test kończy się remisem: różnica w granicach szumu, żaden wariant nie jest wyraźnie lepszy. To normalny wynik, a nie porażka. Warianty działania:

• Zostaw ten, który jest prostszy i tańszy w produkcji. Jeśli nowa okładka nie jest lepsza od starej, ale wymaga drogiej sesji, wybieraj starą.
• Wzmocnij hipotezę. Możliwe, że zmiana była zbyt nieśmiała. Jeśli lekka poprawka tła nie dała efektu, spróbuj śmielszej wersji, a nie wyrzucaj pomysłu w całości.
• Przedłuż zbieranie danych, jeśli ruchu było wyraźnie mało i rozrzut jest duży.

Wynik ujemny i neutralny też jest cenny: zamyka kierunek i nie pozwala ci w przyszłości tracić czasu na to, co w twojej kategorii nie działa. Zapisuj takie wyniki na równi ze zwycięstwami.

Kiedy wniosek można przenosić na inne produkty

Jeśli na kilku różnych pozycjach jednej kategorii wygrywa ten sam chwyt, na przykład produkt w użyciu kontra białe tło, to już nie przypadek, lecz prawidłowość twojej niszy. Taki wniosek śmiało rozciągaj na nowe karty od razu, bez osobnego testu każdej. Właśnie tak jednorazowe eksperymenty zamieniają się w system: przestajesz testować oczywiste i wydajesz wyświetlenia tylko na naprawdę sporne hipotezy.

Zanim zaczniesz zmieniać kartę, przejdź po liście. Większość "porażkowych" testów jest tak naprawdę po prostu źle postawiona: rzecz nie w złej hipotezie, lecz w warunkach, które zniekształciły wynik. Rozbierz typowe grabie, żeby na nie nie wchodzić.

• Zmieniają kilka elementów naraz i nie rozumieją, co zadziałało. Jeden test, jeden element, inaczej wniosek jest bezużyteczny dla przyszłych kart.
• Zatrzymują za wcześnie. Daj nazbierać się setkom przejść na każdy wariant, a nie parze dni. Patrz na wolumen odzewu, a nie na kalendarz.
• Patrzą tylko na CTR. Wysoki klik przy niskiej konwersji spala budżet reklamowy i wyświetlenia na darmo. Licz zamówienia z wyświetlenia, metrykę końcową.
• Testują w wyprzedaży. Akcje zniekształcają i wolumen ruchu, i zachowanie kupujących, i porównanie traci sens.
• Ruszają cenę podczas testu. Cena zagłusza efekt jakiegokolwiek zdjęcia, i zmierzysz wrażliwość na cenę, a nie na treść.
• Porównują nieporównywalne okresy. Dni robocze kontra weekend, sezon kontra martwy sezon, tydzień z reklamą kontra tydzień bez niej.
• Nie zachowali starej wersji i nie mogą szybko wrócić do zwycięzcy, gdy test się nie udał.
• Infografika nieczytelna na telefonie. Sprawdzaj miniaturkę na małym ekranie: podstawowa publiczność siedzi w aplikacji mobilnej, i drobny tekst po prostu się tam nie czyta.
• Ignorują zewnętrzne wyskoki. Wpis bloggera albo akcja platformy w środku testu psują czystość porównania, takie dni trzeba odnotowywać i uwzględniać.
• Uruchamiają nowy test na niedokończonym. Nakładanie zmian nie pozwala zrozumieć, co dokładnie wpłynęło na metryki.

Mini-checklista uruchomienia testu

• Hipoteza sformułowana jako sprawdzalne twierdzenie z oczekiwanym efektem i przyczyną.
• Testowany jest dokładnie jeden element karty.
• Jest wariant kontrolny albo kontrolna pozycja do porównania.
• Okres wybrany bez akcji, świąt i wyprzedaży.
• Cena i budżet reklamowy ustalone na cały czas testu.
• Metryki bazowe zdjęte przed startem, jest punkt odniesienia.
• Stare pliki i tytuły zachowane do szybkiego wycofania.
• Z góry ustalone, jaki wolumen danych uznać za wystarczający do wniosku.

Zacznij od okładki najbardziej chodliwego produktu, tam najszybciej nazbiera się ruch i najjaśniejszy będzie wynik. Sformułuj jedną sprawdzalną hipotezę, przygotuj alternatywę, przepuść test sekwencyjny z ustaloną ceną i reklamą, a na końcu policz zamówienia z wyświetlenia, a nie osobny CTR. Nie goń za dziesięcioma testami naraz: jeden staranny test tygodniowo przez parę miesięcy zauważalnie przebuduje twój lejek i da zestaw działających reguł dla całego asortymentu. Każdy wniosek, nawet ujemny, zostanie z tobą i zaoszczędzi wyświetlenia na przyszłych kartach.

Żeby szybko przygotować warianty zdjęć do testu, przydają się bezpłatne narzędzia online: usuń tło, wyrównaj kadr i skompresuj obrazy pod wymagania platform bez utraty jakości, żeby porównywać schludne wersje, a nie surowe zdjęcia. A jeśli na testowanie nie ma czasu i chce się od razu mocnej karty, dostępna jest usługa katalogu pod klucz: sesja, obróbka zdjęć, infografika i teksty kart w jednym pakiecie, już z uwzględnieniem tego, co wpływa na CTR i konwersję. Wtedy do testowania zostaną tylko subtelne hipotezy, a nie baza, która i tak jest złożona sensownie. Wybieraj tę drogę, która teraz oszczędza ci więcej wyświetleń i czasu.

Po co testować kartę, skoro można po prostu zrobić ładniej?

Bo estetyka i sprzedaż nie zawsze idą w parze. To, co pięknie wygląda na dużym monitorze, często przegrywa na miniaturce w aplikacji mobilnej. Decyzję powinny podejmować liczby na realnym ruchu, a nie gust, dlatego porównuje się dwa warianty i zostawia zwycięzcę według końcowej metryki.

Ile trzeba czekać, zanim test da wiarygodny wynik?

Nie licz dni, licz wolumen odzewu. Na każdy wariant warto zebrać przynajmniej kilkaset przejść do karty i parę dziesiątek zamówień. Minimalny sensowny horyzont to zwykle tydzień na wariant, żeby wygładzić różnicę między dniami roboczymi a weekendem.

Dlaczego nie można patrzeć tylko na CTR?

Bo jaskrawa okładka może podnieść kliknięcia, ale przyciągnąć ludzi, którzy klikają z ciekawości i nie kupują. Wtedy konwersja spada mocniej, niż wzrósł CTR. Zawsze licz końcową metrykę zamówienia z wyświetlenia = CTR × CR, tylko ona mówi, czy karcie zrobiło się lepiej.

Jak testować, skoro platformy nie mają uczciwego testu równoległego?

Używa się schematów zastępczych: testu sekwencyjnego przed i po, testu na kontrolnej pozycji bliźniaku albo naprzemienności A-B-A-B. Przy każdym z nich trzymaj niezmienną cenę, równy budżet reklamowy i porównywalne okresy, inaczej wynik zniekształcą czynniki zewnętrzne.

Co robić, jeśli test skończył się remisem?

To normalny wynik, a nie porażka. Zostaw wariant prostszy i tańszy w produkcji, albo wzmocnij hipotezę, jeśli zmiana była zbyt nieśmiała, albo przedłuż zbieranie danych, jeśli ruchu było mało. Wynik neutralny też zamyka kierunek i oszczędza czas w przyszłości.