test A/B layoutu

Test A/B layoutu porównuje różne układy graficzne tej samej wiadomości.

Co konkretnie zmienia się w teście układu

Test A/B układu polega na rozesłaniu dwóch wariantów tej samej wiadomości, które różnią się wyłącznie rozmieszczeniem elementów — kolejnością bloków, liczbą kolumn, wielkością nagłówka, umiejscowieniem i formą przycisku wezwania do działania czy proporcją tekstu do grafiki. Kluczowa zasada brzmi: jedna zmienna na raz. Jeśli wariant B ma inny układ i jednocześnie inny temat wiadomości, wynik nie powie, który czynnik zadziałał. Podział bazy musi być losowy, a nie oparty na kolejności adresów w bazie, bo posortowana lista niesie ukryte zależności — dawniej zapisani odbiorcy zachowują się inaczej niż nowi. Wysyłka obu wariantów powinna iść w tym samym oknie czasowym, inaczej pora dnia stanie się drugą, niekontrolowaną zmienną.

Jak taki test wygląda w praktyce narzędziowej

Typowy schemat to wydzielenie z bazy dwóch niewielkich grup testowych, na przykład po dziesięć procent, wysłanie do nich obu wariantów i rozesłanie zwycięskiego układu do pozostałych osiemdziesięciu procent po ustalonym czasie. Wybór zwycięzcy opiera się zwykle na kliknięciach, a nie na otwarciach — układ nie wpływa na to, czy ktoś wiadomość otworzył, bo decyzja o otwarciu zapada przed zobaczeniem treści. Realny problem techniczny polega na tym, że wiadomość HTML w poczcie renderuje się inaczej niż strona internetowa: Outlook na Windows składa treść silnikiem Worda, przez co ignoruje część reguł CSS, kiepsko radzi sobie z układem opartym na flexboksie i wymusza powrót do tabel. To dlatego dwa warianty potrafią różnić się na ekranie testowym, a u połowy odbiorców wyglądać identycznie.

Wnioski, których wynik nie uprawnia

Najczęstszy błąd to kończenie testu za wcześnie. Przy grupie kilkuset osób różnica kilku kliknięć mieści się w wahaniach losowych, a mimo to bywa ogłaszana jako zwycięstwo i wdrażana na stałe. Drugi błąd to zapominanie o tym, gdzie wiadomość jest oglądana — jeśli ponad połowa odbiorców czyta na telefonie, układ dwukolumnowy w wariancie B przegra nie dlatego, że jest gorszy, tylko dlatego, że na wąskim ekranie kolumny się składają. Trzeci to efekt nowości: pierwsza wysyłka w nietypowym układzie wypada lepiej po prostu dlatego, że wyróżnia się na tle poprzednich, a przewaga znika przy trzeciej powtórce. Warto też pamiętać, że blokowanie obrazów u części odbiorców zamienia elegancki, graficzny wariant w pustą ramkę z tekstem alternatywnym, więc test układu bez sprawdzenia wersji bez grafik mierzy tylko połowę rzeczywistości.

Stanowisko pracy, na którym takie testy powstają

Do prowadzenia wysyłek potrzebny jest sprzęt, który nie zawodzi w środku kampanii: stabilne łącze, sprawny dysk, przeglądarka nieobciążona podejrzanymi rozszerzeniami i system bez oprogramowania podmieniającego certyfikaty. Zajmujemy się właśnie tą warstwą — przyspieszamy wolno działające laptopy, wymieniamy nośniki na SSD, usuwamy niechciane oprogramowanie i naprawiamy połączenia sieciowe, przez które przestają działać panele narzędzi wysyłkowych. Warszawskie Pogotowie Komputerowe działa całodobowo we wszystkie dni tygodnia, obsługując zarówno pojedynczych klientów, jak i zespoły firmowe. Sprzęt odbieramy i zwracamy własnymi kierowcami, bez opłaty transportowej i bez kuriera, a na czas naprawy udostępniamy laptop zastępczy, żeby praca nie stanęła.