testowanie godzin wysyłki

Testowanie godzin wysyłki pozwala wyznaczyć porę o najwyższej skuteczności dla danej bazy odbiorców.

Na czym polega testowanie godzin wysyłki

Testowanie godzin wysyłki to kontrolowany eksperyment prowadzony na grupie odbiorców wiadomości elektronicznych. Jego celem jest sprawdzenie, w jakich porach określona baza adresatów częściej otwiera wiadomości, klika zawarte w nich odnośniki albo wykonuje zaplanowane działanie. Nie chodzi o znalezienie jednej uniwersalnej godziny odpowiedniej dla wszystkich kampanii. Wynik zależy między innymi od stref czasowych odbiorców, ich trybu pracy, rodzaju urządzeń, częstotliwości sprawdzania poczty oraz charakteru samej wiadomości.

Rzetelny test wymaga porównania co najmniej dwóch wariantów różniących się wyłącznie momentem rozpoczęcia wysyłki. Temat wiadomości, treść, nadawca, lista odbiorców, załączniki i odnośniki powinny pozostać takie same. Jeżeli jednocześnie zmienia się tytuł wiadomości albo jej zawartość, nie można wiarygodnie ustalić, czy różnicę w wynikach wywołała godzina wysyłki, czy inny element kampanii. W praktyce porównuje się na przykład wysyłkę poranną, południową i popołudniową, ale konkretne przedziały trzeba dobrać do zachowania badanej grupy.

Przygotowanie próby i podział odbiorców

Przed rozpoczęciem pomiaru należy określić główny wskaźnik, który będzie decydował o wyniku. Może nim być odsetek otwarć, liczba kliknięć, współczynnik odpowiedzi albo wykonanie działania na stronie docelowej. Wskaźnik otwarć nie zawsze odzwierciedla rzeczywiste zainteresowanie, ponieważ systemy pocztowe mogą automatycznie pobierać elementy śledzące, a część klientów pocztowych ogranicza ich obsługę. Z tego powodu kliknięcia lub potwierdzone działania użytkownika bywają bardziej użyteczne przy ocenie skuteczności.

Odbiorców należy podzielić na porównywalne grupy. Podział może być losowy, ale każda grupa powinna mieć podobny udział adresatów aktywnych i nieaktywnych, podobny rozkład domen pocztowych oraz zbliżoną strukturę wcześniejszych reakcji. Nie należy kierować wariantu porannego wyłącznie do nowych odbiorców, a wariantu wieczornego wyłącznie do osób regularnie otwierających wiadomości, ponieważ taki podział zniekształci rezultat. Przy odbiorcach mieszkających w różnych regionach trzeba dodatkowo uwzględnić ich lokalny czas, zamiast traktować godzinę serwera nadawcy jako godzinę kontaktu z użytkownikiem.

Wielkość próby powinna być wystarczająca do wykrycia różnicy, którą uznaje się za praktycznie istotną. Przy małej liczbie adresatów pojedyncze kliknięcia lub opóźnione otwarcia mogą całkowicie zmienić procentowy wynik. Dlatego nie należy ogłaszać zwycięzcy po kilku pierwszych reakcjach. Warto wcześniej ustalić czas obserwacji i sposób zakończenia testu, a następnie stosować te same zasady dla wszystkich wariantów.

Pomiar wyników i typowe błędy interpretacji

Po wysyłce trzeba rejestrować co najmniej moment dostarczenia, czas otwarcia, kliknięcie oraz ewentualne działanie końcowe. Dane należy analizować w tych samych przedziałach czasowych, ponieważ wiadomość wysłana później może mieć mniej czasu na zebranie reakcji. Jeżeli jeden wariant oceniany jest po 24 godzinach, a drugi po kilku dniach, porównanie nie jest symetryczne. Trzeba również oddzielić wiadomości niedostarczone, odbicia stałe i czasowe oraz automatyczne odpowiedzi od właściwych reakcji użytkowników.

Wynik testu może być mylący, gdy wysyłka trafia na święto, dzień wolny, awarię usługi pocztowej albo nietypowe wydarzenie branżowe. Znaczenie ma także częstotliwość kontaktu. Jeżeli odbiorcy otrzymują kilka podobnych wiadomości w krótkim czasie, późniejsze warianty mogą osiągnąć gorszy wynik z powodu zmęczenia komunikacją, a nie przez samą godzinę. Z tego powodu testy warto powtarzać w porównywalnych dniach i dla podobnych typów treści.

Nie należy utożsamiać korelacji z przyczynowością. Wyższy współczynnik kliknięć o określonej porze pokazuje, że w danym eksperymencie wariant osiągnął lepszy rezultat, ale nie dowodzi, że ta godzina będzie skuteczna w każdej kolejnej kampanii. Po wybraniu przedziału warto przeprowadzić dodatkową wysyłkę kontrolną, porównać wynik z wcześniejszym poziomem bazowym i sprawdzić, czy różnica utrzymuje się po zmianie dnia oraz treści.

Znaczenie dla komputera i konfiguracji środowiska pracy

Testowanie godzin wysyłki odbywa się zwykle w aplikacji pocztowej, systemie do obsługi kampanii albo panelu automatyzacji komunikacji. Komputer użytkownika może jednak wpływać na poprawność obserwacji. Nieprawidłowa data i godzina systemowa, błędna strefa czasowa, wyłączona synchronizacja czasu lub ustawienia trybu uśpienia mogą powodować, że wiadomość zostanie uruchomiona później, niż wynika to z harmonogramu. Przy analizie trzeba więc rozróżnić czas zaplanowania zadania, czas przekazania wiadomości do serwera oraz czas jej dostarczenia do skrzynki odbiorczej.

W środowisku domowym lub biurowym należy także sprawdzić stabilność połączenia sieciowego, działanie klienta pocztowego i obciążenie komputera podczas przygotowywania danych. Błąd aplikacji, zawieszony proces synchronizacji albo nieaktualna konfiguracja programu może przerwać wysyłkę częściową i stworzyć pozorną różnicę między wariantami. Warszawskie Pogotowie Komputerowe zajmuje się profesjonalną naprawą laptopów, komputerów PC i podzespołów, dlatego w przypadku problemów z komputerem używanym do przygotowania lub monitorowania testu można rozpocząć od diagnostyki sprzętu, systemu oraz połączenia z siecią.

Końcowy wniosek powinien opisywać konkretną badaną grupę, zakres dat, testowane przedziały czasowe, przyjęty wskaźnik i sposób oceny. Taki zapis pozwala powtórzyć eksperyment po zmianie bazy odbiorców, urządzeń lub narzędzia wysyłkowego. Godzina uznana za korzystną jest więc wynikiem pomiaru dla określonych warunków, a nie stałą właściwością każdej wiadomości.