A/B тест на имейл кампания
Тест на теми или шаблони върху част от списъка, настройките — продължителност, размер, критерий, — как Push избира победителя и го праща на всички останали, и как да четете резултатите.
A/B тестът праща две до четири версии на кампания до малка част от списъка, изчаква и праща версията с най-добър резултат на всички останали. A/B тестовете са част от плановете Growth и Scale.
Настройте тест
- Във формуляра на кампанията включете Enable A/B Testing.
- Изберете настройките:
- Test Duration — колко да се чака преди избора: от 1 hour до 48 hours. Четири часа и повече дават на повечето хора време да отворят.
- Test Percentage — каква част от списъка получава теста: 10%, 20%, 30% или 50%.
- Winner Criteria — Open Rate или Click Rate.
- Настройте вариантите — до четири с + Add Variant. Всеки има Variant Name, Weight (%) — дела си от теста — и какво променя: Subject Line Override (празно запазва темата на кампанията) и Template (Use campaign template или друг). Теглата трябва да са общо 100 %: докато не са, Total Weight: казва (should equal 100%).
- Създайте кампанията и я изпратете както обикновено.
Тествайте едно нещо наведнъж — две теми с един и същ шаблон или два шаблона с една и съща тема, — за да знаете какво е направило разликата.
Как се избира победителят
Когато тестът започне, кампанията казва A/B test in progress.... След зададеното време Push сравнява вариантите:
- при Open Rate брои проверените отваряния — тези, които Apple Mail и прокси сървърът за изображения на Google правят при доставката, се изключват, защото не са хора;
- изчаква поне 50 имейла от теста да бъдат доставени, до 24 часа повече;
- вариантът с по-висок процент печели и Push го праща на останалата част от списъка.
Резултатите
Страницата на кампанията показва A/B Test Variants: за всеки вариант Sent, Delivered, Opened, Clicked, Open Rate и Click Rate, с Winner до избрания, плюс Winner selected с часа. Обичайният отчет следва отдолу: Отчетът на имейл кампания.
Ако нещо не работи
A/B testing is not available on your current plan.
Планът ви е Starter. A/B тестовете идват с Growth и Scale: Смяна на плана.
Победителят не е изпратен след зададеното време
Доставени са по-малко от 50 тестови имейла. Push чака до 24 часа повече, после избира по-добрия вариант с наличното. Тест върху малък списък казва малко — ползвайте го за списъци от няколко хиляди.
Теглата не дават 100 %
Сменете Weight (%) на вариантите, докато Total Weight: стане 100 %.