<b>A/B тест subject line в cold email: 3 правила, без которых выборка врёт</b>

<b>A/B тест subject line в cold email: 3 правила, без которых выборка врёт</b>

В subject line тестируют не «красивую формулировку», а один конкретный сигнал: персонализация, длину, вопрос, цифру или имя оффера. Если меняете сразу 2–3 элемента, вы не понимаете, что именно подняло reply rate.

Минимум для сравнения:
— одинаковая база и один сегмент
— одинаковое время отправки
— одинаковый sender и домен
— одинаковый CTA внутри письма

Если тестируете на маленьком объёме, смотрите не на open rate, а на reply rate и positive reply rate. Open rate шумный: его портят Apple Mail Privacy, preview-панели и фильтры. Для subject line важнее, кто дошёл до ответа, а не кто открыл.

Статистически значимым тест можно считать только тогда, когда разница держится не на 20–30 письмах, а на нормальной выборке и повторяется на втором прогоне. Иначе вы ловите случайность: один subject мог попасть в более тёплый список, второй — в холодный хвост.

Практика простая: делайте 2 варианта, меняйте 1 параметр, фиксируйте сегмент, считаете replies после полного цикла follow-up. Так subject line начинает работать как инструмент, а не как угадайка.