Когда «креатив-победитель» врёт

Когда «креатив-победитель» врёт

Заметил странную вещь: чем красивее график в дашборде, тем меньше я ему верю. Выкатываешь восемь вариантов, один вылетает вперёд по CTR — и команда уже хочет масштабировать. А через три дня он сдувается.

Дело не в усталости аудитории. Дело в том, что мы празднуем победу на выборке, где разница в два клика выглядит как закономерность. Тестирование — это не поиск чемпиона. Это дисциплина не обмануться раньше времени.

Я всё чаще ловлю себя на мысли, что **главный навык тут — не запускать тесты, а не доверять первым цифрам**. Самый дорогой креатив — тот, который выиграл случайно, а мы поверили.

— @CreativeTestingRu