Сухой вывод из исследования Spurious Prompts: нейросети иногда отвечают лучше не на «правильные» инструкции, а

Сухой вывод из исследования Spurious Prompts: нейросети иногда отвечают лучше не на «правильные» инструкции, а на странные, почти случайные формулировки.

Что произошло:
исследователи сравнили обычные промпты вроде «решай пошагово» и «думай как аналитик» с «подложными» — например, «ты хранитель старого маяка». И в ряде задач модель на таких нелепых вводных давала более точные ответы.

Почему это важно для paid ads:
мы часто переоцениваем красивый бриф. Кажется, что чем он логичнее и “умнее”, тем лучше будет результат. Но на практике качество ответа зависит не только от смысла, но и от того, как именно мы задаём рамку задачи.

Что это значит для работы:
1) не застревать на идеальном промпте;
2) тестировать 2–3 разных формулировки одной задачи;
3) сравнивать результат по цифрам: точность, полнота, полезность;
4) если ответ слабый — менять не только текст, но и формат запроса.

Вывод простой: в AI, как и в рекламе, иногда выигрывает не самый “правильный” вариант, а тот, который лучше сработал в тесте. 🔎