Магия чепухи: у промпт-инжиниринга появился неудобный враг.

Магия чепухи: у промпт-инжиниринга появился неудобный враг.

Свежая работа про “spurious prompts” бьёт по простой вере: будто ИИ лучше работает только от строгих инструкций, чеклистов и логики в столбик. Оказалось, иногда нейросети отвечают точнее, если им подкинуть почти бессмысленную ролевую рамку: «хранитель маяка», «ткач гобеленов», любые образные, но неинформативные роли.

Для perf-команд это неприятный поворот. Ломается привычная схема:
1) чёткая задача
2) жёсткий формат
3) стабильный результат

Побеждает не всегда самый “умный” промпт. Иногда выигрывает текст, который просто лучше активирует модель.

Что это значит на практике:
- не переоценивать красивую методологию промптов;
- тестировать не только структуру, но и тон/ролевую оболочку;
- сравнивать качество ответов на одном и том же запросе, а не верить в «правильный шаблон» по умолчанию.

Главный проигравший тут — иллюзия контроля.
Главный вывод — промпты нужно не писать, а проверять. Редко, но метко.