Фильтры по User-Agent и IP: как не пускать мусор в связку

Фильтры по User-Agent и IP: как не пускать мусор в связку

Если льешь на лендинг без базовой фильтрации, модерация и боты быстро съедают CTR и ломают статистику. Два фильтра дают максимум пользы на старте: User-Agent и IP-диапазоны. Их задача не «ускорить конверт», а отрезать шум до того, как он попадет в аналитику и антифрод.

— User-Agent режем по пустым, редким и явно автоматизированным строкам: curl, python, okhttp, java, HeadlessChrome, встроенные WebView без нормального браузерного профиля.
— IP-диапазоны сверяем с дата-центрами, прокси-сетями и облаками: если ГЕО у тебя условно бытовое, а заходы идут из хостинговых подсетей, это не лиды, а мусор.
— Для мобильного трафика отдельно проверяй несостыковку UA и ASN: «iPhone» из серверной подсети обычно не приносит денег.

Не делай фильтр слишком агрессивным. Сначала логируй, потом режь. Иначе выкинешь реальных юзеров с корпоративными VPN, старыми устройствами и нестандартными браузерами. Рабочая схема простая: сначала whitelist для целевых ГЕО и нормальных браузеров, потом blacklist для очевидного ботового трафика.

На практике лучше держать фильтрацию на уровне сервера или прокси до лендинга, а не внутри формы. Тогда воронка чище, отчеты честнее, а алгоритмам остается кормить только живых. Пропускаем только целевых, ботов оставляем алгоритмам.