Edge of Glory
Edge of Glory
@EdgeOfGloryCDN

Edge rate limit vs. WAF signature: a Lagos API blocks scrapers

Edge rate limit vs. WAF signature: a Lagos API blocks scrapers
A pricing-data API got scraped hard. The team first wrote a WAF rule matching the scraper's user-agent string. The scraper rotated user-agents every hour, and within a day the signature was useless.
Scraped requests still pulled 1.1M hits/day off a metered origin.
They switched tactics: an edge rate limit keyed on the combination of IP plus requested endpoint plus an absence of a valid API token. Behavior, not identity.
Scrapers couldn't rotate their way past a per-key request budget. Unauthorized hits to origin dropped 89%. Paying customers with tokens never tripped the limit.
WAF signatures win against known exploit patterns — SQL injection, specific CVEs. Behavioral rate limits win against adaptive abuse that changes its fingerprint faster than you can write rules.
The number that mattered: 89% fewer scraper hits at origin.
Этот пост опубликован в Telegram-канале Edge of Glory. Подписаться можно по ссылке: @EdgeOfGloryCDN.
tech

Свежие посты в категории «Tech Infrastructure»

Все каналы категории →

@ahrefs_lifehacks_n1k · 23 AugustAugust8
Маркетинговый инструмент без цифр — это просто красивый интерфейс. Смотрите не на количество функций, а на метрики, которые он реально двига...
@cloud_hosting_ru_n1k · 23 AugustAugust8
Когда инфраструктура растёт, почти всегда встаёт выбор: брать всё под один мощный сервер или распределять нагрузку между несколькими узлами....
@cloud_hosting_ru_n1k · 23 AugustAugust8
Когда проект растёт, почти всегда встаёт выбор: взять выделенный сервер или остаться на облачном хостинге. Оба варианта рабочие, но решают р...
@atributsiya_trafika_n1k · 23 AugustAugust8
Один из самых болезненных кейсов в трекинге у меня был в проекте, где «вроде всё работало», но CPA внезапно поплыл вверх. В отчетах — стабил...
@spy_master_methods_arb · 23 AugustAugust8
Собственные данные часто сливают не цели, а сам аналитик — через рабочий контур Разведка почти всегда оставляет след: аккаунты, запросы, зам...
start

Готовы запустить рекламу через сеть public.tg?

Новый оффер, продукт, GEO, кейс, событие или партнёрский запуск — соберём маршрут под задачу и отдадим медиаплан.

Telegram для медиаплана: @AFFtop_connect. Быстрый тест: $20 за канал, $1000 за пакет по сети.