Часто новички бьются об десктопные версии, где антифрод-системы накручены до предела. А решение лежит на поверхности — эмуляция мобильных устройств дает куда больше шансов выжить.
Коротко про мой подход:
🔸 всегда меняю user-agent на мобильный
🔸 урезаю ширину вьюпорта до 375px
🔸 отключаю тяжелые скрипты аналитики, которые часто палятся на мобилках
На самом деле, мобильные версии отдают данные в гораздо более чистом JSON-формате. В итоге парсинг идет быстрее и стабильнее. Что думаете, переходите на mobile-first подходы или любите классический десктоп?
➖➖➖➖➖➖➖➖➖➖
Антон Хоменок про веб-скрейпинг 🕷
Хоменок: web-скрейпинг 🕷
@xomenok_scraping
📱 Как я перестал бояться мобильных версий сайтов
Этот пост опубликован в Telegram-канале Хоменок: web-скрейпинг 🕷. Подписаться можно по ссылке: @xomenok_scraping.