Скрапинг на 360°: от простых HTTP-запросов до использования компьютерного зрения

За 40 минут вы разберетесь, как устроен современный веб-скрапинг. Начнем с основ: HTTP-запросы, прокси (datacenter, residential, mobile), автоматизация браузеров. Затем посмотрим, как работает CAPTCHA, что такое fingerprinting, как сайты вычисляют ботов и как это обходят.

Вы узнаете:

• какие бывают прокси и зачем они нужны;
• как устроены стелс-браузеры и «человекоподобные» генераторы трафика;
• что делают безопасники, чтобы защитить сайты;
• как устроены WAF- и антибот-системы.

Если вы хотите понять, как сегодня собирают данные с веба и как этому мешают, – приходите.