Advanced Web Scraping with Python using Scrapy & Splash

Вам нужно извлекать данные с сайтов, которые блокируют стандартные запросы или требуют сложной обработки JavaScript, но текущие методы не справляются с нагрузкой. Этот материал фокусируется на инженерных задачах парсинга: оптимизации скриптов Splash для предотвращения ошибок 504, настройке кластеров с HAProxy и обходе защиты Google ReCaptcha. Вы научитесь выстраивать сложные цепочки запросов, настраивать Input/Output процессоры для очистки данных и создавать real-time API на базе ScrapyRT и Flask. Курс ориентирован на тех, кто уже знает основы XPath и Scrapy и хочет перейти к профессиональной архитектуре парсеров.