Scrapy: Python Web Scraping & Crawling

Одно YouTube-видео или сбор данных вручную с маркетплейсов отнимают часы, но Scrapy позволяет автоматизировать выгрузку цен, отзывов и контактов с любого сайта в пару кликов. Вы научитесь управлять процессом сбора данных от простых списков до обхода сложных антифрод-систем и ограничений.

Внутри разбираются три ключевых блока:

• Создание собственных пауков (spiders): настройка навигации по сайтам и автоматический переход по ссылкам.
• Работа с данными: автоматический экспорт в форматы JSON, CSV, XML и интеграция с базами данных SQLite3, MySQL и MongoDB.
• Обход защиты: использование пользовательских агентов (User-Agents) и прокси-серверов для стабильного сбора информации, на примере парсинга Amazon.

Курс рассчитан на Python-разработчиков и фрилансеров, которым нужны навыки для задач по сбору данных, подготовке датасетов для ML или лидогенерации. Итогом станет набор готовых сканеров, способных извлекать информацию с ресурсов любой сложности.