Парсинг сайтов: Scrapy, Splash, Selenium, requests, bs4

Автоматизируйте сбор данных с любых веб-ресурсов, от простых HTML-страниц до сайтов с динамическим контентом и авторизацией. Внутри разбираются инструменты для разных задач: от легкого requests и BeautifulSoup до продвинутого Scrapy для многостраничных проектов и Selenium для имитации действий пользователя.

Курс сфокусирован на прикладных задачах парсинга:

• Использование XPath для точного поиска элементов на страницах.
• Обход защиты и работа с JavaScript-рендерингом.
• Этичный сбор данных и соблюдение правил файла robots.txt.
• Настройка пауков (spiders) для автоматизированного обхода товаров и категорий.

Программа ориентирована на начинающих Python-разработчиков, желающих освоить инструменты извлечения данных. Вы научитесь писать скрипты, которые самостоятельно переходят по страницам, авторизуются в личных кабинетах и выгружают информацию, даже если на сайте используется бесконечная прокрутка.