Scrapy для новичков

12 участников

О чём курс

Парсинг одного из крупнейших сайтов электронной коммерции, например Amazon, наглядно показывает, как извлекать данные с веб-ресурсов в промышленных масштабах. Вы разберете процесс создания пауков для автоматического сбора контента с нескольких страниц сайта одновременно.

Внутри разбираются:

  • Техники работы с CSS-селекторами и XPath для точного извлечения информации.
  • Методы обхода ограничений сайта с помощью ротации User-Agents и настройки прокси.
  • Экспорт собранных данных в форматах CSV, XML и JSON.
  • Основы работы с базами данных для сохранения результатов парсинга.

Курс ориентирован на тех, кто владеет Python на базовом уровне и хочет применять парсинг для задач машинного обучения или создания поисковых роботов. Изучив эти инструменты, вы сможете автоматизировать сбор данных с любых веб-ресурсов, преодолевая встроенные защиты от сканирования.

Программа обучения

  • Парсинг веб-страниц с помощью Scrapy
  • Создание пауков
  • Работа с CSS-селекторами
  • Работа с Xpath-селекторами
  • Вход на сайты через Scrapy
  • Обход ограничений с помощью User-Agents
  • Обход ограничений с помощью прокси
  • Экспорт данных в CSV, XML, JSON
  • Основы работы с базами данных
Складчина создана 11 ноября 2020 г. · описание обновлено 23 марта 2026 г.
248 ₽ 849 ₽