Парсинг и анализ данных на Python: от азов до автоматизации
О чём курс
Вам нужен инструмент для сбора и обработки данных из внешних источников, который превращает сырой HTML или API-запросы в готовые аналитические отчёты. Внутри разбирается полный цикл: от написания мультипроцессных веб-скрейперов и хранения данных в SQLite до сложной визуализации трендов через Matplotlib и автоматической генерации PDF-документов. Материал ориентирован на разработчиков, которые уже знают основы Python и хотят автоматизировать рутинные задачи по сбору информации и созданию регулярной отчетности. Вы научитесь выстраивать пайплайны, которые самостоятельно парсят сайты, анализируют данные с помощью Pandas и отправляют готовые PDF-файлы на почту.
Программа обучения
- Анализ данных
- Импорт и объединение данных (pandas, numpy)
- Преобразование и фильтрация наборов данных
- Математический аппарат линейной регрессии для предсказания трендов
- Парсинг данных
- Работа с HTTP, JSON, XML и SOAP
- Сбор неструктурированных данных из HTML
- Разработка мультипроцессных роботов-пауков
- Интеграция с базой данных SQLite
- Визуализация данных
- Анатомия matplotlib и создание графиков
- Визуализация зависимостей и регрессии (seaborn)
- Анализ временных рядов, скользящих средних и «японских свечей»
- Работа с гео-данными и построение фоновых картограмм (geopandas)
- Генерация отчетов и автоматизация
- Работа с библиотеками reportlab, pypdf2, pdfkit, jinja2
- Шаблонизация HTML и создание PDF из кода
- Отправка email-отчетов с вложениями (smtplib, email)
Другие материалы школы 11
I ITtensive Все материалыОтзывов пока нет. Будьте первым!
Это не розничная цена — это ваш взнос в складчину. Мы собираем группу участников и делим между ними стоимость официального доступа: каждый платит только свою долю, а получает весь материал. Чем больше участников, тем меньше взнос. После того как сумма собрана, мы оформляем официальный доступ и раздаём материалы всем, кто участвовал.
Нажмите кнопку «Получить доступ» на этой странице и следуйте инструкциям. Вас переведёт на форму оплаты — доступны все современные способы (карта, СБП, электронные кошельки). После оплаты на почту придёт письмо с доступом: материалы выдаются в разделе «Мои складчины» на нашем основном сайте skladchik.org. Учтите: в России skladchik.org открывается только через ускоритель интернета (VPN) — настроить его можно за пару минут по инструкции на skladchik-kak-voiti.online.
Да, конечно. Все материалы — видео, PDF, дополнительные файлы — можно скачать к себе на компьютер и пользоваться ими сколько угодно, без ограничений по времени. Ссылки остаются активными в вашей библиотеке «Мои складчины».