Парсинг API на Python
О чём курс
Курс представляет собой интенсивную практическую программу, сфокусированную на профессиональной работе с API через язык программирования Python. В основе обучения лежит уникальный учебный сайт-тренажер stepstat.ru, который функционирует как полноценное веб-приложение, собирающее данные о курсах платформы Stepik. Это позволяет студентам работать с реальными данными: карточками курсов, рейтингами, отзывами, промокодами, статистикой и поисковыми логами, что делает процесс обучения максимально приближенным к реальным задачам разработчика или аналитика данных.
Основная философия курса — «практика прежде всего». Теоретический материал здесь не является самоцелью, а служит надежным фундаментом, чтобы вы могли уверенно ориентироваться в API, не совершая ошибок при написании кода. Программа включает в себя квизы, которые помогут закрепить ключевые концепции, не перегружая при этом учебный процесс. Вы научитесь не просто отправлять запросы, а понимать внутреннюю «кухню» взаимодействия клиент-сервер.
По итогам прохождения курса вы освоите широкий спектр навыков: от уверенного чтения технической документации до глубокой работы с библиотекой requests. Вы научитесь правильно передавать параметры, заголовки и cookies, профессионально обрабатывать объект Response, включая проверку статус-кодов и Content-Type. Особое внимание уделено работе с JSON: вы научитесь разбирать сложные вложенные структуры, корректно обрабатывать пустые значения (null), приводить данные к нормализованному виду и сохранять их в форматах JSON или CSV для дальнейшего анализа.
Курс также охватывает продвинутые темы, необходимые для работы в продакшене: пагинация, batch-запросы, управление rate limiting, использование сессий и HTTP-адаптеров для повышения устойчивости парсинга. Вы разберетесь в различных методах авторизации (API Key, Bearer Token, JWT, Basic Auth, OAuth), научитесь работать со сжатием данных (gzip, deflate, br, zstd) и освоите работу с прокси-серверами, включая стратегии их ротации. Этот курс станет идеальным выбором для тех, кто хочет перестать «тыкаться вслепую» и начать писать чистый, эффективный и надежный код для взаимодействия с любыми современными API.
Программа обучения
Введение Введение Содержание Что такое API Как работает современный API Что такое RESTful API и чем он нам полезен Изучение документации /docs Основы requests. API на пальцах: что это и зачем Установка и импорт Сигнатура метода GET и POST Объект Response Коды ответов HTTP Точка входа в API Фильтруем выдачу Договариваемся с сервером Предъяви своё печенье Работа с JSON-ответами API. Введение Синтаксис JSON и маппинг типов Навигация по структуре JSON Типы данных API: даты, цены, числа и null response.json() и ошибки Нормализация ответа Сохраняем результат в JSON Сохраняем результат в CSV Flatten: расплющиваем вложенные структуры Точная настройка запроса. Query-параметры Path-параметры Комбинированные запросы Пагинация в API Batch-запросы Rate limiting - ограничение на количество запросов Работа с сессиями HTTP Адаптеры Авторизация API. Введение в авторизацию API Bearer, API key, Basic Auth API Key Bearer Token и JWT Basic Auth Cookie и сессии OAuth 2.0 Безопасное хранение ключей и токенов Сжатие HTTP-ответов. Введение: зачем сжатие и когда оно важно Зачем использовать сжатие? deflate базовый алгоритм gzip проверенная классика br современный выбор zstd новейший алгоритм Обратная сторона: CPU vs сеть Сравнение алгоритмов: когда что выбрать Прокси. Введение 2.0 Введение Proxies Используем прокси Серверные прокси Резидентские прокси Мобильные прокси Стратегии ротации прокси Это конец. Куда дальше?
Теги курса
Другие материалы автора 4
ПХ Павел Хошев Все материалыОтзывов пока нет. Будьте первым!
Это не розничная цена — это ваш взнос в складчину. Мы собираем группу участников и делим между ними стоимость официального доступа: каждый платит только свою долю, а получает весь материал. Чем больше участников, тем меньше взнос. После того как сумма собрана, мы оформляем официальный доступ и раздаём материалы всем, кто участвовал.
Нажмите кнопку «Получить доступ» на этой странице и следуйте инструкциям. Вас переведёт на форму оплаты — доступны все современные способы (карта, СБП, электронные кошельки). После оплаты на почту придёт письмо с доступом: материалы выдаются в разделе «Мои складчины» на нашем основном сайте skladchik.org. Учтите: в России skladchik.org открывается только через ускоритель интернета (VPN) — настроить его можно за пару минут по инструкции на skladchik-kak-voiti.online.
Да, конечно. Все материалы — видео, PDF, дополнительные файлы — можно скачать к себе на компьютер и пользоваться ими сколько угодно, без ограничений по времени. Ссылки остаются активными в вашей библиотеке «Мои складчины».