Импорт, парсинг и скрепинг данных на Python
Работа с API, JSON, XML, HTML и SQL, парсинг сайтов
Description
Центр digital-профессий ITtensive предлагает персонализированные программы с индивидуальными наставниками для освоения актуальных профессий будущего: аналитик данных на Python и программист больших данных.
В этом курсе вы изучите получение данных в Python, используя библиотеку requests API и форматы JSON и XML (включая SOAP).
Научитесь работать с неструктурированными данными в HTML, собирать их и преобразовывать в фреймы данных.
Научитесь собирать данные целиком с сайта в несколько потоков: создадим мультипроцессного робота-паука.
В завершении установите SQLite и загрузите все собранные данные в базу, а также научитесь выбирать из базы данных непосредственно в фреймы данных.
Полностью текстовый конспект к урокам, исходный код, тесты для проверки, дополнительные материалы и обратная связь от методистов доступна на платформе Learme. Напишите нам, чтобы получить доступ к полным материалам курса.
(C) Course Icon by Flat Icons
What You Will Learn!
- Отправлять HTTP запросы
- Отправлять GET и POST запросы к API
- Разбирать JSON, XML, HTML ответы, включая SOAP
- Использовать BeautifulSoup для парсинга страниц
- Создавать робота-паука для обхода сайта
- Импортировать данные в SQL
Who Should Attend!
- Начинающие разработчики Python с интересом к анализу данных
- Аналитики, которые используют Python для автоматизации и получения данных