Импорт, парсинг и скрепинг данных на Python

Работа с API, JSON, XML, HTML и SQL, парсинг сайтов

Ratings: 4.38 / 5.00




Description

Центр digital-профессий ITtensive предлагает персонализированные программы с индивидуальными наставниками для освоения актуальных профессий будущего: аналитик данных на Python и программист больших данных.

В этом курсе вы изучите получение данных в Python, используя библиотеку requests API и форматы JSON и XML (включая SOAP).

Научитесь работать с неструктурированными данными в HTML, собирать их и преобразовывать в фреймы данных.

Научитесь собирать данные целиком с сайта в несколько потоков: создадим мультипроцессного робота-паука.

В завершении установите SQLite и загрузите все собранные данные в базу, а также научитесь выбирать из базы данных непосредственно в фреймы данных.

Полностью текстовый конспект к урокам, исходный код, тесты для проверки, дополнительные материалы и обратная связь от методистов доступна на платформе Learme. Напишите нам, чтобы получить доступ к полным материалам курса.

(C) Course Icon by Flat Icons

What You Will Learn!

  • Отправлять HTTP запросы
  • Отправлять GET и POST запросы к API
  • Разбирать JSON, XML, HTML ответы, включая SOAP
  • Использовать BeautifulSoup для парсинга страниц
  • Создавать робота-паука для обхода сайта
  • Импортировать данные в SQL

Who Should Attend!

  • Начинающие разработчики Python с интересом к анализу данных
  • Аналитики, которые используют Python для автоматизации и получения данных