
Поработаем с получением данных по API из JSON формата
Разберем GET и POST запросы с параметрами
Получим данные по SOAP в XML
Разберем получение неструктурированных данных
Научимся собирать табличные данные
Разберем получение и очистку данных
Разберем работу робота-паука
Научимся запускать парсинг в параллельных процессах
Разберем основы этичного парсинга страниц
Разберем установку SQLite и создание базы данных
Разберем работу с SQL в Python
Разберем, как работать с базой данных при парсинге данных
Центр digital-профессий ITtensive предлагает персонализированные программы с индивидуальными наставниками для освоения актуальных профессий будущего: аналитик данных на Python и программист больших данных.
В этом курсе вы изучите получение данных в Python, используя библиотеку requests API и форматы JSON и XML (включая SOAP).
Научитесь работать с неструктурированными данными в HTML, собирать их и преобразовывать в фреймы данных.
Научитесь собирать данные целиком с сайта в несколько потоков: создадим мультипроцессного робота-паука.
В завершении установите SQLite и загрузите все собранные данные в базу, а также научитесь выбирать из базы данных непосредственно в фреймы данных.
Полностью текстовый конспект к урокам, исходный код, тесты для проверки, дополнительные материалы и обратная связь от методистов доступна на платформе Learme. Напишите нам, чтобы получить доступ к полным материалам курса.
(C) Course Icon by Flat Icons