Web Scraping com Python e Beautiful Soup

Name: Web Scraping com Python e Beautiful Soup
Rating: 4.0 (630 reviews)

Aprenda sobre extração de dados da web com Python 3 e Beautiful Soup 4.

Created byMarcos Castro, Thomas William

Last updated 8/2016

Portuguese

What you'll learn

Aprender a extrair dados da web.
Aprender sobre a biblioteca Beautiful Soup.
Aprender sobre o módulo requests.
Desenvolver um projeto final.

Course content

6 sections • 63 lectures • 5h 7m total length

Apresentação1:43
Nessa aula iremos apresentar os instrutores e o curso.
Preparando o ambiente10:50
Nessa aula iremos preparar o ambiente para podermos programar em Python com Beautiful Soup.
Primeiros passos3:22
Nessa aula daremos os primeiros passos na linguagem Python.
Utilizando variáveis2:58
Nessa aula iremos aprender a utilizar variáveis.
Operadores4:00
Nessa aula iremos conhecer alguns operadores.
Entrada de dados2:15
Nessa aula iremos aprender a fazer entrada de dados.
Tomando decisões2:23
Nessa aula iremos conhecer o comando if para tomar decisões.
Listas3:19
Nessa aula iremos conhecer as listas.
Tuplas1:33
Nessa aula iremos aprender sobre tuplas.
Dicionários1:35
Nessa aula iremos aprender sobre dicionários.
Conjuntos2:33
Nessa aula conheceremos mais uma estrutura de dados: conjuntos (sets).
Arquivos2:19
Nessa aula aprenderemos a trabalhar com arquivos.
Loops3:28
Nessa aula iremos aprender sobre loops.
Criando funções2:13
Nessa aula iremos criar nossas próprias funções.

Introdução ao Web Scraping6:49
Nessa aula faremos uma introdução ao web scraping.
Estrutura de Páginas WEB10:48
Nessa aula vamos aprender sobre a estrutura de uma página web.
O que é Beautiful Soup?4:18
Nessa aula será feita uma breve introdução sobre o Beautiful Soup.
Criando um objeto BeautifulSoup4:44
Nessa aula iremos aprender a criar uma instância de BeautifulSoup.
Acessando tags HTML2:40
Nessa aula iremos acessar tags HTML.
Acessando os atributos das tags3:24
Nessa aula iremos aprender a acessar os atributos das tags.
Extraindo texto do conteúdo HTML4:14
Nessa aula iremos extrair texto (strings) do conteúdo HTML.
Navegando usando as tags HTML4:33
Nesse curso iremos aprender a navegar usando as tags HTML.
Navegando nos filhos - Parte 19:03
Nessa aula iremos aprender a navegar nos elementos filhos.
Navegando nos filhos - Parte 26:10
Nessa aula iremos aprender a navegar nos elementos filhos.
Navegando nos pais7:02
Nessa aula iremos aprender a navegar para os pais (para cima da árvore).
Navegando nos irmãos6:03
Nessa aula iremos aprender a navegar pelos irmãos (lateralmente na árvore).
Navegando entre os elementos5:55
Nessa aula iremos aprender a navegar entre os elementos.
Buscando elementos com find9:20
Nessa aula iremos aprender a buscar elementos com função find.
Buscando elementos com find_all5:02
Nessa aula iremos aprender a buscar elementos com find_all.
Buscando elementos com find_parent e find_parents7:09
Nessa aula iremos aprender a buscar elementos com find_parent e find_parents.
Buscando irmãos7:23
Nessa aula iremos aprender a buscar irmãos.
Buscando o próximo elemento e o anterior5:01
Nessa aula iremos aprender a buscar o próximo elemento e o anterior.

Introdução ao HTTP10:11
Nessa aula iremos falar sobre o HTTP.
Métodos HTTP4:23
Nessa aula iremos aprender sobre os métodos HTTP.
Http Status Messages5:04
Nessa aula iremos falar sobre http status messages.
Plugin HttpFox2:27
Nessa aula iremos falar do plugin HttpFox.
Ferramenta do Desenvolvedor Chrome1:34
Nessa aula iremos falar sobre a ferramenta do desenvolvedor Chrome, uma alternativa ao HttpFox do Firefox.
Introdução ao módulo requests6:49
Nessa aula faremos uma introdução ao módulo requests. Esse módulo serve para fazer requisições HTTP.
Utilizando o método POST3:52
Nessa aula iremos aprender a utilizar o método POST.
Status code e acessando cabeçalho HTTP5:14
Nessa aula iremos aprender a verificar o status da requisição e acessar o cabeçalho HTTP.
Simulando o envio de um cabeçalho HTTP8:37
Nessa aula iremos simular o envio de um cabeçalho HTTP.
Cookies6:55
Nessa aula iremos falar sobre cookies,
Trabalhando com cookies3:58
Nessa aula iremos aprender a trabalhar com cookies.
Acompanhando redirecionamento4:20
Nessa aula iremos aprender a acompanhar o redirecionamento.
Utilizando timeout2:28
Nessa aula iremos aprender a utilizar o timeout.
Erros e exceções5:36
Nessa aula iremos falar sobre erros e exceções.
Trabalhando com JSON Response3:39
Nessa aula iremos trabalhar com JSON Response.
Persistir parâmetros com Session Object2:29
Nessa aula aprenderemos a persistir parâmetros com Session Object.
Proxy5:15
Nessa aula iremos aprender sobre proxy.
Trabalhando com proxies3:47
Nessa aula iremos trabalhar com proxies.
Download de imagens com requests2:00
Nessa aula iremos aprender a fazer o download de imagens com requests.
Autenticação simples com requests1:24
Nessa aula iremos aprender a fazer uma autenticação simples com requests.

Baixando o conteúdo da página7:33
Nessa aula iremos baixar o conteúdo de uma página da Saraiva resultado de uma busca que iremos fazer na página.
Obtendo a lista de produtos5:51
Nessa aula iremos obter a lista de produtos.
Obtendo a página do produto5:08
Nessa aula iremos obter a página do produto.
Obtendo outros dados do produto6:30
Nessa aula iremos obter outros dados do produto e retornar como um JSON.

Requirements

É aconselhável ter uma noção da linguagem de programação Python.

Description

Que tal extrair dados da web? Nesse curso você saberá como fazer web scraping com Python 3 e Beautiful Soup 4. Web scraping é a extração de dados de páginas web.

Python é uma excelente linguagem de programação, fácil de aprender e que possui recursos fantásticos. Beautiful Soup é uma biblioteca feita em Python para extração de dados de arquivos HTML e XML.

Atualmente há uma grande necessidade de soluções para filtragem de informações da internet. Com esse curso, você poderá desenvolver aplicações para obter diversas informações da web automatizando todo esse processo utilizando a linguagem Python e o poderoso módulo Beautiful Soup.

O que está esperando? Cadastre-se agora mesmo e mergulhe no mundo do web scraping!

Who this course is for:

Todos que estiverem interessados em extração de dados podem participar desse curso.

Web Scraping com Python e Beautiful Soup

What you'll learn

Explore related topics

Course content

Introdução a Linguagem Python14 lectures • 45min

Beautiful Soup 418 lectures • 1hr 50min

Requests20 lectures • 1hr 30min

Projeto Final - Saraiva4 lectures • 25min

Projeto Final - Novatec5 lectures • 36min

Considerações Finais2 lectures • 2min

Requirements

Description

Who this course is for: