Web Scraping com Java em Marketplace

Name: Web Scraping com Java em Marketplace
Rating: 4.3 (11 reviews)

Web Scraping desenvolvido com Java, onde é extraído os dados de produtos de um Marketplace e gerada uma planilha

Created byWellinson Gabriel

Last updated 11/2023

Portuguese

Portuguese [Auto],

What you'll learn

Web Scraping
Raspagem de dados
Extração de informações da Web
Web Scraping com Selenium
Geração de planilhas com java

Course content

5 sections • 5 lectures • 1h 18m total length

Introdução ao Web Scraping1:02
Explicação do que se trata o Web Scraping e quando utiliza-lo

Arquivos e programas utilizados
WebDriver Edge, WebDriver Chrome, Java e Eclipse IDE
**Caso precise dos links, procure pelo vídeo no meu canal do YouTube.

Configurando projeto e automatizando acesso a sites16:15
Esse é o primeiro vídeo de uma playlist que explica como pode ser feito Web Scraping (raspagem de dados), de um marketplace utilizando a linguagem Java e a biblioteca Selenium, com geração de planilha contendo os dados extraídos. Nesse vídeo configuramos o projeto com todas as dependências necessárias, também configuramos as opções fundamentais para um bom funcionamento do WebDriver e por fim automatizamos o acesso ao marketplace através do sistema desenvolvido.

Arquivos e programas utilizados
WebDriver Edge, WebDriver Chrome, Java e Eclipse IDE
**Caso precise dos links, procure pelo vídeo no meu canal do YouTube.

Raspando dados de produtos13:49
Esse é o segundo vídeo de uma playlist que explica como pode ser feito Web Scraping (raspagem de dados), de um marketplace utilizando a linguagem Java e a biblioteca Selenium, com geração de planilha contendo os dados extraídos. Nesse vídeo entendemos a estrutura da página e aprendemos a fazer a raspagem de dados, obtendo todos os valores e informações pertinentes aos produtos.

Arquivos e programas utilizados
WebDriver Edge, WebDriver Chrome, Java e Eclipse IDE
**Caso precise dos links, procure pelo vídeo no meu canal do YouTube.

Estruturando dados raspados24:11
Esse é o terceiro vídeo de uma playlist que explica como pode ser feito Web Scraping (raspagem de dados), de um marketplace utilizando a linguagem Java e a biblioteca Selenium, com geração de planilha contendo os dados extraídos. Nesse vídeo estruturamos os dados raspados para ser feito a inserção desses dados em uma planilha.

Arquivos e programas utilizados
WebDriver Edge, WebDriver Chrome, Java e Eclipse IDE
**Caso precise dos links, procure pelo vídeo no meu canal do YouTube.

Preenchendo planilha com dados raspados23:16
Esse é o quarto vídeo de uma playlist que explica como pode ser feito Web Scraping (raspagem de dados), de um marketplace utilizando a linguagem Java e a biblioteca Selenium, com geração de planilha contendo os dados extraídos. Nesse vídeo criamos e preenchemos uma planilha utilizando dados raspados de um market place, com informações como descrição, parcelas e valores, podendo ser utilizadas posteriormente para comparações entre diferentes lojas por exemplo.

Arquivos e programas utilizados
WebDriver Edge, WebDriver Chrome, Java e Eclipse IDE
**Caso precise dos links, procure pelo vídeo no meu canal do YouTube.

Requirements

É recomendável saber o básico de lógica de programação
Ter tido contato com Java facilitará o entendimento

Description

Web Scraping desenvolvido com Java, onde é extraído os dados de produtos de um Marketplace e gerada uma planilha com as informações desses produtos.

O que é Web Scraping?

Web Scraping é uma técnica que permite a raspagem de dados de um site, ou seja, possibilita copiarmos informações de um site para outro local. Essa técnica é muito utilizada em casos onde o site não tem uma api para fornecer as informações necessárias.

Essa é uma aplicação Java onde será ensinado uma das formas que podemos fazer Web Scraping de uma página web de venda de produtos. Utilizaremos a biblioteca Selenium juntamente com um Web Driver que simulará um navegador, com isso teremos acesso ao site de produtos, então criaremos uma busca automática por um tipo de produto, e faremos a raspagem de todos os produtos da página, onde conterão várias informações de características dos produtos, além de preço a vista a prazo e quantidade de parcelas.

Vamos estruturar essas informações no Java para podermos manipular de forma mais coesa. Com essas informações manipuladas faremos a implementação de um método que cria uma planilha eletrônica separando em colunas cada tipo de informação obtida de cada produto raspado.

Você poderá replicar essa técnica em praticamente qualquer site, o que é muito vantajoso visto que conseguimos raspar muitas informações de forma automática e simultânea.

Who this course is for:

Para quem deseja automatizar processos com java
Para quem quer obter diversas informações e não tem uma api disponível

Web Scraping com Java em Marketplace

What you'll learn

Explore related topics

Course content

Introdução ao Web Scraping1 lecture • 1min

Configurando projeto e automatizando acesso a sites1 lecture • 16min

Raspando dados de produtos1 lecture • 14min

Estruturando dados raspados1 lecture • 24min

Preenchendo planilha com dados raspados1 lecture • 23min

Requirements

Description

Who this course is for: