Udemy
    •  
    •  
    •  
    •  
    •  
    •  
    •  
    •  
Turn what you know into an opportunity and reach millions around the world.
Learn More
Your cart is empty.
Keep shopping
Webscraping com scrapy
Rating: 4.0 out of 5(5 ratings)
26 students

Webscraping com scrapy

scrapy python selenium requests
Last updated 6/2023
Portuguese
Portuguese [Auto],

What you'll learn

  • Criar projetos de webscraping em python
  • Salvar dados em banco de dados sql e nosql (sqlite e mongodb)
  • Integrar Selenium e Scrapy
  • Aprender a usar proxies, baixar imagense e arquivos com scrapy.

Course content

2 sections • 70 lectures • 12h 20m total length
  • Configurações Iniciais2:35
  • Instalando e iniciando scrapy5:51

Requirements

  • É necessário saber o básico de python, porém não é necessário saber nada de scrapy. Curso inicia do zero.

Description


Deseja aprender a fazer webscraping com o melhor framework do mercado, usando Python e Scrapy? Este curso abrange mais de 70 aulas e oferece mais de 12 horas de conteúdo, abordando uma variedade de conhecimentos e abordagens para sites dinâmicos e estáticos.

Ao longo do curso, você aprenderá a utilizar proxies, as melhores práticas de webscraping, como implantar suas spiders no render e integrá-las a um aplicativo web Flask. Além disso, você descobrirá como fazer integração com bancos de dados NoSQL e SQL, utilizar ORM (Object-Relational Mapping), lidar com paginação dinâmica com JavaScript, integrar com o scrapy-selenium para acessar sites que exigem JavaScript e aprenderá a acessar sites sem a necessidade de JavaScript. Também serão abordadas técnicas para descobrir e extrair dados através de APIs, além de orientações sobre como seguir as políticas e as melhores práticas estabelecidas pelos sites.

Para iniciar o curso, é recomendado ter um conhecimento básico de Python, embora muitos conceitos básicos sejam abordados para permitir que os alunos progridam. Além disso, você aprenderá a utilizar não apenas a spider padrão do Scrapy, mas também crawlspiders.

Na parte avançada do curso, serão abordados tópicos como o entendimento de pipelines e como configurar itens para melhorar o desempenho de suas spiders. Essas técnicas avançadas irão aprimorar sua habilidade de webscraping, permitindo que você extraia dados de maneira eficiente e confiável de uma variedade de sites.

Ao concluir este curso de webscraping com Python e Scrapy, você estará preparado para enfrentar desafios reais de extração de dados na web, dominando o uso do framework Scrapy e suas diversas funcionalidades. Não perca a oportunidade de se tornar um especialista em webscraping e aplicar essas habilidades para diversas finalidades, como pesquisa de mercado, análise de dados e muito mais. Matricule-se agora mesmo e expanda suas habilidades no mundo da programação!

Who this course is for:

  • Desenvolvedores iniciantes em python e que queiram aprender scrapy e webscraping com python.