Udemy
    •  
    •  
    •  
    •  
    •  
    •  
    •  
    •  
Turn what you know into an opportunity and reach millions around the world.
Learn More
Your cart is empty.
Keep shopping
Aprenda AWS GLUE na Prática - Processe Dados na Cloud
Highest Rated
Rating: 4.6 out of 5(52 ratings)
186 students

Aprenda AWS GLUE na Prática - Processe Dados na Cloud

Domine o AWS GLUE com exemplos práticos e explorando recursos essenciais para processamento e integração de dados
Last updated 12/2024
Portuguese

What you'll learn

  • Criação de Jobs via Glue Studio
  • Criação de Jobs via Script Python no Glue
  • Entendimento de Workflows
  • Entendimento de Trigeers
  • Entender os fundamentos do Glue Data Catalog e como utilizá-lo para gerenciar metadados.
  • Explorar o Glue Visual ETL e criar processos ETL sem precisar codificar.
  • Otimizar o uso do S3 e integrar o Glue
  • Monitorar cargas de dados com SUCESSO/ERRO
  • Entender mais sobre a nuvem AWS
  • Explorar o Glue Visual Studio e crie ETL codificando com Python.

Course content

1 section30 lectures3h 36m total length
  • Aprensentação Curso AWS GLUE9:26
  • ETL e Arquitetura do AWS Glue8:06
  • Conta AWS - Detalhes antes da Criação7:40
  • IMPORTANTE SOBRE CONTA AWS - Processamento Glue0:46
  • Criação Conta AWS7:02

    O link disponibilizado pode sofre modificação e não funcionar por ser de domínio da AWS. Caso isso ocorra pesquisar Conta Gratuíta da AWS no sistema de busca.

  • Acessando AWS Management Console5:32
  • Conhecendo Recursos/Serviços Utilizados na AWS7:24
  • Configurando Policy/Roles para Acessos dos Recursos GLUE6:58
  • Configurando o S35:23
  • Iniciando no AWS Glue3:50
  • Entendendo o que é o Glue Data Catalog7:20
  • Glue Data Catalog na Prática com Crawlers - Parte 18:17
  • Glue Data Catalog na Prática com Crawlers - Parte 27:22
  • Glue Data Catalog - Outras Propriedades + Athena7:29
  • Prática AWS Glue Catalog + Crawler
  • Explorando Glue Visual ETL - Introdução e Propriedades9:12
  • Explorando Glue Visual ETL - Criando um Job na Prática10:25
  • Explorando o Glue Visual ETL - Modificando o JOB4:42
  • Prática Glue Visual ETL
  • ETL via Script Glue - Introdução Ambiente7:00
  • ETL via Script Glue - Execução Prática 15:46
  • ETL via Script Glue - Execução Prática 1 - Log Erro e Ajustes8:14
  • ETL via Script Glue - Execução Prática 2 - Parâmetros + Leitura Dados S39:30
  • ETL via Script Glue - Execução Prática 2 - Filtros e Criação de campos no ETL7:25
  • ETL via Script Glue - Execução Prática 2 - Salvando os dados no S35:57
  • ETL via Script Glue - Execução Prática 2 - Leitura a partir do Glue Data Catalog8:41
  • Pratica ETL Script Glue
  • Introdução a Orquestração + WorkFlow + Triggers5:38
  • Triggers Glue na Prática7:55
  • WorkFlow Glue na Prática6:41
  • Introdução Terraform e Yaml para esteira CI/CD5:28
  • Verificando Cobranças e Encerrar Conta AWS4:23
  • Desativar recursos para não gerar novos custos0:22

Requirements

  • Lógica de Programação
  • Básico da Área de Dados

Description

Aprenda a dominar o AWS Glue com exemplos práticos e explorando recursos essenciais para processamento e integração de dados!

Você está buscando um curso prático e objetivo para aprender como aproveitar ao máximo o AWS Glue, uma das ferramentas mais poderosas da AWS para ETL e integração de dados? Este curso foi desenvolvido para te guiar do básico ao avançado, com foco em exemplos reais que você pode aplicar no seu dia a dia.

O que você vai aprender neste curso:

  • Como configurar sua conta AWS de forma segura e eficiente.

  • Entender os fundamentos do Glue Data Catalog e como utilizá-lo para gerenciar metadados.

  • Explorar o Glue Visual ETL e criar processos ETL sem precisar codificar.

  • Criar pipelines ETL usando scripts Python personalizados no Glue.

  • Configurar Triggers e Workflows para orquestrar suas tarefas Glue.

  • Otimizar o uso do S3 e integrar o Glue com serviços como Athena para consultas SQL.


Por que escolher este curso?

  • Prática desde o início: A cada tópico, você irá implementar soluções reais, explorando recursos do Glue diretamente no ambiente AWS.

  • Conteúdo atualizado: Abordamos desde conceitos básicos até a introdução a esteiras de automação, conectando o AWS Glue a práticas modernas de desenvolvimento.

  • Experiência condensada: Em pouco mais de 3 horas, você será capaz de executar um ETL completo e orquestrar fluxos de trabalho no Glue.

Estrutura do curso:

  1. Configuração do Ambiente AWS

    • Criação de conta e configuração do console AWS.

    • Políticas de segurança e permissões essenciais.

  2. Exploração dos Recursos do AWS Glue

    • Introdução ao Glue Data Catalog.

    • Configuração de crawlers e exploração prática de metadados.

  3. Processos ETL no Glue

    • Implementação de workflows com Glue Visual ETL.

    • Desenvolvimento de processos ETL com scripts Python, incluindo leitura, transformação e gravação de dados no S3.

  4. Orquestração e Automação

    • Configuração de triggers e workflows para automação de processos.

    • Introdução ao Terraform e Yaml para percepção de como a construção dos recursos podem ser automatizados através de esteiras CI/CD.

  5. Dicas para Encerramento da Conta Gratuita

    • Garantindo que você não terá cobranças indesejadas.

Para quem é este curso?

  • Iniciantes em AWS que desejam entender o Glue e seu papel no ecossistema de dados da AWS.

  • Profissionais de dados que querem expandir seus conhecimentos sobre ferramentas de ETL na nuvem.

  • Desenvolvedores que buscam criar pipelines de dados modernos e eficientes.

Requisitos:

  • Conta AWS (você aprenderá a criá-la no curso).

  • Conhecimento básico de conceitos de nuvem e ETL é útil, mas não obrigatório.


IMPORTANTE: Para esse curso sugerimos a criação da conta AWS. Caso não deseje criar a conta não terá problema poderá acompanhar todo o curso. Se criar a conta, para o processamento dos dados possivelmente haverá cobrança junto a AWS. No vídeo de apresenação isso é informado.

Who this course is for:

  • Profisisonais que se interessam pela área de Dados/Cloud
  • Engenheiro de Dados
  • Analistas de Dados
  • Profissionais da Azure/AWS/Google Cloud GCP
  • Analistas de Sistemas