Udemy
    •  
    •  
    •  
    •  
    •  
    •  
    •  
    •  
Turn what you know into an opportunity and reach millions around the world.
Learn More
Your cart is empty.
Keep shopping
Domine AWS Glue e KNIME: ETL e Integração de Dados
Rating: 4.5 out of 5(5 ratings)
55 students

Domine AWS Glue e KNIME: ETL e Integração de Dados

Aprenda a Construir Pipelines de Dados Eficientes e Automatizados Usando as Melhores Ferramentas de ETL
Last updated 7/2025
Portuguese
Portuguese [Auto],

What you'll learn

  • AWS GLUE: Criação de Jobs via Glue Studio
  • AWS GLUE: Criação de Jobs via Script Python no Glue
  • AWS GLUE: Entendimento de Workflows
  • AWS GLUE: Entendimento de Trigeers
  • AWS GLUE: Entender os fundamentos do Glue Data Catalog e como utilizá-lo para gerenciar metadados
  • AWS GLUE: Explorar o Glue Visual ETL e criar processos ETL sem precisar codificar
  • AWS GLUE: Otimizar o uso do S3 e integrar o Glue
  • AWS GLUE: Monitorar cargas de dados com SUCESSO/ERRO
  • AWS GLUE: Entender mais sobre a nuvem AWS
  • KNIME: Conceitos fundamentais de integração de dados
  • KNIME: Apresentação da interface do KNIME
  • KNIME: Manipulação e limpeza inicial dos dados
  • KNIME: Uso de nós de transformação para ajuste de formatos
  • KNIME: Utilização de APIs para agregar informações adicionais
  • KNIME: Entendendo a arquitetura de dados no KNIME
  • KNIME: O que são Nós, finalidade, instalação e reaload
  • KNIME: Como funciona um workflow e quais são as formas de construção
  • KNIME: Quais são os principais status dos Nós
  • KNIME: Nós: CSV FILTER, COLUMN FILTER, ROW AGGREGATOR,ROW FILTER,SORTER,RANK
  • KNIME: Nós: EXCEL READER, EXCEL WRITER, JOINER, RULE ENGINER, STRING MANIPULATION
  • KNIME:Nós: WEBPAGE RETRIEVER, XPATH, INTERACTIVE TABLE, TABLE CREATOR, GET REQUEST
  • KNIME: Nós: JSON PATH, DB CONNECTOR, DB QUERY READER
  • KNIME: Instalação do postgres
  • KNIME: Manipulando dados em banco de dados
  • KNIME: Exportando Workflow
  • KNIME: Importando Workflow
  • KNIME: Webscraping em site com KNIME

Course content

2 sections • 56 lectures • 6h 30m total length
  • Apresentação ao Curso AWS Glue9:26
  • INFORMAÇÕES IMPORTANTES - Leia antes de começar o curso0:23
  • ETL e Arquitetura do AWS Glue8:06
  • Conta AWS - Detalhes antes da Criação7:40
  • IMPORTANTE SOBRE CONTA AWS - Processamento GLUE0:46
  • Criação Conta AWS7:02
  • Acessando AWS Management Console5:32
  • Conhecendo Recursos/Serviços Utilizados na AWS7:24
  • Configurando Policy/Roles para Acessos dos Recursos GLUE6:58
  • Configurando o S35:23
  • Iniciando no AWS Glue3:50
  • Entendendo o que é o Glue Data Catalog7:20
  • Glue Data Catalog na Prática com Crawlers - Parte 18:17
  • Glue Data Catalog na Prática com Crawlers - Parte 27:22
  • Glue Data Catalog - Outras Propriedades + Athena7:29
  • Prática AWS Glue Catalog + Crawler0:02
  • Resposta Prática AWS Glue Catalog + Crawler5:13
  • Explorando Glue Visual ETL - Introdução e Propriedades9:12
  • Explorando Glue Visual ETL - Criando um Job na Prática10:25
  • Explorando o Glue Visual ETL - Modificando o JOB4:42
  • Prática Glue Visual ETL0:23
  • Resposta Prática Glue Visual ETL6:06
  • ETL via Script Glue - Introdução Ambiente7:00
  • ETL via Script Glue - Execução Prática 15:46
  • ETL via Script Glue - Execução Prática 1 - Log Erro e Ajustes8:14
  • ETL via Script Glue - Execução Prática 2 - Parâmetros + Leitura Dados S39:30
  • ETL via Script Glue - Execução Prática 2 - Filtros e Criação de campos no ETL7:25
  • ETL via Script Glue - Execução Prática 2 - Salvando os dados no S35:57
  • ETL via Script Glue - Execução Prática 2 - Leitura a partir do Glue Data Catalog8:41
  • Pratica ETL Script Glue0:24
  • Resposta Pratica ETL Script Glue5:04
  • Introdução a Orquestração + WorkFlow + Triggers5:38
  • Triggers Glue na Prática7:55
  • WorkFlow Glue na Prática6:41
  • Introdução Terraform e Yaml para esteira CI/CD5:28
  • Verificando Cobranças e Encerrar Conta AWS4:23
  • Desativar recursos para não gerar novos custos0:22

Requirements

  • Lógica de Programação
  • Básico da Área de Dados

Description

Descubra como dominar duas das ferramentas mais poderosas para integração e transformação de dados: AWS Glue e KNIME. Neste curso prático e abrangente, você aprenderá a criar pipelines de ETL eficientes e automatizados, otimizando fluxos de dados para aplicações empresariais modernas.

Você será guiado passo a passo no uso do AWS Glue, desde a configuração da conta AWS até a criação de workflows, Data Catalogs e jobs de ETL usando tanto o Visual ETL quanto scripts personalizados. Também explorará o KNIME, uma plataforma flexível para análise e integração de dados, aprendendo a conectar fontes diversas, aplicar transformações e criar automações com facilidade.

Por outro lado, o KNIME oferece uma abordagem visual e intuitiva para a integração e análise de dados, permitindo a criação de fluxos de trabalho personalizados sem a necessidade de programação avançada. Ele se destaca por sua flexibilidade, sendo amplamente utilizado para exploração, transformação e análise preditiva de dados. Além disso, sua ampla biblioteca de extensões e conectores possibilita integração com diversas fontes de dados e ferramentas, incluindo plataformas locais e em nuvem, tornando-o uma solução versátil para profissionais que buscam agilidade e inovação.

Ideal para iniciantes e profissionais que buscam se destacar no mercado de dados, este curso traz exemplos práticos que simulam cenários do mundo real. Ao final, você estará apto a construir pipelines de dados robustos, escaláveis e prontos para atender às demandas da era da informação.

O que você vai aprender neste curso:

  • Como configurar sua conta AWS de forma segura e eficiente.

  • Entender os fundamentos do Glue Data Catalog e como utilizá-lo para gerenciar metadados.

  • Explorar o Glue Visual ETL e criar processos ETL sem precisar codificar.

  • Criar pipelines ETL usando scripts Python personalizados no Glue.

  • Configurar Triggers e Workflows para orquestrar suas tarefas Glue.

  • Otimizar o uso do S3 e integrar o Glue com serviços como Athena para consultas SQL.

  • Criação de fluxos de trabalho visuais para integração de dados com o Knime.

  • Transformação e limpeza de dados de forma intuitiva com o Knime.

  • Conexões com diferentes fontes com o Knime.


Por que escolher este curso?

  • Prática desde o início: A cada tópico, você irá implementar soluções reais, explorando recursos do Glue diretamente no ambiente AWS.

  • Conteúdo atualizado: Abordamos desde conceitos básicos até a introdução a esteiras de automação, conectando o AWS Glue a práticas modernas de desenvolvimento.

  • Experiência condensada: Em pouco mais de 3 horas, você será capaz de executar um ETL completo e orquestrar fluxos de trabalho no Glue.

Who this course is for:

  • Profisisonais que se interessam pela área de Dados/Cloud
  • Engenheiro de Dados
  • Analistas de Dados
  • Profissionais da Azure/AWS/Google Cloud GCP
  • Analistas de Sistemas