Udemy
    •  
    •  
    •  
    •  
    •  
    •  
    •  
    •  
Turn what you know into an opportunity and reach millions around the world.
Learn More
Your cart is empty.
Keep shopping
Integração e Análise de Dados com AWS Glue e Dremio
9 students

Integração e Análise de Dados com AWS Glue e Dremio

Explorando AWS Glue e Dremio Potencialize o processamento de dados em nuvem e acelere consultas analíticas
Last updated 7/2025
Portuguese

What you'll learn

  • AWS GLUE: Criação de Jobs via Glue Studio
  • AWS GLUE: Criação de Jobs via Script Python no Glue
  • AWS GLUE: Entendimento de Workflows
  • AWS GLUE: Entendimento de Trigeers
  • AWS GLUE: Entender os fundamentos do Glue Data Catalog e como utilizá-lo para gerenciar metadados.
  • AWS GLUE: Explorar o Glue Visual ETL e criar processos ETL sem precisar codificar
  • AWS GLUE: Otimizar o uso do S3 e integrar o Glue
  • AWS GLUE: Monitorar cargas de dados com SUCESSO/ERRO
  • AWS GLUE: Entender mais sobre a nuvem AWS
  • DREMIO: Permite conexão e integração com várias fontes de dados, como bancos de dados SQL, NoSQL, data lakes, SaaS, entre outros
  • DREMIO: Motor de consulta acelerado para melhor desempenho em análises
  • DREMIO: Suporte a SQL padrão para consultas e análises
  • DREMIO: Integração com as ferramentas TABLEAU e POWER BI de forma nativa
  • DREMIO: Capacidade de executar consultas federadas em diferentes fontes de dados
  • DREMIO: Otimização de consultas e cache inteligente para acelerar tempos de resposta
  • DREMIO: Suporte a consultas complexas, como junções, agregações, subconsultas
  • DREMIO: Capacidade de criar visões de dados virtuais para compartilhamento seguro de resultados
  • DREMIO: Suporte a fontes de dados estruturadas e semi-estruturadas, como JSON, Parquet, dentre outros
  • DREMIO: Gerenciamento de metadados para facilitar a descoberta e rastreamento de recursos de dados
  • DREMIO: Monitoramento e rastreamento de consultas para fins de otimização de desempenho
  • DREMIO: Suporte a políticas de governança de dados
  • DREMIO: Interface de usuário intuitiva para facilitar a navegação e configuração do Dremio
  • DREMIO: Criação de scripts, views em SQL nativo
  • DREMIO: Integração em um mesmo SQL de banco de dados, arquivos , dados semi-esruturados em uma mesma consulta SQL
  • DREMIO: Integração de bases de dados heterogêneas em uma mesma consulta SQL

Course content

2 sections • 49 lectures • 5h 24m total length
  • Apresentação ao Curso AWS Glue9:26
  • INFORMAÇÕES IMPORTANTES - Leia antes de começar o curso0:23
  • ETL e Arquitetura do AWS Glue8:06
  • Conta AWS - Detalhes antes da Criação7:40
  • IMPORTANTE SOBRE CONTA AWS - Processamento GLUE0:46
  • Criação Conta AWS7:02
  • Acessando AWS Management Console5:32
  • Conhecendo Recursos/Serviços Utilizados na AWS7:24
  • Configurando Policy/Roles para Acessos dos Recursos GLUE6:58
  • Configurando o S35:23
  • Iniciando no AWS Glue3:50
  • Entendendo o que é o Glue Data Catalog7:20
  • Glue Data Catalog na Prática com Crawlers - Parte 18:17
  • Glue Data Catalog na Prática com Crawlers - Parte 27:22
  • Glue Data Catalog - Outras Propriedades + Athena7:29
  • Prática AWS Glue Catalog + Crawler0:02
  • Resposta Prática AWS Glue Catalog + Crawler5:13
  • Explorando Glue Visual ETL - Introdução e Propriedades9:12
  • Explorando Glue Visual ETL - Criando um Job na Prática10:25
  • Explorando o Glue Visual ETL - Modificando o JOB4:42
  • Prática Glue Visual ETL0:23
  • Resposta Prática Glue Visual ETL6:06
  • ETL via Script Glue - Introdução Ambiente7:00
  • ETL via Script Glue - Execução Prática 15:46
  • ETL via Script Glue - Execução Prática 1 - Log Erro e Ajustes8:14
  • ETL via Script Glue - Execução Prática 2 - Parâmetros + Leitura Dados S39:30
  • ETL via Script Glue - Execução Prática 2 - Filtros e Criação de campos no ETL7:25
  • ETL via Script Glue - Execução Prática 2 - Salvando os dados no S35:57
  • ETL via Script Glue - Execução Prática 2 - Leitura a partir do Glue Data Catalog8:41
  • Pratica ETL Script Glue0:24
  • Resposta Pratica ETL Script Glue5:04
  • Introdução a Orquestração + WorkFlow + Triggers5:38
  • Triggers Glue na Prática7:55
  • WorkFlow Glue na Prática6:41
  • Introdução Terraform e Yaml para esteira CI/CD5:28
  • Verificando Cobranças e Encerrar Conta AWS4:23
  • Desativar Recursos para não gerar novos custos0:22

Requirements

  • Lógica de Programação
  • Básico da Área de Dados

Description

Transformação e Integração de Dados na Prática: Explorando AWS Glue e Dremio
Potencialize o processamento de dados em nuvem e acelere consultas analíticas com ferramentas inovadoras

No universo de dados cada vez mais complexo, empresas enfrentam o desafio de processar, transformar e acessar informações com agilidade e eficiência. Neste treinamento, você aprenderá a utilizar o AWS Glue e o Dremio, duas ferramentas avançadas que atendem a demandas distintas e complementares no gerenciamento de dados modernos. Ao dominar essas tecnologias, você estará apto a criar pipelines de dados escaláveis e a acelerar análises em tempo real, conquistando uma vantagem competitiva no mercado.

O AWS Glue se destaca como uma solução serverless que automatiza e simplifica o processo de ETL (extração, transformação e carregamento). Ele é ideal para ambientes em nuvem que demandam integração fluida entre diferentes fontes de dados e arquiteturas modernas, como Data Lakes. Seu uso permite eliminar tarefas manuais, acelerar o processamento de grandes volumes de dados e aproveitar ao máximo o ecossistema AWS. Para empresas que operam em escala global ou que estão migrando para a nuvem, o Glue oferece automação e flexibilidade para atender às necessidades mais complexas de transformação de dados.

O Dremio, por sua vez, redefine a maneira como as análises de dados são realizadas. Com sua tecnologia de virtualização de dados e aceleração de consultas, ele elimina a necessidade de movimentar dados, permitindo acesso direto e rápido às fontes de informação. Isso torna o Dremio uma ferramenta indispensável para organizações que precisam de análises em tempo real ou que lidam com grandes volumes de dados distribuídos em várias plataformas. Sua integração com Data Lakes e outras ferramentas analíticas o torna uma solução poderosa para acelerar insights sem comprometer a performance.

Enquanto o AWS Glue foca na preparação e transformação dos dados, o Dremio entrega eficiência na análise, reduzindo drasticamente o tempo de acesso às informações. Juntas, essas ferramentas criam um ecossistema robusto para empresas que precisam otimizar o processamento e a exploração de dados em nuvem e ambientes híbridos.

Este treinamento é mais do que uma capacitação técnica: é um investimento em sua carreira, alinhando você às principais tendências do mercado de dados. Com a crescente demanda por soluções escaláveis e rápidas, profissionais que dominam tecnologias como AWS Glue e Dremio se tornam peças-chave na transformação digital das organizações. Agora é o momento de adquirir as habilidades que farão você se destacar no mercado e conquistar novas oportunidades.

Who this course is for:

  • Profisisonais que se interessam pela área de Dados/Cloud
  • Engenheiro de Dados
  • Analistas de Dados
  • Profissionais da Azure/AWS/Google Cloud GCP
  • Analistas de Sistemas