Your cart is empty.
Keep shoppingProjeto Real de Engenharia de Dados: Real Time Analytics
815 students
Projeto Real de Engenharia de Dados: Real Time Analytics
Domine a Análise de Dados em Tempo Real com AWS: Do Básico ao Avançado, usando Kinesis, SNS, Lambda, Glue e muito mais!
Created byFernando Amaral
Last updated 1/2025
Portuguese
What you'll learn
- Desenvolva projetos reais de engenharia de dados utilizando ferramentas avançadas da AWS para análise em tempo real.
- Implemente ingestão de dados com funções Lambda e Kinesis, garantindo processamento eficiente em tempo real
- Configure alertas em tempo real com SNS, mantendo sua equipe informada sobre eventos críticos instantaneamente
- Gerencie segurança e controle de acesso com roles IAM, assegurando a integridade e proteção dos dados
- Armazene dados brutos e transformados no S3, organizando informações em áreas raw e gold para análise otimizada
- Automatize processos ETL com AWS Glue, utilizando catálogos e crawlers para transformar e organizar dados de forma eficiente
- Realize consultas rápidas e flexíveis com Athena, explorando seus dados armazenados para insights valiosos
- Monitore seu pipeline de dados com CloudWatch, identificando e resolvendo problemas rapidamente para garantir operações suaves
- Integre e orquestre serviços da AWS, criando uma solução de análise de dados em tempo real escalável e robusta
- Acesse suporte dedicado e material complementar, garantindo uma experiência de aprendizado completa e prática
Explore related topics
Course content
10 sections • 37 lectures • 3h 26m total length
Requirements
- Conhecimentos básico em Python
Description
Bem-vindo ao nosso curso de Engenharia de Dados: "Real Time Analytics". Este curso é projetado para profissionais e entusiastas de dados que desejam aprender e aplicar habilidades práticas de análise de dados em tempo real utilizando as poderosas ferramentas e serviços da AWS.
Neste curso, você irá desenvolver um projeto real que consome dados de uma API, emite alertas em tempo real e armazena esses dados de maneira eficiente e organizada. Utilizando um conjunto robusto de serviços da AWS, você aprenderá a integrar e orquestrar funções lambda, Kinesis, SNS, roles IAM, S3, Glue (ETL, catálogo e crawler), Athena e CloudWatch para criar uma solução completa e escalável de análise de dados em tempo real.
O que você aprenderá:
Configuração e integração de funções lambda e Kinesis para ingestão e processamento de dados em tempo real.
Uso de SNS para alertas em tempo real, garantindo que as informações críticas cheguem rapidamente aos destinatários corretos.
Gerenciamento de roles IAM para garantir segurança e controle de acesso.
Armazenamento de dados no S3 em duas áreas distintas: raw, para dados brutos, e gold, para dados transformados e estruturados em formato parquet.
ETL com Glue, incluindo criação de catálogos e utilização de crawlers para organizar e transformar dados de maneira eficiente.
Consultas ad-hoc com Athena para análise rápida e flexível dos dados armazenados.
Monitoramento e logging com CloudWatch, assegurando que todo o processo seja monitorado e quaisquer problemas sejam rapidamente identificados e resolvidos.
Além das aulas práticas, você terá acesso ao código fonte completo do projeto, material complementar detalhado e suporte dedicado para ajudá-lo em sua jornada de aprendizado.
Este curso é ideal para aqueles que desejam aprimorar suas habilidades em engenharia de dados e adquirir experiência prática com uma das plataformas de nuvem mais utilizadas no mercado. Ao final do curso, você estará preparado para implementar soluções de análise de dados em tempo real em ambientes de produção, utilizando as melhores práticas e ferramentas da AWS.
Inscreva-se agora e transforme sua carreira na área de dados com nossa abordagem prática e orientada a projetos.
Who this course is for:
- Engenheiros de Dados, Cientistas de Dados, Desenvolvedores de Software, Administradores de Sistemas, Estudantes e Recém-Formados em TI, Analistas de Dados, Profissionais de TI, Empreendedores e Startups, Consultores de Tecnologia, Interessados em Tecnologia de Dados.