Construa Projetos de Data Warehouse com APACHE HOP - PARTE02
What you'll learn
- O que é Business Intelligence (BI)
- O que é Data Warehouse (DW)
- Como criar as tabelas staging, dimensão e fato
- Construção da carga dim_tempo
- Como o APACHE HOP pode se tornar um integrador de dados e construção de projetos de DW
- Entendendo o que é HOP projects
- Como funciona um pipeline e um workflow
- Interface de trabalho do APACHE HOP
- Instalação do APACHE HOP e do banco Postgres
- Entendendo sobre Modelagem Multidimensional
- Preparação de dados e construção de pipelines e workflow das cargas do DW
- O que são dimensões Slow Change Dimension 1 e 2
- Executando os pacotes via HOP RUN
- Construindo o tratamento de dados e ajustes em campos
- Identificando as informações inconsistentes e armazenando no DW para ajustes
Requirements
- Necessário conhecimento básico de banco de dados
- Necessário conhecimento básico de modelagem de dados
Description
O APACHE HOP é conhecido no mercado pela sua grande versatilidade e facilidade na construção de pipelines de dados sem o uso de código. Para demonstrar o quanto é poderoso, trago um curso inédito e que vai ajudar você a entender como construir um projeto de Data Warehouse do zero, com os principais componentes para realizar as principais tarefas, aqui você vai compreender:
Como funciona a modelagem de dados para Data Warehouse
Como se cria um ecossistema para construção de um Business Intelligence
Entendendo o que é uma dimensão tempo e como construí-la
O que é uma staging area
O que são dimensões Slow Change Dimension1 e Slow Change Dimension2
O que é uma tabela Fato e como devemos construí-la
Você entenderá desde o entendendo da staging área, passando pela carga em banco de dados Postgres até a carga final nas tabelas dimensões e tabela Fato. Iremos construir um projeto do zero para informações sobre vendas, trabalhando com tabelas de departamento, produto e vendedor. Ao final iremos construir um workflow, que terá todos os pipelines de cargas juntos e como podemos executá-lo dentro da ferramenta APACHE HOP e fora dela.
Os componentes utilizados no APACHE HOP são os mesmos utilizados na ferramenta Pentaho PDI, então você aprenderá os componentes para a mesma ferramenta.
Venha e comece hoje mesmo a trabalhar com APACHE HOP.
Who this course is for:
- Estudantes de Estatística, Computação e Ciência dos Dados
- Profissionais que utilizam ferramentas de Engenharia de dados, DW, BI, Data Discovery e OLAP
- Estudantes que desejam adentrar no mundo de dados e compreender os conceitos e técnicas
Instructor
Quem sou
Fui escolhido como um dos 50 profissionais mais influentes em dados no ano de 2023 pela Gama Academy, uma organização que estabelece um Rank dos profissionais com mais destaque na área de Dados/BI.
Por que estudar na área de dados comigo?
Sou profissional da área com diversos projetos desenvolvidos, tanto na área privada como na área pública, tenho um skill muito forte em atender meus alunos com alguma dúvida no máximo em 24 horas. Procuro alinhar conhecimento teórico e prático.
O que trago em meus cursos?
Acho que a área de dados é bem rica e vasta, mas ter um direcionamento do que deve ser estudado com cursos passo a passo é o que busco nas minhas aulas, fiz um mestrado na área de educação para criar aulas sob medida aos meus alunos. Estou diariamente aprimorando e trazendo novidades na área, afinal criar + de 150 cursos envolve dedicação e foco.
O que faço hoje
Sou professor das pós-graduações das universidades UNIFACS, CATÓLICA DO SALVADOR e ISL Wyden. Mestre pela Universidade do Estado da Bahia (UNEB) no Curso de Mestrado Profissional Gestão e Tecnologias Aplicadas à Educação (GESTEC). Possui Especialização em Análise de Sistemas pela Faculdade Visconde de Cairu e Bacharelado em Estatística pela Universidade Federal da Bahia. Atua profissionalmente como consultor há mais de 20 anos nas áreas de Data Warehouse, Mineração de Dados, Ferramentas de Tomada de Decisão e Estatística. Atualmente sou editor do blog BI com Vatapá. Autor do Livro: BI COMO DEVE SER - professor EAD de diversos cursos de BI na Aprenda Virtual. Idealizador do BI PRO - O maior e mais completo conteúdo sobre BI da internet.