Udemy
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
  •  
Development
Web Development Data Science Mobile Development Programming Languages Game Development Database Design & Development Software Testing Software Engineering Development Tools No-Code Development
Business
Entrepreneurship Communications Management Sales Business Strategy Operations Project Management Business Law Business Analytics & Intelligence Human Resources Industry E-Commerce Media Real Estate Other Business
Finance & Accounting
Accounting & Bookkeeping Compliance Cryptocurrency & Blockchain Economics Finance Finance Cert & Exam Prep Financial Modeling & Analysis Investing & Trading Money Management Tools Taxes Other Finance & Accounting
IT & Software
IT Certification Network & Security Hardware Operating Systems Other IT & Software
Office Productivity
Microsoft Apple Google SAP Oracle Other Office Productivity
Personal Development
Personal Transformation Personal Productivity Leadership Career Development Parenting & Relationships Happiness Esoteric Practices Religion & Spirituality Personal Brand Building Creativity Influence Self Esteem & Confidence Stress Management Memory & Study Skills Motivation Other Personal Development
Design
Web Design Graphic Design & Illustration Design Tools User Experience Design Game Design Design Thinking 3D & Animation Fashion Design Architectural Design Interior Design Other Design
Marketing
Digital Marketing Search Engine Optimization Social Media Marketing Branding Marketing Fundamentals Marketing Analytics & Automation Public Relations Advertising Video & Mobile Marketing Content Marketing Growth Hacking Affiliate Marketing Product Marketing Other Marketing
Lifestyle
Arts & Crafts Beauty & Makeup Esoteric Practices Food & Beverage Gaming Home Improvement Pet Care & Training Travel Other Lifestyle
Photography & Video
Digital Photography Photography Portrait Photography Photography Tools Commercial Photography Video Design Other Photography & Video
Health & Fitness
Fitness General Health Sports Nutrition Yoga Mental Health Dieting Self Defense Safety & First Aid Dance Meditation Other Health & Fitness
Music
Instruments Music Production Music Fundamentals Vocal Music Techniques Music Software Other Music
Teaching & Academics
Engineering Humanities Math Science Online Education Social Science Language Teacher Training Test Prep Other Teaching & Academics
AWS Certification Microsoft Certification AWS Certified Solutions Architect - Associate AWS Certified Cloud Practitioner CompTIA A+ Cisco CCNA Amazon AWS CompTIA Security+ AWS Certified Developer - Associate
Graphic Design Photoshop Adobe Illustrator Drawing Digital Painting InDesign Character Design Canva Figure Drawing
Life Coach Training Neuro-Linguistic Programming Mindfulness Personal Development Personal Transformation Life Purpose Meditation Emotional Intelligence Neuroscience
Web Development JavaScript React CSS Angular PHP WordPress Node.Js Python
Google Flutter Android Development iOS Development Swift React Native Dart Programming Language Mobile Development Kotlin SwiftUI
Digital Marketing Google Ads (Adwords) Social Media Marketing Google Ads (AdWords) Certification Marketing Strategy Internet Marketing YouTube Marketing Email Marketing Google Analytics
SQL Microsoft Power BI Tableau Business Analysis Business Intelligence MySQL Data Analysis Data Modeling Data Science
Business Fundamentals Entrepreneurship Fundamentals Business Strategy Online Business Business Plan Startup Freelancing Blogging Home Business
Unity Game Development Fundamentals Unreal Engine C# 3D Game Development C++ 2D Game Development Unreal Engine Blueprints Blender
30-Day Money-Back Guarantee
IT & Software Other IT & Software Pentaho

Pentaho: Estratégias para Soluções de ETL -Direto ao Ponto

ETL, Pentaho Data Integration - PDI (Kettle), Spoon, PostgreSQL, MySQL, SQLite, Data Lake, APIs
Highest Rated
Rating: 4.6 out of 54.6 (61 ratings)
260 students
Created by Laércio Freitas
Last updated 2/2021
Portuguese
Portuguese [Auto]
30-Day Money-Back Guarantee

What you'll learn

  • Introdução ao ambiente Pentaho Data Integration (PDI): Definição de um processo de ETL, diferenças entre Job e Transformação etc.
  • Aprender a trabalhar com os principais componentes (Steps) do PDI
  • Construção de Jobs e Transformações com base em problemas reais do dia a dia (utilizando banco de dados MySQL, PostgreSQL, SQLite etc.)
  • Construção de um ETL com base nos dados gerados a partir do site mockaroo
  • Construção de um ETL com base nos dados públicos de CNPJ disponibilizados no site da Receita Federal
  • Construção de um ETL com base nos dados públicos sobre os gastos com o cartão de pagamento do Governo Federal (CPGF)
  • Construção de um ETL para gerar uma base de dados de consulta “mini Data lake” de forma parametrizada
  • Aprender a processar vários arquivos em paralelo de forma simples e eficiente
  • Aprender a trabalhar com passagem de parâmetro (job e transformação), execução do ETL por linha de comando etc.
  • Automatização uma solução de ETL
  • Além de diversas dicas, sempre com exemplos reais, que irão agregar ainda mais valor e conhecimento para você e ao seu negócio

Requirements

  • Noções básicas de banco de dados e SQL
  • No mínimo um computador com 4GB de memória RAM, sistema operacional Windows 8.1 ou 10

Description

  1. Introdução ao ambiente Pentaho Data Integration (PDI): Definição de um processo de ETL, diferenças entre Job e Transformação etc.

  2. Aprender a trabalhar com os principais componentes (Steps) do Kettle

  3. Construção de Jobs e Transformações com base em problemas reais

  4. Construção de um ETL de Agenda de Contatos, com base nos dados gerados a partir do site mockaroo

  5. Construção de um ETL com base nos dados de CNPJ disponibilizados pela Receita Federal

  6. Construção de um ETL com base nos dados sobre os gastos com o cartão de pagamento do Governo Federal (CPGF)

  7. Construção de um ETL para gerar uma base de dados  de consulta “mini Data lake” de forma parametrizada

  8. Aprender a trabalhar com passagem de parâmetro (job e transformação), execução do ETL por linha de comando etc.

  9. Aprender a automatizar a execução de um ETL (Agendamento)

  10. Além de diversas dicas, sempre com exemplos reais, que irão agregar ainda mais valor e conhecimento para você e ao seu negócio

Who this course is for:

  • Estudantes
  • Analistas de Sistemas, Analistas de Banco de Dados, ETL, BI etc.
  • Qualquer pessoa que tenha interesse em adquirir novos conhecimentos

Course content

7 sections • 40 lectures • 5h 53m total length

  • Preview02:53
  • Preview04:32
  • Preview03:46
  • Configuração dos Bancos de Dados MySQL e PostgreSQL no Windows
    06:02
  • Configuração das Bases de Dados dos Projetos no DBeaver (DB Manager)
    11:40
  • Definição / Vantagens de uma ferramenta de ETL
    04:35

  • Definição dos Requisitos
    03:07
  • ETL Agenda de Contatos (versão 1) - Parte 01/02
    12:22
  • ETL Agenda de Contatos (versão 1) - Parte 02/02
    12:22
  • ETL Agenda de Contatos (versão 2)
    13:07
  • ETL Agenda de Contatos (versão 3)
    04:21

  • Dica: Copiar ou Distribuir entre os steps?
    10:07
  • Dica: Utilizando o arquivo Kettle.properties
    08:08
  • Atualização do DBeaver (DB Manager)
    01:45
  • Configuração da Alocação de Memória da JVM para execução do ETL
    02:19

  • Definição dos Requisitos
    05:18
  • Construção da Transformação : Selecionar Arquivos
    04:11
  • Construção da Transformação : Remover Dados DB
    16:09
  • Construção da Transformação: Gravar Dados DB
    10:39
  • Construção do JOB
    11:56
  • Gerenciamento da Transação com o Banco de Dados (Atomicidade)
    03:00
  • Execução do JOB por Linha de Comando / Agendamento para Execução no Windows
    07:58
  • Migração do banco de dados do ETL (SQLite para o PostgreSQL)
    10:25

  • Consumindo um serviço REST : Serviço do BC de Cotação de Moedas - Parte 01/02
    12:12
  • Consumindo um serviço REST : Serviço do BC de Cotação de Moedas - Parte 02/02
    10:18

  • Definição dos Requisitos
    09:27
  • Construção da Transformação : Dados Cadastrais - Parte 01/02
    24:04
  • Construção da Transformação : Dados Cadastrais - Parte 02/02
    18:12
  • Construção da Transformação : Sócios
    11:33
  • Construção da Transformação : CNAE
    13:58
  • Construção do JOB : Conclusão do Projeto
    05:11

  • Definição dos Requisitos
    07:28
  • ETL : Versão 1.0
    10:14
  • ETL : V2.0 - Transformação - Carregar Dados
    07:54
  • ETL : V2.0 - Transformação - Selecionar Tabelas
    07:04
  • ETL : V2.0 - Construção do JOB
    07:23
  • ETL : V2.0 - JOB - Configuração Inicial da Carga Completa/Incremental
    02:46
  • ETL : V2.0 - Identificação do Último ID na tabela do Data Lake
    17:24
  • ETL : V2.0 - Configurando a Transformação Último ID na tabela no Projeto
    10:32
  • ETL : V2.0 - Controle da Data de Processamento da Tabela : Conclusão do Projeto
    06:53

Instructor

Laércio Freitas
Analista de Sistemas Sênior
Laércio Freitas
  • 4.5 Instructor Rating
  • 69 Reviews
  • 271 Students
  • 2 Courses

Pós-Graduado em Análise e Projetos de Sistemas (PUC-RJ)
Microsoft Certified Solution Developer (MCSD)
Microsoft Certified IT Professional Database (MCITP)
Oracle Certified Expert Oracle Database SQL

Com mais de 15 anos de experiência em atividades voltadas para à análise, desenvolvimento de sistemas e administração de banco de dados, em diferentes setores do mercado (bancos, petróleo, judiciário, cinema etc.)

  • Udemy for Business
  • Teach on Udemy
  • Get the app
  • About us
  • Contact us
  • Careers
  • Blog
  • Help and Support
  • Affiliate
  • Terms
  • Privacy policy
  • Cookie settings
  • Sitemap
  • Featured courses
Udemy
© 2021 Udemy, Inc.