Pentaho Data Integration - Aprenda ETL na prática

Name: Pentaho Data Integration - Aprenda ETL na prática
Rating: 4.6 (291 reviews)

Aprenda a extrair qualquer dado, em qualquer formato utilizando o Pentaho ! Uma ferramenta completa, poderosa e gratuita

Created byMarciel José

Last updated 7/2025

Portuguese

Portuguese [Auto],

What you'll learn

Infraestrutura necessária para execução
Configuração do Ambiente - Java, variáveis
Download, configuracão do Pentaho (Spoon)
Utilização aliada ao banco PostgreSql
Processo de Extrair, transformar e carregar - ETL
Extrair dados de planilha Excel, cruzar dados de planilhas, agrupar dados
Extrair dados de documentos de texto e gravar em tabelas de banco de dados
Extrair dados a partir de XML - Web Service
Extrair dados a partir de JSON - Web Service
Extrair dados de tabelas de banco de dados
Diversas extrações, tratamentos e formatos de gravação final
Criação de Jobs
Principais Steps do Pentaho Spoon
Criação de Serviço para execução das transformacoes
Criação de Agendamento para execução dos jobs e suas transformacoes
Criação de Conta no Sistema de Gestão BLING para integração
Consumir dados e conta no BLING

Course content

9 sections • 46 lectures • 5h 56m total length

Ideia Geral de Utilização do PDI - Introdução10:53
Aula Inaugural, falar um pouco da suite Pentaho e dar boas vindas aos alunos do curso de PDI na prática !
Quais as situações onde é mais utilizado - Tipo de Dados4:31
Documentação de projetos2:37
Falaremos da Importância de documentar todas as transformações ao longo de suas criações, é importante tanto para registro do que foi solicitado, quanto para possíveis alterações, entendimento do porque foi feito, etc.
Infraestutura e Arquivos Necessários5:21
O que será necessário para o curso, veremos neste tópico.
Processo em Operação do Instrutor - Atulização Períodica (EXTRA 5)9:02
Instalando Java e PDI14:52
Link atualizado para download do PDI: https://www.hitachivantara.com/es-latam/products/pentaho-platform/data-integration-analytics/pentaho-community-edition.html

Utilizar a versão: pdi-ce-9.4.0.0-343.zip

Este arquivo tem menos de 400 MB e que tem apenas componentes da suite do PDI de fato.
Utilizando Java via Variável do Sistema - Atualização Periódica (Jun/2025)5:18
Na execução manual ou via chamadas de Jobs do Spoon, é possível fazer com que as execuções ocorram em java através de variáveis do ambiente. Isso garante uma não influência em outros recursos locais da máquina do seu cliente, caso o mesmo utilize algum outro Java para uso em algum banco, por exemplo.

Input CSV - Importando dados5:48
Nesta aula veremos o INPUT de CSV. O Arquivo em anexo de apoio, tem como delimitador PONTO e VÍRGULA.
Input Microsoft Excel - Importando dados5:57
Neste tópico veremos o INPUT Microsoft EXCEL, importaremos e faremos leitura destes dados.
Input Data Grid - Trabalhando com Dados Fixos5:25
Input - Text File5:43
Veremos a importação e visualização de dados do tipo TEXT FILE.
Input - Microsoft Fox Pro - DBF5:31
Input - Table Input (PostgreSQL) - Caso nao possua Banco, Utilize As aulas de ap6:22

Escolha de campos - Select Values2:35
Comando ja visto nas aulas anteriores. Nesta especificamente, falaremos um pouco mais da importância do SELECT VALUES, onde podemos apontar quais campos queremos utilizar em cada consulta.
Valores Constantes, passagem fixa de informações - Add a Constant5:19
Veremos nesta aula a passagem de um valor fixo em determinado campo, campo que poderá ser utilizado a qualquer momento da sua transformação.
Sequência Numérica - Add Sequence4:46
Metodo simples para criar ranking em registros, seja de qualquer fonte.
Concatenando Dados - Concat Fields6:34
Substituindo Caracteres - Split Fields (Split_Part, Replace)4:01
Cortar Trechos - String Cut5:17
String Operations - LPAD, RPAD, TRIM6:00
Ordenando Campos - Sort Rows4:10
Unique Rows (Distinct)7:42
Operações Matemáticas - Calculator9:21
Veremos o Step Calculator, utilizado para operações matemáticas na mesma linha de consulta. Adiantando também conteúdo, mostrarei um pouco da utilização do GROUP BY, que pode ser utilizado em operações globais dentro de uma transformação.
Append Streams5:49
Inserindo filtros nas transformações - Filter Rowns8:06
Swith Case - Método parecido com Union4:45
Execute SQL Script3:16
Joins - Merge Join8:23
Data Atual / Primeiro e Último dia do Mês via Step de Transformação8:19

Sobre os Jobs4:10
Associação das Transformações aos Jobs7:43
Os Jobs podem conter várias transformações. Nesta aula vamos verificar como realizar a associação, onde um JOB pode ser responsável por várias execuções, direcionando variaveis de ambiente anteriormente criadas.
Criação de Serviço para Execução Automática - Arquivo bat12:01
Utilizando Agendamento no Windows para Execução de Job10:43
Configurar envio de e-mail quando Ocorrer erros ou Sucesso - Step MAIL9:40

EXTRA 1 - Download e Instalacao do Banco PostgreSQL6:55
Aula EXTRA de apoio relacionado ao Download e Instalação do banco de dados PostgreSQL. Caso você não possua um banco de dados instalado, pode utilizar esta aula de apoio para realiza-lo.
EXTRA 2 - Criacao de Tabela e Insercao de Dados5:22
EXTRA 3 - Criando Conta e Adquirindo APIKEY (BLING)14:00
Aula adicional, com intuito de propor uma experiencia maior importando dados de um sistema real de gestão e não apenas de API pública
EXTRA 4 - Libre Office - Download e Função durante tratamentos - Cria9:20
Aula adicional, com intuito de mostrar o processo de download e instalação do LIBRE OFFICE e a criação de um arquivo de leitura de banco de dados no formato DBF. Arquivo salvo em DBF. Ferramentas do pacote OFFICE, oferecem leitura, porém não gravação neste formato.

Requirements

Conhecimento Básico em SQL
Conhecimento Básico em Lógica

Description

Aprenda a cruzar dados e gerar informações valiosas para sua empresa ou seus clientes usando o PDI (Pentaho Data Integration). Neste curso, você vai conhecer os principais passos (Steps) de entrada e saída de dados no Pentaho Spoon, uma ferramenta visual e poderosa para integração de dados.

Vamos colocar a mão na massa! Você aprenderá a extrair informações de arquivos CSV, TXT, DBF, bancos de dados como PostgreSQL, além de dados em JSON e XML, tanto locais quanto por web service. Depois da extração, vamos tratar os dados com as transformações mais comuns – como filtros, combinações e limpezas – e, em seguida, salvar tudo em arquivos Excel ou TXT, ou até atualizar diretamente bancos de dados com facilidade.

Também vamos mostrar boas práticas e estratégias para organizar seus fluxos de trabalho de forma eficiente, escalável e segura, mesmo em projetos mais complexos e desafiadores.

Este curso é ideal para quem está começando no mundo do ETL ou quer automatizar tarefas repetitivas de dados no dia a dia. Com uma linguagem simples e muitos exemplos práticos, você vai ver como o PDI pode facilitar a integração, a migração e a análise de dados em qualquer cenário.

Venha aprender de forma prática, descomplicada e transformar seu jeito de trabalhar com dados!

Who this course is for:

Analistas
Consultores
Programadores
Suporte Técnicos
Estudantes de TI.
Estudantes na área de ETL
Pessoas que tenham interesse em novos processos de integração

Pentaho Data Integration - Aprenda ETL na prática

What you'll learn

Explore related topics

Course content

Contexto Geral - Introdução7 lectures • 53min

Visão Geral do PDI1 lecture • 18min

Entradas e Visualização dos dados6 lectures • 35min

Seleção e Tratamento de Dados16 lectures • 1hr 34min

Trabalhando com Web Services3 lectures • 36min

Exportando Dados Consumidos - Saídas3 lectures • 31min

Utilizando Variáveis e Parâmetros1 lecture • 11min

Jobs - Execução de Serviços e transformações5 lectures • 44min

AULAS DE APOIO - AULAS EXTRAS4 lectures • 36min

Requirements

Description

Who this course is for: