Udemy
    •  
    •  
    •  
    •  
    •  
    •  
    •  
    •  
Turn what you know into an opportunity and reach millions around the world.
Learn More
Your cart is empty.
Keep shopping
Databricks e NiFi: uso de dados para suas análises
Rating: 4.4 out of 5(14 ratings)
68 students

Databricks e NiFi: uso de dados para suas análises

Aprenda sobre Databricks e NiFi para incrementar seus projetos de dados
Last updated 8/2025
Portuguese
Portuguese [Auto],

What you'll learn

  • Visualização para explorar resultados de consultas de diferentes perspectivas
  • Construção de gráficos e Dashboards
  • Unificação de dados em diversos formatos: texto, JSON, PARQUET, dentre outros
  • Trabalhada por administrador da plataforma, analista de dados, cientista de dados e engenheiro de dados com diversas funcionalidades
  • Aprendizado processamento distribuído em SPARK
  • Entendo o que é Databricks File System (DBFS) seu sistema de arquivos
  • Entendo sobre Cluster
  • Aprendendo a gerenciar e criar Notebooks em R, SCALA, Python e SQL
  • Executando scripts multilinguagens
  • Gerenciando a ingestão de dados e análise de dados, gerando gráficos e dashboards
  • Construindo na versão community
  • Trabalhando com a biblioteca dbutils Python
  • Integrando o Databricks ao Power BI
  • Entendo sobre Apache Nifi, uma plataforma de ingestão de dados
  • Entendo sobre o gerenciamento e a automatização do fluxo de dados
  • Entendendo sobre coleta de dados, transmissão de dados, armazenamento de dados
  • Ecossistema NiFi: Repositórios, controle de fluxo, máquina JVM, extensões
  • O que é Flow FIle
  • O que é um Processor
  • O que é um Fluxo de Dados
  • O que é uma conexão
  • O que é um grupo de processor
  • Aprendendo sobre a barra de componentes
  • Aprendendo sobre a barra de controle navegação
  • Aprendendo sobrea barra de operação
  • Desenvolvimento de diversos fluxos de dados
  • Extensões: Putfile, Getfile, ExtractText, SplitText
  • Extensões: EvaluateXpath, UpdateAttribute, GenerateFlowFile
  • Extensões: RouteOnAttribute, SplitXML, LogMessage, LogAttibute
  • Extensões: MergeContent, ReplaceText, CompressContent
  • Uso de Input Port, Funil e Process Group

Course content

2 sections34 lectures5h 5m total length
  • Entendendo o Databricks, documentação e funções9:42
  • Passo a passo - criação de conta Databricks Community Edition0:08
  • INFORMAÇÕES IMPORTANTES - Leia antes de começar o curso0:23
  • Detalhando o funcionamento SPARK, CLUSTER12:16
  • Sobre a criação da conta no Databricks0:14
  • Como criar sua conta Databricks na Databricks Community3:13
  • Criando e entendo o funcionamento do CLUSTER9:14
  • Carregando os primeiros dados no DBFS9:15
  • Alternativa sobre BUG - Carga dados vinhos no mundo11:39
  • Criando Notebook, carregando dados e entendo Workspace11:09
  • Entendendo todas as funcionalidades do ambiente do Notebook8:35
  • Trabalhando no Notebook com Python, Scala e SQL9:04
  • Unificando resultados e gráficos dentro do Databricks11:48
  • Trabalhando com arquivos JSON, unificando e gerando saídas em SQL14:26
  • Entendo arquivos Parquet, gerando e unificando arquivos Parquet, formatando SQL12:22
  • Particionando arquivos Parquet dentro do Databricks7:07
  • Construindo arquivos Parquet a partir de estrutura de arquivos CSV13:40
  • Comandos internos Databricks19:05
  • Construção de gráficos e dashboards9:52
  • Integrando Databricks e Power BI - Ferramenta de visualização e dados8:17
  • Entrega de exercício - aula final2:14
  • Responda a pergunta

Requirements

  • É importante que você conheça um pouco de Python, R, Scala, SQL, não haverá treinamento destas linguagens neste curso
  • Importante conhecer execução de scripts em Python, R, Scala, SQL
  • Importante ter uma base sobre banco de dados, arquivos de dados

Description

Estamos diante de um dos maiores ecossistemas de dados que existe na nuvem que é o Databricks, que vem com uma infraestrutura pronta para fazer carga, leitura, tratamento e gravação de dados em um ambiente multilinguagem. Aliado a isso, trazemos o conhecimento de uma das ferramentas mais promissoras do mercado e que vem sendo utilizada largamente por diversas empresas, que é o NiFi, preparada para fazer a ingestão de dados independente de plataforma.

O treinamento de Databricks vem com uma apostila super especial para você executar todos os comandos necessários e aprender de verdade a trabalhar nesta plataforma. Você poderá criar diversos notebooks nas linguagens R, Python, Scala e utilizando linguagem SQL para banco de dados. Você poderá produzir gráficos e dashboards no mesmo notebook, tudo de forma simples e intuitiva.

Já no treinamento de NiFi, prepare-se para construir fluxos de dados diversos, variados como em um grande quadro em branco que você poderá utilizar sua criatividade para desenvolver projetos baseados em dados lendo informações de arquivos variados neste curso. O Nifi é 100% WEB e você construirá os pipelines como se estivesse em uma ferramenta ETL. O Nifi é conhecido como o canivete suiço da área de construção de cargas de dados.

Então venha entrar para esta turma que está crescendo a cada dia.


Who this course is for:

  • Estudantes e profissionais de computação, Informática, estatística, data science, analista de dados, engenheiro de dados
  • Pessoas interessadas em aprender os conceitos sobre NiFi e Databricks, ou que gostariam adentrar na área de engenharia de dados
  • Profissionais que, de alguma forma, utilizam dados no seu dia a dia