Udemy
    •  
    •  
    •  
    •  
    •  
    •  
    •  
    •  
Turn what you know into an opportunity and reach millions around the world.
Learn More
Your cart is empty.
Keep shopping
Montando o Data Lake para Engenheiro de Dados
Rating: 3.9 out of 5(35 ratings)
357 students

Montando o Data Lake para Engenheiro de Dados

Curso que irá te dar a base para se tornar um engenheiro de dados de sucesso.
Created byVinicius Vale
Last updated 3/2023
Portuguese
Portuguese [Auto],

What you'll learn

  • Como montar um Data Lake usando o ecossistema Hadoop
  • Aprenderão o básico para a Jornada Engenheiro de Dados
  • Entenderão os conceitos básicos de filesystem distribuído
  • Aprenderão a usar os comando básicos e intermediários do hdfs, yarn e hive

Course content

5 sections38 lectures6h 15m total length
  • Um passeio pela história dos dados10:25
  • Sudoers - Os bits e os bytes7:12
  • Data Lake vs Data Warehouse1:21
  • Big Data e os 5V's1:47
  • Bate papo sobre Data Lake11:19
  • Cloud vs On-premises2:22
  • Sudoers - Tipagem de Dados8:21
  • Bate papo Cloud vs On-premises14:07
  • Preparando o ambiente para o treinamento8:53
  • Usando o DataProc (GCP)1:12

Requirements

  • Conhecimento básicos de computação

Description

O curso Montando o Data Lake para Engenheiro de Dados é um curso voltado para prática, nele é mostrado como funciona o Ecossistema Hadoop e suas principais ferramentas. O Aluno irá aprender os principais conceitos teóricos e práticos para montar seu data lake da forma mais simples e fácil, usando as ferramentas mais comum de mercado como Cloudera e HortonWorks.


Na unidade de apresentação, o aluno aprenderá os termos e nomes técnicos utilizados no dia a dia do mundo Big Data e suas principais vantagens e desvantagens. Saberá as principais diferenças entre um Data Warehouse e um Data Lake, pontos positivos para uma estrutura na Cloud, além de conhecer os principais desafios encontrados pelas empresas ao implantar Big Data.


As outras unidades possuem como objetivo ensinar o aluno o conceito de Computação Distribuída onde o aluno aprenderá os principais características de cada ferramenta do Ecossistema Hadoop: Hadoop/Yarn, Hive. O aluno aprenderá, também, como planejar, organizar e executar a construção do Data Lake dentro da Hadoop usando as Zonas (Landing, Raw, Trusted e Refined) e alguns outros segredos que você só descobrirá fazendo o curso.


Lembre-se que o curso é totalmente voltado para prática e é essencial que o Aluno replique o aprendizado usando máquinas virtuais para consolidar o conhecimento.


Venha ser #ROOT em sua carreira, venha ser #SUDOERS

Who this course is for:

  • Engenheiros de Dados
  • Administradores de Banco de Dados (DBA)
  • Engenheiro de Softwares interessados em irem para área de dados