Azure Data Factory - Do Zero ao Bigdata

Este curso é para quem deseja conhecer ou aperfeiçoar o conhecimento em Azure Data Factory. Mostrarei desde o início, como configurar uma nova instâncias, até técnicas avançadas para lidar com grandes volumetrias de dados

Abordaremos temas como:

• Ingestão de dados

• Transformação de dados

• Carga

• Data lakes

• Lake houses

• Parquet

• Dataflow

• Databricks

Integre todos os dados com o Azure Data Factory, um serviço de integração de dados sem servidor totalmente gerenciado. Integre visualmente as fontes de dados usando mais de 90 conectores internos livres de manutenção sem custo adicional. Construa processos ETL e ELT sem código com facilidade em um ambiente visual intuitivo ou escreva seu próprio código. Em seguida, forneça dados integrados ao Azure Synapse Analytics para desbloquear insights de negócios.

O Data Factory fornece uma camada de transformação e integração de dados que funciona em todas as iniciativas de transformação digital.

Habilite engenheiros de dados e integradores cidadãos para impulsionar os negócios e a análise/BI orientado pela TI.

Prepare dados, construa processos ETL e ELT e orquestre e monitore pipelines sem código. O serviço do Apache Spark™ gerenciado cuida da geração e da manutenção do código.

Transforme mais rapidamente com o mapeamento inteligente orientado a intenções que automatiza as atividades de cópia.

A ingestão de dados de várias fontes diversas pode ser cara, demorada e exigir várias soluções distintas. O Azure Data Factory oferece um serviço individual pago conforme o uso. Você pode:

Escolha entre mais de 90 conectores internos para adquirir dados de fontes de Big Data, como Amazon Redshift, Google BigQuery e HDFS; data warehouses corporativos como Oracle Exadata e Teradata; aplicativos SaaS como Salesforce, Marketo e ServiceNow; e todos os serviços de dados do Azure.

Usar a capacidade total da largura de banda de rede subjacente, com até 5 GB/s de taxa de transferência.