Data engineering on Microsoft Azure - DP-203
Omschrijving
Met de toenemende hoeveelheid data en de toenemende meerwaarde van wat we met die data kunnen doen, is data engineering een onmisbare taak geworden binnen organisaties. Data Engineering is het prepareren en klaarzetten van gegevens (data producten) voor gebruik. Dat gebruik kan meer klassiek reporting zijn, meer dynamiche data analyse of zelfs Artificial Intelligence.
In deze cursus leert u een Data Lake opzetten in Microsoft Azure. Een groot deel van de cursus gaat over Microsoft Synapse Analytics en hoe de componenten van Synapse in te zetten on een succesvol Data Lake te bouwen met zowel batch verwerking als streaming data. Ook data governance komt uiteraard aan bod.
Inhoud
De volgende onderwerpen komen aan bod:
- Data Lake overview and architecture
- Analyze data with Azure Synapse Analytics serverless SQL pools
- Perform data engineering with Azure Synapse Apache Spark Pools
- Create data marts using Azure Synapse Analytics dedicated SQL Pools
- Transfer and transform data with Azure Synapse Analytics pipelines
- Using Direct Link for near real-time data
- Implement a data streaming solution with Azure Stream Analytics
- Govern data across an enterprise using Purview
- Data engineering with Azure Databricks
Duur en vorm
Dit is een vier daagse klassikale training met veel hands-on exercises.
Doelgroep en voorkennis
Deze cursus is bedoeld voor Data Engineers en ETL developers die op het Microsoft Azure platform een Data Lake (en/of Data warehouse) willen bouwen gebruik makend van Microsoft Synapse. Deze cursus leidt op voor het officiële Microsoft examen DP-203.
Voorkennis van werken met data en specifiek enige exposure met T-SQL en Python strekt zeer tot aanbeveling.
Geleerde skills
Na de cursus kan je:
- Beschrijven uit welke componenten Synapse Analytics bestaat en kiezen wanneer welke component te gebruiken
- Serverless en dedicated SQL Pools opzetten en gebruiken
- Python notebooks op Spark inzetten
- (Data Factory / Synapse) Pipelines bouwen
- Near real-time en streaming data verwerken
- Purview inzetten binnen de organisatie
