Azure Data Factory (ADF): Orchestratie en Development
Omschrijving
In deze tweedaagse training "Azure Data Factory: Orchestratie & Development", gaan we in op zowel het aansturen en ontwikkelen als het inrichten en beheren van Azure Data Factory (ADF) binnen het Azure-platform.
Wil je met Azure Data Factory de orchestratie, data movement en ETL/ELT taken uitvoeren en aansturen in het Azure-platform? In deze training Azure Data Factory: Orchestratie en Development richten we ons op het stuk orchestratie en data movement.
Met orchestratie bedoelen we hier het aansturen van bronnen, databases en services. Hiermee kunnen we aangeven welke taak wanneer kan worden uitgevoerd.
Daarnaast kijken we naar data movement: het kopiëren van data naar de cloud en binnen de cloud. Hiermee wordt ervoor gezorgd dat data in het juiste formaat (bijv. een SQL-database, of juist Parquet-bestanden) op de juiste plek (bijv. Azure Data Lake Storage, SQL Database of Synapse) komt te staan.
Deze training is bedoeld voor iedereen die verantwoordelijk is voor het aansturen en ontwikkelen van ETL en ELT-processen met ADF in hun organisatie, alsook voor degenen die verantwoordelijk zijn voor de inrichting en het beheer van ADF. Dit kan zijn omdat ADF al wordt gebruikt, of omdat je organisatie bezig is haar data en analytics naar Azure te brengen. Je vindt het belangrijk om goed te begrijpen hoe ADF werkt en wilt daar zelf in kunnen ontwikkelen. Daarnaast wil je ervoor zorgen dat de inrichting solide is en wil je goed begrijpen hoe je efficiënt en veilig gebruik kunt maken van ADF.
Na deze tweedaagse training:
- Begrijp je hoe Azure Data Factory werkt
- Heb je een overzicht van alle componenten van Azure Data Factory
- Kun je zelf linked services, datasets, activities en pipelines instellen
- Weet je hoe Azure Data Factory opgebouwd is
- Kun je ADF veilig inrichten
- Ben je in staat om de integration runtime te managen
Dit doen we zoals je gewend bent bij Wortell Smart Learning: onder begeleiding van een inspirerende trainer, gebruikmakend van écht goed materiaal, en heel praktijkgericht. We gaan dus veel zelf aan de slag.
Voorkennis om de tweedaagse training Azure Data Factory te volgen
De training is laagdrempelig en kan gevolgd worden als je een basis in SQL hebt. Wel moet je al enigszins thuis zijn in Azure en Azure DevOps:
- Azure:
- Core Azure Concepts en bekendheid met de Azure Portal zijn belangrijk. Als voorbereiding zou je de gratis e-learning van Microsoft kunnen volgen "Azure Fundamentals part 1: Describe core Azure concepts"
- Het Azure Data Platform is belangrijk. Het onderscheid tussen de verschillende soorten data stores, variaties in soorten data en manieren van verwerken wordt besproken in de ééndaagse training Azure Data Fundamentals (DP-900)
- Azure DevOps is voor het daadwerkelijk ontwikkelen (development) met ADF erg belangrijk, en wordt ingezet voor zowel het versiebeheer als Continuous Integration en Continuous Delivery (CI/CD) in ADF.
- Wanneer je geen ervaring hebt met Azure DevOps (of minimaal met Git en een andere CI/CD-tool) kun je de training wel volgen, maar zullen sommige onderdelen wat lastiger zijn.
- Wil je ook aan de slag met Azure DevOps? Kijk eens bij onze training CI/CD met Azure DevOps voor Data Engineers.
Onderwerpen
Gedurende de twee dagen zullen we de basis van het werken met Azure Data Factory leggen en de volgende onderwerpen trainen:
- Opbouw van Azure Data Factory
- Orchestratie en Data Movement in ADF
- Ontwikkelen in ADF
- Inrichten en beheren van ADF
- Linked Services, Datasets, Activities en Pipelines in ADF
- Integration Runtimes: inrichtingskeuzes en beheer
- Private Endpoints in ADF
- Omgaan met triggers
- Azure Data Factory in Git
- Geavanceerde workflows met dynamic schema en inferred data types
- Monitoring en Logging
- Billing en kosten
Studiemateriaal
In de training "Azure Data Factory: Orchestratie en Development" gebruiken we materiaal dat we bij Wortell Smart Learning zelf ontwikkeld hebben. Wij zorgen ervoor dat je al het benodigde materiaal op tijd ontvangt.
Beschikbare datums
| Titel | Datum |
|---|---|
| Synapse Pipelines: Orchestratie en Development | |
| Synapse Pipelines: Orchestratie en Development dag 2 |
