Azure Data Factory

• Zoznámite sa so službou Azure Data Factory a jej kľúčovými vlastnosťami a funkciami
• Pochopíte, ako sa odlišujú ETL/ELT procesy v cloude od tých on-premises
• Dozviete sa, ako implementovať komplexné Pipelines v Azure Data Factory
• Naučíte sa načítať dáta v rôznych formátoch pomocou Azure Data Factory
• Vyskúšate si transformovať načítané dáta pred ich zápisom do cieľového dátového skladu
• Zistíte, ako správne riadiť vývoj Pipelines a ako ich verzovať a následne nasadzovať pomocou CI/CD
• Zoznámite sa s možnosťami automatizácie spúšťania Pipelines a monitoringom ich behu a prípadným ladením problémov

Kurz je cielený na dátových inžinierov a tvorcov ETL/ELT procesov v cloudovom prostredí Microsoft Azure, ktorí sa chcú naučiť efektívne implementovať ETL/ELT procesy s využitím služby Azure Data Factory.

• Znalosti základných princípov návrhu dátových skladov a implementácia ETL procesov na úrovni kurzu GOC645
• Znalosti základnej obsluhy cloudového prostredia na úrovni kurzu MOC AZ-900
• Základná znalosť dátových služieb v Microsoft Azure na úrovni kurzu MOC DP-900

1 Úvod do ETL/ELT v Microsoft Azure

• Základná orientácia v pojmoch a prostredí Microsoft Azure
• Prehľad ETL/ELT technológií v Microsoft Azure
• Prehľad súvisiacich technológií
• Vysvetlenie konceptov Data Warehouse (DWH) v Microsoft Azure

2 Komponenty Azure Data Factory

• Úvodné predstavenie Azure Data Factory
• Prehľad Integration Runtimes
• Vysvetlenie a ukážka Linked Services
• Predstavenie a vysvetlenie konceptu Dataset
• Vysvetlenie orchestrácie behu pomocou Pipelines

3 Dynamické Azure Data Factory

• Vysvetlenie práce s premennými
• Deklarácia a použitie parametrov
• Práca s výrazmi

4 Externé aktivity

• Tvorba uložených procedúr vrátane riadenia transakcií a ošetrenia chýb
• Volanie uložených procedúr z Azure Data Factory
• Predstavenie Notebookov, ukážka ich tvorby a volania v prostredí Azure Data Factory

5 Nasadenie a monitorovanie

• Predstavenie dostupných spôsobov nasadenia
• Vysvetlenie použitia Deployment Templates, ich tvorba a nasadenie
• Predstavenie možností monitoringu a debuggingu Pipelines pri ich vývoji
• Možnosti monitorovania už nasadených Pipelines
• Proaktívny monitoring pomocou Alertov v Microsoft Azure

Predošlé kurzy

Implementácia dátového skladu a ETL procesov s využitím Microsoft SQL Server Integration Services [GOC645]

Alternatívne kurzy

Moderný dátový sklad a riešenia pre analýzu veľkých dát v Microsoft Azure [MOC DP-203]