Dátový inžinier dokumentáciu v službe Microsoft Fabric

Dátové inžinierstvo v službe Microsoft Fabric umožňuje používateľom navrhovať, vytvárať a udržiavať infraštruktúry a systémy, ktoré umožňujú ich organizáciám zhromažďovať, ukladať, spracovávať a analyzovať veľké objemy údajov.

Informácie o Dátový inžinier

Prehľad

• Čo je dátové inžinierstvo?
• Čo je lakehouse?
• Roly a povolenia pracovného priestoru

Začíname s prostredím lakehouse

Začať

• Vytvorenie jazera
• Navigácia v prieskumníkovi lakehouse

Podrobný sprievodca

• Získanie údajov do služby lakehouse pomocou poznámkového bloku

Začíname s poznámkovými blokmi

Začať

• Poznámkové bloky služby Microsoft Fabric

Podrobný sprievodca

• Vytváranie a spravovanie poznámkových blokov
• Preskúmanie údajov služby lakehouse pomocou poznámkového bloku
• Vizualizácia poznámkových blokov
• Ovládanie a nasadenie zdrojového ovládania poznámkových blokov
• Používanie mssparkUtils v poznámkovom bloku

Delta Lake

Koncept

• Tabuľky Lakehouse a Delta

Podrobný sprievodca

• Optimalizácia delta a objednávka V
• Načítanie do tabuliek

Lakehouse end-to-end tutorial

Koncept

• Prehľad scenárov pre lakehouse

Kurz

• Krok 1 – Vytvorte pracovný priestor.
• Krok 2 - Vytvorte si jazero
• Krok 3 – Ingest data into lakehouse (Ingest data into lakehouse)
• Krok 4 – Transformovanie údajov do delta tabuliek
• Krok 5 – zostavenie zostavy
• Krok 6 – Vyčistenie zdrojov

Apache Spark

Koncept

• Definícia úlohy v Apache Spark
• Prehľad monitorovania spark
• Poradca pre Apache Spark

Začať

• Vytvorenie definície úlohy v službe Spark
• Vytvorenie definície úloh služby Spark pomocou rozhrania API služby Fabric
• Integrácia Git definície úlohy spark

Podrobný sprievodca

• Naplánovanie a spustenie definície úlohy Spark
• Monitorovanie aplikácie Spark
• Spravovanie knižníc Apache Spark
• Ako používať fabric MSSparkUtils
• Konfigurácia nastavení kapacity

Integrácia programu VS Code

Podrobný sprievodca

• Používanie poznámkových blokov z VS Code
• Používanie poznámkových blokov z VS Code s prostriedkom
• Použitie definícií úloh spark z VS Code
• Preskúmať lakehouse z VS Code
• Vývoj notebooku z webového prostredia nástroja VS Code

Začíname s prostredím

Začať

• Prostredia služby Microsoft Fabric

Podrobný sprievodca

• Správa výpočtovej služby Spark v prostrediach
• Správa knižníc v prostrediach
• Migrácia existujúcich knižníc pracovných priestorov a vlastností služby Spark do prostredia