dokumentasi Rekayasa Data di Microsoft Fabric

Rekayasa data di Microsoft Fabric memungkinkan pengguna merancang, membangun, dan memelihara infrastruktur dan sistem yang memungkinkan organisasi mereka mengumpulkan, menyimpan, memproses, dan menganalisis data dalam volume besar.

Tentang Rekayasa Data

Gambaran Umum

• Apa itu Rekayasa data?
• Apa itu lakehouse?
• Peran dan izin ruang kerja

Mulai menggunakan lakehouse

Memulai

• Membuat lakehouse
• Menavigasi penjelajah lakehouse

Panduan Penggunaan

• Mendapatkan data ke lakehouse menggunakan notebook

Mulai menggunakan buku catatan

Memulai

• Buku catatan Microsoft Fabric

Panduan Penggunaan

• Membuat dan mengelola buku catatan
• Menjelajahi data lakehouse dengan buku catatan
• Memvisualisasikan buku catatan
• Kontrol dan penyebaran sumber notebook
• Menggunakan MSSparkUtils di notebook

API untuk GraphQL

Gambaran Umum

• Apa itu Fabric API untuk GraphQL?

Memulai

• Membuat API untuk GraphQL dan menambahkan data

Panduan Penggunaan

• Kelola hubungan
• Sambungkan aplikasi
• Mengkueri beberapa sumber data

Delta Lake

Konsep

• Tabel Lakehouse dan Delta

Panduan Penggunaan

• Pengoptimalan Delta dan V-Order
• Muat ke tabel

Tutorial end-to-end Lakehouse

Konsep

• Gambaran umum skenario Lakehouse

Tutorial

• Langkah 1 - Buat ruang kerja
• Langkah 2 - Membuat lakehouse
• Langkah 3 - Menyerap data ke lakehouse
• Langkah 4 - Mengubah data menjadi tabel delta
• Langkah 5 - Buat laporan
• Langkah 6 - Bersihkan sumber daya

Apache Spark

Konsep

• Definisi kerja Apache Spark
• Gambaran umum pemantauan Spark
• Penasihat Apache Spark

Memulai

• Membuat definisi kerja Spark
• Membuat definisi kerja Spark dengan Fabric API
• Integrasi Git definisi kerja Spark

Panduan Penggunaan

• Menjadwalkan dan menjalankan definisi kerja Spark
• Memantau aplikasi Spark
• Mengelola pustaka Apache Spark
• Cara menggunakan Fabric MSSparkUtils
• Mengonfigurasi pengaturan kapasitas

Integrasi Visual Studio Code

Panduan Penggunaan

• Menggunakan buku catatan dari Visual Studio Code
• Menggunakan buku catatan dari Visual Studio Code dengan sumber daya
• Menggunakan definisi kerja Spark dari Visual Studio Code
• Jelajahi lakehouse dari VISUAL Code
• Mengembangkan notebook dari pengalaman web Visual Studio Code

Mulai menggunakan lingkungan

Memulai

• Lingkungan Microsoft Fabric

Panduan Penggunaan

• Mengelola komputasi Spark di lingkungan
• Mengelola pustaka di lingkungan
• Alur integrasi dan penyebaran Git Lingkungan
• Mengelola lingkungan melalui API publik
• Mengelola sumber daya di lingkungan Fabric
• Memigrasikan pustaka ruang kerja dan properti Spark yang ada ke lingkungan