Apa saja konfigurasi simpul default dan yang direkomendasikan untuk Microsoft Azure HDInsight?
Artikel ini membahas konfigurasi simpul default dan yang direkomendasikan untuk kluster Microsoft Azure HDInsight.
Konfigurasi simpul default dan minimum yang direkomendasikan serta ukuran komputer virtual untuk kluster
Tabel berikut mencantumkan ukuran komputer virtual (VM) default dan yang direkomendasikan untuk kluster Microsoft Azure HDInsight. Informasi ini diperlukan untuk memahami ukuran VM yang akan digunakan ketika Anda membuat skrip PowerShell atau Azure CLI untuk menyebarkan kluster Microsoft Azure HDInsight.
Jika Anda membutuhkan lebih dari 32 simpul pekerja dalam sebuah kluster, pilih ukuran head simpul dengan setidaknya 8 inti dan RAM 14 GB.
Satu-satunya jenis kluster yang memiliki disk data adalah kluster Kafka dan HBase dengan fitur Accelerated Writes diaktifkan. Microsoft Azure HDInsight mendukung ukuran disk P30 dan S30 dalam skenario ini. Untuk semua jenis kluster lainnya, Microsoft Azure HDInsight menyediakan ruang disk terkelola dengan kluster. Mulai 11/07/2019, ukuran disk terkelola dari setiap simpul di kluster yang baru dibuat adalah 128 GB. Hal ini tidak bisa diubah.
Spesifikasi semua jenis VM minimum yang direkomendasikan yang digunakan dalam dokumen ini diringkas dalam tabel berikut.
| Ukuran | vCPU | Memori: GiB | Penyimpanan sementara (SSD) GiB | Maks throughput penyimpanan sementara: IOPS / Baca MBps / Tulis MBps | Maks disk data/throughput maksimum: IOPS | Maks NIC/Bandwidth jaringan yang diharapkan (Mbps) |
|---|---|---|---|---|---|---|
| Standard_D3_v2 | 4 | 14 | 200 | 12000/187/93 | 16/16x500 | 4/3000 |
| Standard_D4_v2 | 8 | 28 | 400 | 24000/375/187 | 32/32x500 | 8/6000 |
| Standard_D5_v2 | 16 | 56 | 800 | 48000/750/ 375 | 64/64x500 | 8/12000 |
| Standard_D12_v2 | 4 | 28 | 200 | 12000/187/93 | 16/16x500 | 4/3000 |
| Standard_D13_v2 | 8 | 56 | 400 | 24000/375/187 | 32/32x500 | 8/6000 |
| Standard_D14_v2 | 16 | 112 | 800 | 48000/750/ 375 | 64/64x500 | 8/12000 |
| Standard_A1_v2 | 1 | 2 | 10 | 1000/20/10 | 2/2x500 | 2/250 |
| Standard_A2_v2 | 2 | 4 | 20 | 2000/40/20 | 4/4x500 | 2/500 |
| Standard_A4_v2 | 4 | 8 | 40 | 4000 / 80 / 40 | 8 / 8x500 | 4/1000 |
Untuk informasi selengkapnya tentang spesifikasi setiap jenis VM, lihat dokumen berikut ini:
- Ukuran komputer virtual tujuan umum: Dv2 seri 1-5
- Ukuran komputer virtual dengan optimisasi memori: Dv2 seri 11-15
- Ukuran komputer virtual tujuan umum: Av2 seri 1-8
Wilayah yang Didukung
Catatan
Untuk mendapatkan pengidentifikasi SKU untuk digunakan dalam powershell dan skrip lainnya, tambahkan Standard_ ke awal semua SKU VM dalam tabel di bawah ini. Contohnya: D12_v2 akan menjadi Standard_D12_v2.
| Jenis kluster | Hadoop | HBase | Kueri Interaktif | Spark | Kafka |
|---|---|---|---|---|---|
| Head: ukuran VM default | E4_v3 | E4_v3 | D13_v2 | E8_v3, D13_v2* |
E4_v3 |
| Head: ukuran VM minimum yang direkomendasikan | D5_v2 | D3_v2 | D13_v2 | D12_v2, D13_v2* |
D3_v2 |
| Pekerja: ukuran VM default | E8_v3 | E4_v3 | D14_v2 | E8_v3 | 4 E4_v3 dengan 2 disk S30 per perantara |
| Pekerja: ukuran VM minimum yang direkomendasikan | D5_v2 | D3_v2 | D13_v2 | D12_v2 | D3_v2 |
| ZooKeeper: ukuran VM default | A4_v2 | A4_v2 | A4_v2 | ||
| ZooKeeper: ukuran VM minimum yang direkomendasikan | A4_v2 | A4_v2 | A4_v2 |
* = Ukuran VM untuk kluster Spark Enterprise Security Package (ESP)
Catatan
- Pekerja dikenal sebagai Region untuk jenis kluster HBase.