Jaké jsou výchozí a doporučené konfigurace uzlů pro Azure HDInsight?What are the default and recommended node configurations for Azure HDInsight?

Tento článek popisuje výchozí a doporučené konfigurace uzlů pro clustery Azure HDInsight.This article discusses default and recommended node configurations for Azure HDInsight clusters.

V následujících tabulkách jsou uvedeny výchozí a Doporučené velikosti virtuálních počítačů pro clustery HDInsight.The following tables list default and recommended virtual machine (VM) sizes for HDInsight clusters. Tyto informace jsou nezbytné k pochopení velikosti virtuálních počítačů, které se mají použít při vytváření skriptů PowerShellu nebo rozhraní příkazového řádku Azure CLI pro nasazení clusterů HDInsight.This information is necessary to understand the VM sizes to use when you're creating PowerShell or Azure CLI scripts to deploy HDInsight clusters.

Pokud v clusteru potřebujete víc než 32 uzlů pracovních procesů, vyberte velikost hlavního uzlu s aspoň 8 jádry a 14 GB paměti RAM.If you need more than 32 worker nodes in a cluster, select a head node size with at least 8 cores and 14 GB of RAM.

Jedinými typy clusterů, které mají datové disky, jsou Kafka a HBA clustery s povolenou funkcí urychleného zápisu.The only cluster types that have data disks are Kafka and HBase clusters with the Accelerated Writes feature enabled. HDInsight podporuje P30 a S30 velikosti disků v těchto scénářích.HDInsight supports P30 and S30 disk sizes in these scenarios. Pro všechny ostatní typy clusterů poskytuje HDInsight spravované místo na disku clusteru.For all other cluster types, HDInsight provides managed disk space with the cluster. Od 11/07/2019 bude velikost spravovaného disku každého uzlu v nově vytvořeném clusteru 128 GB.Starting 11/07/2019, the managed disk size of each node in the newly created cluster is 128 GB. Tato změna se nedá změnit.This can't be changed.

Specifikace všech minimálních doporučených typů virtuálních počítačů použitých v tomto dokumentu jsou shrnuté v následující tabulce.The specifications of all minimum recommended VM types used in this document are summarized in the following table.

VelikostSize Virtuální procesoryvCPU Paměť: GiBMemory: GiB Dočasné úložiště (SSD): GiBTemp storage (SSD) GiB Maximální propustnost dočasného úložiště: IOPS / čtení v MB/s / zápis v MB/sMax temp storage throughput: IOPS / Read MBps / Write MBps Maximální propustnost datových disků: IOPSMax data disks / throughput: IOPS Maximální počet síťových karet/očekávaná šířka pásma sítě (MB/s)Max NICs / Expected network bandwidth (Mbps)
Standard_D3_v2Standard_D3_v2 44 1414 200200 12000 / 187 / 9312000 / 187 / 93 16/16x50016 / 16x500 4 / 3 0004 / 3000
Standard_D4_v2Standard_D4_v2 88 2828 400400 24000 / 375 / 18724000 / 375 / 187 32/32x50032 / 32x500 8 / 6 0008 / 6000
Standard_D5_v2Standard_D5_v2 1616 5656 800800 48000 / 750 / 37548000 / 750 / 375 64/64x50064 / 64x500 8 / 120008 / 12000
Standard_D12_v2Standard_D12_v2 44 2828 200200 12000 / 187 / 9312000 / 187 / 93 16 / 16×50016 / 16x500 4 / 3 0004 / 3000
Standard_D13_v2Standard_D13_v2 88 5656 400400 24000 / 375 / 18724000 / 375 / 187 32 / 32×50032 / 32x500 8 / 6 0008 / 6000
Standard_D14_v2Standard_D14_v2 1616 112112 800800 48000 / 750 / 37548000 / 750 / 375 64/64x50064 / 64x500 8 / 120008 / 12000
Standard_A1_v2Standard_A1_v2 11         22           1010             1000 / 20 / 101000 / 20 / 10                                           2 / 2×5002 / 2x500               2 / 2502 / 250                
Standard_A2_v2Standard_A2_v2 22 44 2020 2000 / 40 / 202000 / 40 / 20 4 / 4×5004 / 4x500 2 / 5002 / 500
Standard_A4_v2Standard_A4_v2 44 88 4040 4000 / 80 / 404000 / 80 / 40 8 / 8×5008 / 8x500 4 / 1 0004 / 1000

Další informace o specifikacích jednotlivých typů virtuálních počítačů najdete v následujících dokumentech:For more information on the specifications of each VM type, see the following documents:

Všechny podporované oblasti kromě Brazílie – jih a Japonsko – západAll supported regions except Brazil south and Japan west

Poznámka

Pokud chcete získat identifikátor SKU pro použití v PowerShellu a dalších skriptech, přidejte Standard_ na začátek všech SKU virtuálních počítačů v následujících tabulkách.To get the SKU identifier for use in powershell and other scripts, add Standard_ to the beginning of all of the VM SKUs in the tables below. Například D12_v2 by se stala Standard_D12_v2 .For example, D12_v2 would become Standard_D12_v2.

Typ clusteruCluster type HadoopHadoop HBaseHBase Interaktivní dotazInteractive Query BouřeStorm SparkSpark ML ServerML Server KafkaKafka
Head: výchozí velikost virtuálního počítačeHead: default VM size D12_v2D12_v2 D12_v2D12_v2 D13_v2D13_v2 A4_v2A4_v2 D12_v2,D12_v2,
D13_v2 *D13_v2*
D12_v2D12_v2 D3_v2D3_v2
Head: Minimální doporučené velikosti virtuálních počítačůHead: minimum recommended VM sizes D5_v2D5_v2 D3_v2D3_v2 D13_v2D13_v2 A4_v2A4_v2 D12_v2,D12_v2,
D13_v2 *D13_v2*
D12_v2D12_v2 D3_v2D3_v2
Pracovní proces: výchozí velikost virtuálního počítačeWorker: default VM size D4_v2D4_v2 D4_v2D4_v2 D14_v2D14_v2 D3_v2D3_v2 D13_v2D13_v2 D4_v2D4_v2 4 D12_v2 s 2 S30 disky na zprostředkovatele4 D12_v2 with 2 S30 disks per broker
Pracovní proces: Minimální doporučené velikosti virtuálních počítačůWorker: minimum recommended VM sizes D5_v2D5_v2 D3_v2D3_v2 D13_v2D13_v2 D3_v2D3_v2 D12_v2D12_v2 D4_v2D4_v2 D3_v2D3_v2
ZooKeeper: výchozí velikost virtuálního počítačeZooKeeper: default VM size A4_v2A4_v2 A4_v2A4_v2 A4_v2A4_v2 A2_v2A2_v2 A4_v2A4_v2
ZooKeeper: Minimální doporučené velikosti virtuálních počítačůZooKeeper: minimum recommended VM sizes A4_v2A4_v2 A4_v2A4_v2 A2_v2A2_v2 A2_v2A2_v2 A4_v2A4_v2
Služby ML: výchozí velikost virtuálního počítačeML Services: default VM size D4_v2D4_v2
Služby ML: Minimální doporučená velikost virtuálního počítačeML Services: minimum recommended VM size D4_v2D4_v2

* = Velikosti virtuálních počítačů pro clustery Spark Balíček zabezpečení podniku (ESP)* = VM Sizes for Spark Enterprise Security Package (ESP) clusters

Brazílie – pouze jih a Japonsko – západBrazil south and Japan west only

Typ clusteruCluster type HadoopHadoop HBaseHBase Interaktivní dotazInteractive Query BouřeStorm SparkSpark Služby MLML Services
Head: výchozí velikost virtuálního počítačeHead: default VM size D12D12 D12D12 D13D13 A4_v2A4_v2 D12D12 D12D12
Head: Minimální doporučené velikosti virtuálních počítačůHead: minimum recommended VM sizes D5_v2D5_v2 D3_v2D3_v2 D13_v2D13_v2 A4_v2A4_v2 D12_v2D12_v2 D12_v2D12_v2
Pracovní proces: výchozí velikost virtuálního počítačeWorker: default VM size 4D4 4D4 D14D14 D3D3 D13D13 4D4
Pracovní proces: Minimální doporučené velikosti virtuálních počítačůWorker: minimum recommended VM sizes D5_v2D5_v2 D3_v2D3_v2 D13_v2D13_v2 D3_v2D3_v2 D12_v2D12_v2 D4_v2D4_v2
ZooKeeper: výchozí velikost virtuálního počítačeZooKeeper: default VM size A4_v2A4_v2 A4_v2A4_v2 A4_v2A4_v2 A2_v2A2_v2
ZooKeeper: Minimální doporučené velikosti virtuálních počítačůZooKeeper: minimum recommended VM sizes A4_v2A4_v2 A4_v2A4_v2 A4_v2A4_v2 A2_v2A2_v2
Služby ML: výchozí velikosti virtuálních počítačůML Services: default VM sizes 4D4
Služby ML: Minimální doporučené velikosti virtuálních počítačůML Services: minimum recommended VM sizes D4_v2D4_v2

Poznámka

  • Hlava se označuje jako Nimbus pro typ clusteru.Head is known as Nimbus for the Storm cluster type.
  • Pracovní proces je známý jako správce pro typ clusteru.Worker is known as Supervisor for the Storm cluster type.
  • Pracovní proces je známý jako oblast pro typ clusteru HBA.Worker is known as Region for the HBase cluster type.

Další krokyNext steps