NC A100 v4 系列

警告

本文參考 CentOS,這是接近結束生命週期 (EOL) 狀態的 Linux 發行版本。 請據以考慮您的使用和規劃。 如需詳細資訊,請參閱 CentOS 生命週期結束指引

適用於: ✔️ Linux VM ✔️ Windows VM ✔️ 彈性擴展集 ✔️ 統一擴展集

NC A100 v4 系列虛擬機器是 Azure GPU 系列的新成員。 此系列適用於實際 Azure 應用 AI 訓練和批次推斷工作負載。

NC A100 v4 系列由 NVIDIA A100 PCIe GPU 和第三代 AMD EPYC™ 7V13 (米蘭) 處理器提供。 VM 最多可提供 4 個 NVIDIA A100 PCIe GPU,每個 CPU 記憶體為 80 GB,最多 96 個非多線程 AMD EPYC 米蘭處理器核心和 880 GiB 的系統記憶體。 這些 VM 適用於實際應用的 AI 工作負載,例如:

  • GPU 加速分析和資料庫
  • 包含大量前置和後置處理的批次推斷
  • 自主模型定型
  • 石油與天然氣貯存槽模擬
  • 機器學習 (ML) 開發
  • 影片處理
  • AI/ML Web 服務

支援的功能

若要開始使用 NC A100 v4 VM,請參閱 HPC 工作負載設定和最佳化,以取得包括驅動程式和網路設定的步驟。

由於 GPU 記憶體 I/O 使用量增加,NC A100 v4 需要使用第 2 代 VM 和市集映像。 雖然建議使用 Azure HPC 映射,但支援 Azure HPC Ubuntu 20.04 和 Azure HPC CentOS 7.9、RHEL 8.8、RHEL 9.2、Windows Server 2019 和 Windows Server 2022 映像。

大小 vCPU 記憶體 (GiB) 暫存磁碟1 (GiB) NVMe 磁碟2 GPU3 GPU 記憶體 (GiB) 最大資料磁碟 最大未快取磁碟輸送量 (IOPS / MBps) 最大 NIC/網路頻寬 (MBps)
Standard_NC24ads_A100_v4 24 220 64 960 GB 1 80 8 30000/1000 2/20,000
Standard_NC48ads_A100_v4 48 440 128 2x960 GB 2 160 16 60000/2000 4/40,000
Standard_NC96ads_A100_v4 96 880 256 4x960 GB 4 320 32 120000/4000 8/80,000

1 NC A100 v4 系列 VM 具有標準 SCSI 型暫存資源磁碟,以供 OS 分頁/交換檔使用。 這可確保 NVMe 磁碟機可完全專供應用程式使用。 此磁碟為暫時磁碟,所有資料在停止/解除配置時都會遺失。

2 個本機 NVMe 磁碟都是暫時性的,如果您停止/解除配置您的 VM,這些磁碟上的資料將會遺失。 本機 NVMe 磁碟會以 RAM 的形式推出,而且必須在新部署的 VM 中手動格式化。

31 GPU = 一個 A100 80GB PCIe GPU 記憶卡

資料表大小定義

  • 儲存容量會以 GiB 或是 1024^3 位元組為單位顯示。 當比較使用 GB (1000^3 位元組) 為度量單位的磁碟與使用 GiB (1024^3) 為度量單位的磁碟時,請記住以 GiB 為單位提供的容量數字可能較小。 例如,1023 GiB = 1098.4 GB。

  • 磁碟輸送量是以每秒輸入/輸出作業 (IOPS) 和 MBps 進行測量,其中 MBps = 10^6 位元組/每秒。

  • 資料磁碟可以在快取模式或取消快取模式下運作。 針對快取的資料磁碟作業,主機快取模式必須設定為 ReadOnlyReadWrite。 針對取消快取的資料磁碟作業,主機快取模式必須設定為 None

  • 若要瞭解如何取得 VM 的最佳儲存體效能,請參閱虛擬機器和磁碟效能

  • 預期的網路頻寬是針對所有目的地,為所有 NIC 中每個 VM 類型配置的最大彙總頻寬。 如需詳細資訊,請參閱虛擬機器網路頻寬

    不保證效能上限。 限制針對預定應用程式選取正確 VM 類型的供應項目指導。 實際網路效能取決於多種因素,包括網路壅塞、應用程式負載和網路設定。 如需最佳化網路輸送量的資訊,請參閱最佳化 Azure 虛擬機器的網路輸送量。 若要達到 Linux 或 Windows 上的預期網路效能,您可能需要選取特定版本,或最佳化 VM。 如需詳細資訊,請參閱頻寬/輸送量測試 (NTTTCP)

其他大小和資訊

您可以使用定價計算機來估計您的 Azure VM 成本。

如需磁碟類型的詳細資訊,請參閱 Azure 中有哪些磁碟類型可用?

後續步驟