Depolama hedefleri ekleme

Depolama hedefler , bir Azure HPC önbelleğinden erişilen dosyalar için arka uç depolardır. NFS depolama (Şirket içi donanım sistemi gibi) ekleyebilir veya Azure Blob 'da verileri saklayabilirsiniz.

Herhangi bir önbellek için 10 farklı depolama hedefi tanımlayabilirsiniz ve daha büyük önbellekler en fazla 20 depolama hedefi destekleyebilir.

Önbellek, tüm depolama hedeflerini toplanmış bir ad alanındagösterir. Ad alanı yolları, depolama hedeflerini ekledikten sonra ayrı olarak yapılandırılır.

Depolama dışarı aktarımlarının, önbelleğinizin sanal ağından erişilebilir olması gerektiğini unutmayın. Şirket içi donanım depolaması için NFS depolama erişimi için konak adlarını çözebilen bir DNS sunucusu ayarlamanız gerekebilir. DNS erişimindedaha fazla bilgi edinin.

Önbelleğinizi oluşturduktan sonra depolama hedefleri ekleyin. Bu işlemi izleyin:

1. Önbelleği oluşturma
2. Depolama hedefi tanımlama (Bu makaledeki bilgiler)
3. İstemciye yönelik yolları oluşturma ( toplanan ad alanıiçin)

Depolama hedefi ekleme yordamı, kullandığı depolama türüne bağlı olarak biraz farklıdır. Her biri için Ayrıntılar aşağıda verilmiştir.

Bir önbellek oluşturma ve Azure portal bir depolama hedefi ekleme hakkında video tanıtımı izlemek için aşağıdaki görüntüye tıklayın.

Depolama hedeflerinizi desteklemek için önbelleğinizi doğru şekilde boyutlandırın

Desteklenen depolama hedeflerinin sayısı, önbelleği oluştururken ayarlanan önbellek boyutuna bağlıdır. Önbellek kapasitesi, üretilen iş kapasitesi (GB/sn) ve depolama kapasitesi (TB cinsinden) birleşimidir.

• 10 adede kadar depolama hedefi-seçtiğiniz aktarım ortamınız için en küçük veya orta önbellek depolama değeri olan standart bir önbellek en fazla 10 depolama hedefi olabilir.

  Örneğin, 2 GB/saniye aktarım hızı ve en yüksek önbellek depolama boyutunu seçmeyin önbelleğiniz en fazla 10 depolama hedefini destekler.

• En fazla 20 depolama hedefi-

  • Tüm yüksek aktarım hızı önbellekleri (önceden yapılandırılmış önbellek depolama boyutları), en fazla 20 depolama hedefini destekleyebilir.
  • Seçtiğiniz üretilen iş değeri için en yüksek önbellek boyutunu seçerseniz standart önbelleklerde 20 ' ye kadar depolama hedefi destekleyebilirsiniz. (Azure CLı kullanıyorsanız, önbellek SKU 'nuzu için en yüksek geçerli önbellek boyutunu seçin.)

Aktarım hızı ve önbellek boyutu ayarları hakkında daha fazla bilgi edinmek için önbellek kapasitesini okuyun.

Doğru depolama hedefi türünü seçin

Üç depolama hedefi türünden seçim yapabilirsiniz: NFS, BLOB ve ADLS-NFS. Bu HPC önbellek projesi sırasında dosyalarınızı depolamak için kullanacağınız depolama sistemi türüyle eşleşen türü seçin.

• NFS -ağ bağlantılı bir depolama (NAS) sistemindeki verilere erişmek IÇIN bir NFS depolama hedefi oluşturun. Bu, şirket içi bir depolama sistemi veya NFS ile erişilebilen başka bir depolama türü olabilir.

  • Gereksinimler: NFS depolama gereksinimleri
  • Yönergeler: Yeni BIR NFS depolama hedefi ekleme

• BLOB -çalışma dosyalarınızı yeni bir Azure Blob kapsayıcısında depolamak için bir BLOB depolama hedefi kullanın. Bu kapsayıcı yalnızca Azure HPC önbelleğinde okunabilir veya yazılabilir.

  • Önkoşullar: BLOB depolama gereksinimleri
  • Yönergeler: Yeni bir Azure Blob depolama hedefi ekleme

• ADLS-NFS -ADLS-NFS depolama hedefi, NFS özellikli bir blob kapsayıcısından verilere erişir. Standart NFS komutlarını kullanarak kapsayıcıyı ön yükleyebilirsiniz ve dosyalar daha sonra NFS ile okunabilir.

  • Önkoşullar: ADLS-NFS depolama gereksinimleri
  • Yönergeler: Yeni BIR ADLS-NFS depolama hedefi ekleme

Yeni bir Azure Blob depolama hedefi ekleme

Yeni bir BLOB depolama hedefi boş bir blob kapsayıcısına veya Azure HPC önbellek bulut dosya sistemi biçimindeki verilerle doldurulmuş bir kapsayıcıya ihtiyaç duyuyor. Verileri Azure Blob depolamaya taşımabölümünde bir blob kapsayıcısını önceden yükleme hakkında daha fazla bilgi edinin.

Azure portal depolama hedefi ekleme sayfası, eklemeden hemen önce yeni bir blob kapsayıcısı oluşturma seçeneğini içerir.

az hpc-cache blob-storage-target add --resource-group "hpc-cache-group" \
    --cache-name "cache1" --name "blob-target1" \
    --storage-account "/subscriptions/<subscriptionID>/resourceGroups/myrgname/providers/Microsoft.Storage/storageAccounts/myaccountname" \
    --container-name "container1" --virtual-namespace-path "/blob1"

Yeni NFS depolama hedefi ekleme

NFS depolama hedefi, önbelleğe bu depolama sisteminden verilerin nasıl depolanması gerektiğine söyleyen bir kullanım modeli ayarı da dahil olmak üzere Blob depolama hedeflerinden farklı ayarlara sahiptir.

Kullanım modeli seçme

Depolama sistemine ulaşmak için NFS kullanan bir depolama hedefi sanız, bu hedef için bir kullanım modeli seçmeniz gerekir. Bu model, verilerinizin nasıl önbelleğe alınarak önbelleğe alın olduğunu belirler.

Bu ayarların hepsi hakkında daha fazla ayrıntı için Kullanım modellerini anlama makalesi'ne bakın.

HPC Cache'in yerleşik kullanım modelleri, eski verileri alma riskiyle hızlı yanıtı dengelemeyi seçmenizi sağlar. Dosyaları okuma hızını iyileştirmek için önbellekte yer alan dosyaların arka uç dosyalarına göre denetlenip denetlene alınmayabilirsiniz. Öte yandan, dosyalarınızın uzak depolama ile her zaman güncel olduğundan emin olmak için sık kullanılan bir model seçin.

Bu üç seçenek çoğu durumu içerir:

• Yoğun ve seyrek yazma okuma : Statik veya nadiren değiştirilen dosyalara okuma erişimini hızlandırır.

  Bu seçenek, istemci okumalarından dosyaları önbelleğe almasa da istemci yazmalarını hemen arka uç depolama alanına iletir. Önbellekte depolanan dosyalar, NFS depolama biriminin dosyalarıyla otomatik olarak karşılaştırılır.

  Bir dosyanın önce önbelleğe yazmadan doğrudan depolama sisteminde değiştirilebilir olması riski varsa bu seçeneği kullanın. Bu durumda, dosyanın önbelleğe alınmış sürümü arka uç dosyasıyla eşitnin dışında olur.

• %15'in üzerinde yazma - Bu seçenek hem okuma hem de yazma performansını hızlandırır.

  İstemci okumaları ve istemci yazmaları önbelleğe alınmış. Önbellekte yer alan dosyaların, arka uç depolama sistemi dosyalarından daha yeni olduğu varsayılır. Önbelleğe alınan dosyalar yalnızca arka uç depolama alanı üzerinde sekiz saatte bir dosyalara karşı otomatik olarak denetlenir. Önbellekte değiştirilen dosyalar, ek bir değişiklikle 20 dakika boyunca önbellekte olduktan sonra arka uç depolama sistemine yazılır.

  Herhangi bir istemci arka uç depolama birimini doğrudan bağlarsa bu seçeneği kullanma, çünkü eski dosyaları olabilir.

• İstemciler önbelleği atlayarak NFS hedefine yazar - İş akışınıza herhangi bir istemci ilk olarak önbelleğe yazmadan verileri doğrudan depolama sistemine yazarsa veya veri tutarlılığını iyileştirmek için bu seçeneği belirleyin.

  İstemcilerin isteğinde bulunan dosyalar önbelleğe alınmış ancak istemciden bu dosyalarda yapılan tüm değişiklikler hemen arka uç depolama sistemine geçirilmelidir. Önbellekte yer alan dosyalar, güncelleştirmeler için arka uç sürümlerine karşı sık sık denetlenir. Bu doğrulama, dosyalar önbellek yerine doğrudan depolama sisteminde değiştiriken veri tutarlılığını sürdürür.

Diğer seçenekler hakkında ayrıntılı bilgi için Kullanım modellerini anlama makalesi'ne bakın.

Bu tabloda tüm kullanım modelleri arasındaki farklar özetlenmiştir:

NFS depolama hedefi oluşturma

az hpc-cache nfs-storage-target add --resource-group "hpc-cache-group" --cache-name "doc-cache0629" \
    --name nfsd1 --nfs3-target 10.0.0.4 --nfs3-usage-model WRITE_WORKLOAD_15 \
    --junction namespace-path="/nfs1/data1" nfs-export="/datadisk1" target-path=""

{- Finished ..
  "clfs": null,
  "id": "/subscriptions/<subscriptionID>/resourceGroups/hpc-cache-group/providers/Microsoft.StorageCache/caches/doc-cache0629/storageTargets/nfsd1",
  "junctions": [
    {
      "namespacePath": "/nfs1/data1",
      "nfsExport": "/datadisk1",
      "targetPath": ""
    }
  ],
  "location": "eastus",
  "name": "nfsd1",
  "nfs3": {
    "target": "10.0.0.4",
    "usageModel": "WRITE_WORKLOAD_15"
  },
  "provisioningState": "Succeeded",
  "resourceGroup": "hpc-cache-group",
  "targetType": "nfs3",
  "type": "Microsoft.StorageCache/caches/storageTargets",
  "unknown": null
}

Yeni ADLS-NFS depolama hedefi ekleme

ADLS-NFS depolama hedefleri, Ağ Dosya Sistemi (NFS) 3.0 protokolünü destekleyen Azure Blob kapsayıcılarını kullanır.

Bu özellik hakkında daha fazla bilgi edinmek için NFS 3.0 protokol desteğini okuyun.

ADLS-NFS depolama hedefleriyle Blob depolama hedefleri arasında bazı benzerlikler, bazıları ise NFS depolama hedefleri ile benzerdir. Örnek:

• Blob depolama hedefi gibi, depolama hesabınıza erişmek Azure HPC Önbelleği erişim izni vermelisiniz.

• NFS depolama hedefi gibi bir önbellek kullanım modeli de ayarlayabilirsiniz.

• NFS özellikli blob kapsayıcıları NFS uyumlu hiyerarşik bir yapıya sahip olduğundan, verileri alan önbelleği kullanmana gerek yok ve kapsayıcılar diğer NFS sistemleri tarafından okunabilir.

  Bir ADLS-NFS kapsayıcısı içinde verileri ön yükleme, sonra bir HPC Önbelleği'ne depolama hedefi olarak ekleme ve daha sonra hpC Önbelleği dışından verilere erişme. Standart bir blob kapsayıcıyı HPC Önbelleği depolama hedefi olarak kullanırken, veriler özel bir biçimde yazılır ve yalnızca diğer Azure HPC Önbelleği uyumlu ürünlerden erişilebilir.

ADLS-NFS depolama hedefi oluşturamadan önce NFS özellikli bir depolama hesabı oluşturmanız gerekir. NFS kullanarak Blob depolama Azure HPC Önbelleği için önkoşullar veyönergeleri izleyin. Önbellek ve depolama hesabı için aynı sanal ağı kullansanız, önbelleğin sanal ağının depolama hesabının sanal ağına erişene kadar olduğundan emin olun.

Depolama hesabınız ayardikten sonra, depolama hedefini oluşturmak için yeni bir kapsayıcı oluşturabilirsiniz.

Bu yapılandırma hakkında daha fazla bilgi edinmek için NFS'ye Azure HPC Önbelleği blob depolamayı kullanma makalelerini okuyun.

ADLS-NFS depolama hedefi oluşturmak için, depolama hedefi ekle sayfasını Azure portal. (Ek yöntemler geliştirmektedir.)

Bu bilgileri girin.

• Depolama hedef adı -Azure HPC önbelleğinde bu depolama hedefini tanımlayan bir ad ayarlayın.

• Hedef türü - ADLS-NFS' i seçin.

• Depolama hesabı -kullanmak istediğiniz hesabı seçin. NFS etkinleştirilmiş depolama hesabınız listede görünmezse, önkoşullara uygun olduğunu ve önbelleğin buna erişip erişemediğinden emin olun.

  Erişim rolleri eklemebölümünde açıklandığı gibi, depolama hesabına erişmek için önbellek örneğini yetkilendirmeniz gerekecektir.

• Depolama kapsayıcı -bu hedef için NFS etkin blob kapsayıcısını seçin veya yeni oluştur' a tıklayın.

• Kullanım modeli -yukarıda bir kullanım modeli seçin bölümünde açıklanan iş akışınızı temel alan veri önbelleğe alma profillerinden birini seçin.

İşiniz bittiğinde, depolama hedefini eklemek için Tamam ' ı tıklatın.

Depolama hedeflerini görüntüleme

Önbelleğiniz için önceden tanımlanmış depolama hedeflerini göstermek için Azure portal veya Azure CLı kullanabilirsiniz.

az hpc-cache storage-target list --resource-group "scgroup" --cache-name "sc1"

$ az hpc-cache storage-target show --cache-name doc-cache0629 --name nfsd1

{
  "clfs": null,
  "id": "/subscriptions/<subscription_ID>/resourceGroups/scgroup/providers/Microsoft.StorageCache/caches/doc-cache0629/storageTargets/nfsd1",
  "junctions": [
    {
      "namespacePath": "/nfs1/data1",
      "nfsExport": "/datadisk1",
      "targetPath": ""
    }
  ],
  "location": "eastus",
  "name": "nfsd1",
  "nfs3": {
    "target": "10.0.0.4",
    "usageModel": "WRITE_WORKLOAD_15"
  },
  "provisioningState": "Succeeded",
  "resourceGroup": "scgroup",
  "targetType": "nfs3",
  "type": "Microsoft.StorageCache/caches/storageTargets",
  "unknown": null
}
$

Sonraki adımlar

Depolama hedefleri oluşturduktan sonra önbelleğinizi kullanıma hazırlamak için bu görevlerle devam edin:

• Toplanan ad alanını ayarlama
• Azure HPC Önbelleği’ni bağlama
• Verileri Azure Blob depolamaya taşıma

Herhangi bir ayarı güncelleştirmeniz gerekiyorsa, bir depolama hedefini düzenleyebilirsiniz.