Lägga till lagringsmål

Storage mål är backend-lagring för filer som nås via en Azure HPC Cache. Du kan lägga till NFS-lagring (till exempel ett lokalt maskinvarusystem) eller lagra data i Azure Blob.

Du kan definiera 10 olika lagringsmål för alla cacheminnen, och större cacheminnen har stöd för upp till 20 lagringsmål.

Cachen visar alla lagringsmål i ett aggregerat namnområde. Sökvägarna för namnområdet konfigureras separat när du har lagt till lagringsmålen.

Kom ihåg att lagringsexporterna måste vara tillgängliga från cachens virtuella nätverk. För lokal maskinvarulagring kan du behöva konfigurera en DNS-server som kan matcha värdnamn för NFS-lagringsåtkomst. Läs mer i DNS-åtkomst.

Lägg till lagringsmål när du har skapat din cache. Följ den här processen:

1. Skapa cachen
2. Definiera ett lagringsmål (information i den här artikeln)
3. Skapa klientriktade sökvägar (för det aggregerade namnområdet)

Proceduren för att lägga till ett lagringsmål skiljer sig något beroende på vilken typ av lagring som används. Information om var och en finns nedan.

Klicka på bilden nedan om du vill se en videodemonstration av hur du skapar en cache och lägger till ett lagringsmål från Azure Portal.

Ändra storleken på cacheminnet korrekt för att stödja dina lagringsmål

Antalet lagringsmål som stöds beror på cachestorleken, som anges när du skapar cachen. Cachekapaciteten är en kombination av dataflödeskapacitet (i GB/s) och lagringskapacitet (i TB).

• Upp till 10 lagringsmål – Ett standardcacheminne med det minsta eller medelstora cachelagringsvärdet för det valda dataflödet kan ha högst 10 lagringsmål.

  Om du till exempel väljer dataflöde på 2 GB/sekund och inte väljer den högsta cachelagringsstorleken stöder cacheminnet högst 10 lagringsmål.

• Upp till 20 lagringsmål –

  • Alla cacheminnen med högt dataflöde (som har förkonfigurerade cachelagringsstorlekar) har stöd för upp till 20 lagringsmål.
  • Standardcacheminnen har stöd för upp till 20 lagringsmål om du väljer den högsta tillgängliga cachestorleken för det valda dataflödesvärdet. (Om du använder Azure CLI väljer du den högsta giltiga cachestorleken för din cache-SKU.)

Läs Ange cachekapacitet om du vill veta mer om inställningarna för dataflöde och cachestorlek.

Välja rätt typ av lagringsmål

Du kan välja mellan tre lagringsmåltyper: NFS, Blob och ADLS-NFS. Välj den typ som matchar den typ av lagringssystem som du ska använda för att lagra dina filer under det HPC Cache projektet.

• NFS – Skapa ett NFS-lagringsmål för åtkomst till data i ett NAS-system (Network-Attached Storage). Detta kan vara ett lokalt lagringssystem eller en annan lagringstyp som är tillgänglig med NFS.

  • Krav: Krav för NFS-lagring
  • Anvisningar: Lägga till ett nytt NFS-lagringsmål

• Blob – Använd ett bloblagringsmål för att lagra dina arbetsfiler i en ny Azure Blob-container. Den här containern kan bara läsas eller skrivas till från Azure HPC Cache.

  • Krav: Blob Storage-krav
  • Anvisningar: Lägga till ett nytt Azure Blob Storage-mål

• ADLS-NFS – ADLS-NFS-lagringsmålet kommer åt data från en NFS-aktiverad blobcontainer. Du kan läsa in containern i förväg med hjälp av NFS-standardkommandon, och filerna kan läsas senare med NFS.

  • Krav: Lagringskrav för ADLS-NFS
  • Anvisningar: Lägg till ett nytt ADLS-NFS-lagringsmål

Lägga till ett nytt Azure Blob Storage-mål

Ett nytt Blob Storage-mål behöver en tom blobcontainer eller en container som fylls med data Azure HPC Cache i molnfilsystemformatet. Läs mer om att läsa in en blobcontainer i Flytta data till Azure Blob Storage i förväg.

Sidan Azure Portal Lägg till lagringsmål innehåller alternativet att skapa en ny blobcontainer precis innan du lägger till den.

az hpc-cache blob-storage-target add --resource-group "hpc-cache-group" \
    --cache-name "cache1" --name "blob-target1" \
    --storage-account "/subscriptions/<subscriptionID>/resourceGroups/myrgname/providers/Microsoft.Storage/storageAccounts/myaccountname" \
    --container-name "container1" --virtual-namespace-path "/blob1"

Lägga till ett nytt NFS-lagringsmål

Ett NFS-lagringsmål har andra inställningar än ett Blob Storage-mål, inklusive en användningsmodellinställning som talar om för cachen hur data ska lagras från det här lagringssystemet.

Välj en användningsmodell

När du skapar ett lagringsmål som använder NFS för att nå sitt lagringssystem måste du välja en användningsmodell för det målet. Den här modellen avgör hur dina data cachelagras.

Läs Förstå användningsmodeller för mer information om alla dessa inställningar.

HPC Cache inbyggda användningsmodeller kan du välja hur du ska balansera snabba svar med risken för att få inaktuella data. Om du vill optimera hastigheten för läsning av filer kanske du inte bryr dig om huruvida filerna i cacheminnet kontrolleras mot backend-filerna. Om du å andra sidan vill se till att dina filer alltid är uppdaterade med fjärrlagringen väljer du en modell som kontrollerar ofta.

Dessa tre alternativ omfattar de flesta situationer:

• Lästunga, sfrekventa skrivningar – Påskyndar läsåtkomsten till filer som är statiska eller sällan har ändrats.

  Det här alternativet cachelagrar filer från klientläsningar, men skickar klient skriver vidare till backend-lagringen omedelbart. Filer som lagras i cachen jämförs inte automatiskt med filerna på NFS-lagringsvolymen.

  Använd inte det här alternativet om det finns en risk att en fil ändras direkt i lagringssystemet utan att först skriva den till cachen. Om det händer är den cachelagrade versionen av filen inte synkroniserad med backend-filen.

• Mer än 15 % skrivningar – det här alternativet påskyndar både läs- och skrivprestanda.

  Både klientläsningar och klient skrivningar cachelagras. Filer i cacheminnet antas vara nyare än filer i backend-lagringssystemet. Cachelagrade filer kontrolleras endast automatiskt mot filerna på backend-lagring var åttonde timme. Ändrade filer i cacheminnet skrivs till backend-lagringssystemet efter att de har funnits i cacheminnet i 20 minuter utan ytterligare ändringar.

  Använd inte det här alternativet om några klienter monterar backend-lagringsvolymen direkt, eftersom det finns en risk att den har inaktuella filer.

• Klienter skriver till NFS-målet och kringgår cachen – Välj det här alternativet om några klienter i arbetsflödet skriver data direkt till lagringssystemet utan att först skriva till cachen, eller om du vill optimera datakonsekvensen.

  Filer som klienter begär cachelagras, men eventuella ändringar av dessa filer från klienten skickas till lagringssystemet på backend-datorn omedelbart. Filer i cachen kontrolleras ofta mot backend-versionerna för uppdateringar. Den här verifieringen upprätthåller datakonsekvensen när filer ändras direkt i lagringssystemet i stället för via cachen.

Mer information om de andra alternativen finns i Förstå användningsmodeller.

I den här tabellen sammanfattas skillnaderna mellan alla användningsmodeller:

Skapa ett NFS-lagringsmål

az hpc-cache nfs-storage-target add --resource-group "hpc-cache-group" --cache-name "doc-cache0629" \
    --name nfsd1 --nfs3-target 10.0.0.4 --nfs3-usage-model WRITE_WORKLOAD_15 \
    --junction namespace-path="/nfs1/data1" nfs-export="/datadisk1" target-path=""

{- Finished ..
  "clfs": null,
  "id": "/subscriptions/<subscriptionID>/resourceGroups/hpc-cache-group/providers/Microsoft.StorageCache/caches/doc-cache0629/storageTargets/nfsd1",
  "junctions": [
    {
      "namespacePath": "/nfs1/data1",
      "nfsExport": "/datadisk1",
      "targetPath": ""
    }
  ],
  "location": "eastus",
  "name": "nfsd1",
  "nfs3": {
    "target": "10.0.0.4",
    "usageModel": "WRITE_WORKLOAD_15"
  },
  "provisioningState": "Succeeded",
  "resourceGroup": "hpc-cache-group",
  "targetType": "nfs3",
  "type": "Microsoft.StorageCache/caches/storageTargets",
  "unknown": null
}

Lägga till ett nytt lagringsmål för ADLS-NFS

ADLS-NFS-lagringsmål använder Azure Blob-containrar som stöder protokollet Network File System (NFS) 3.0.

Läs NFS 3.0-protokollstöd om du vill veta mer om den här funktionen.

ADLS-NFS-lagringsmål har vissa likheter med Blob Storage-mål och vissa med NFS-lagringsmål. Exempel:

• Precis som ett Blob Storage-mål måste du ge Azure HPC Cache behörighet att komma åt ditt lagringskonto.

• Precis som ett NFS-lagringsmål måste du ange en cacheanvändningsmodell.

• Eftersom NFS-aktiverade blobcontainrar har en NFS-kompatibel hierarkisk struktur behöver du inte använda cachen för att mata in data och containrarna kan läsas av andra NFS-system.

  Du kan läsa in data i förväg i en ADLS-NFS-container och sedan lägga till dem i en HPC Cache som ett lagringsmål och sedan komma åt data senare utanför en HPC Cache. När du använder en standardblobcontainer som ett HPC Cache-lagringsmål skrivs data i ett egenutvecklat format och kan bara nås från andra Azure HPC Cache kompatibla produkter.

Innan du kan skapa ett ADLS-NFS-lagringsmål måste du skapa ett NFS-aktiverat lagringskonto. Följ stegen i Krav för att Azure HPC Cache anvisningarna i Montera Blob Storage med hjälp av NFS. Om du inte använder samma virtuella nätverk för cachen och lagringskontot kontrollerar du att cachens virtuella nätverk har åtkomst till lagringskontots virtuella nätverk.

När ditt lagringskonto har ställts in kan du skapa en ny container när du skapar lagringsmålet.

Läs Använda NFS-monterad bloblagring med Azure HPC Cache mer information om den här konfigurationen.

Om du vill skapa ett ADLS-NFS-lagringsmål öppnar du sidan Lägg till lagringsmål i Azure Portal. (Ytterligare metoder är under utveckling.)

Ange den här informationen.

• Storage målnamn – Ange ett namn som identifierar det här lagringsmålet i Azure HPC Cache.

• Måltyp – Välj ADLS-NFS.

• Storage konto – Välj det konto som du vill använda. Om ditt NFS-aktiverade lagringskonto inte visas i listan kontrollerar du att det uppfyller kraven och att cachen kan komma åt det.

  Du måste auktorisera cacheinstansen för att få åtkomst till lagringskontot enligt beskrivningen i Lägg till åtkomstrollerna.

• Storage container – Välj den NFS-aktiverade blobcontainern för det här målet eller klicka på Skapa ny.

• Användningsmodell – Välj en av profilerna för cachelagring av data baserat på ditt arbetsflöde, som beskrivs i Välj en användningsmodell ovan.

När du är klar klickar du på OK för att lägga till lagringsmålet.

Visa lagringsmål

Du kan använda Azure Portal Azure CLI för att visa de lagringsmål som redan har definierats för din cache.

az hpc-cache storage-target list --resource-group "scgroup" --cache-name "sc1"

$ az hpc-cache storage-target show --cache-name doc-cache0629 --name nfsd1

{
  "clfs": null,
  "id": "/subscriptions/<subscription_ID>/resourceGroups/scgroup/providers/Microsoft.StorageCache/caches/doc-cache0629/storageTargets/nfsd1",
  "junctions": [
    {
      "namespacePath": "/nfs1/data1",
      "nfsExport": "/datadisk1",
      "targetPath": ""
    }
  ],
  "location": "eastus",
  "name": "nfsd1",
  "nfs3": {
    "target": "10.0.0.4",
    "usageModel": "WRITE_WORKLOAD_15"
  },
  "provisioningState": "Succeeded",
  "resourceGroup": "scgroup",
  "targetType": "nfs3",
  "type": "Microsoft.StorageCache/caches/storageTargets",
  "unknown": null
}
$

Nästa steg

När du har skapat lagringsmål fortsätter du med dessa uppgifter för att förbereda din cache för användning:

• Konfigurera det aggregerade namnområdet
• Montera Azure HPC Cache
• Flytta data till Azure Blob Storage

Om du behöver uppdatera några inställningar kan du redigera ett lagringsmål.