Redigera

Flytta arkivdata från stordatorsystem till Azure

Azure Data Factory
Azure Storage
Azure Files
Azure Blob Storage
Azure Data Box

Den här referensarkitekturen visar hur du flyttar data från stordator- och mellanregistersystem till Azure. I den här arkitekturen hanteras arkiverade data och används endast i stordatorsystemet. Azure används endast som lagringsmedium.

Arkitektur

Diagram som visar en arkitektur för arkivering av stordatordata till Azure.

Ladda ned en Visio-fil med den här arkitekturen.

Om du vill bestämma vilken metod som ska användas för att flytta data mellan stordatorsystemet och Azure Storage bör du överväga frekvensen för datahämtning och mängden data. Microsoft- och tredjepartslösningar är tillgängliga:

  • Microsoft-lösningar.
    • DEN Azure Data Factory FTP-anslutningsappen.
    • Data Factory-kopieringsaktiviteten, som kan kopiera data till valfri Azure-lagringslösning.
    • Stordator-JCL till Azure Blob med Java, en anpassad lösning för att flytta data från stordatorsystemet till Azure via Job Control Language (JCL). För ytterligare information kontaktar du datasqlninja@microsoft.com.
  • Arkivlösningar från tredje part. Lösningar som du enkelt kan integrera med stordatorsystem, mellanregistersystem och Azure-tjänster.

Arbetsflöde

  1. Azure Data Factory FTP-anslutningsappen flyttar data från stordatorsystemet till Azure Blob Storage. Den här lösningen kräver en mellanliggande virtuell dator (VM) där en lokalt installerad integrationskörning installeras.

  2. Kopieringsaktiviteten för Data Factory ansluter till Db2-databasen för att kopiera data till Azure Storage. Den här lösningen kräver också en mellanliggande virtuell dator där en lokalt installerad integrationskörning är installerad.

  3. Microsoft Mainframe JCL till Azure Blob med hjälp av en anpassad Java-lösning flyttar data mellan stordatorsystemet och Blob Storage, och vice versa. Den här lösningen baseras på Java och körs på Unix System Services på stordator. Du kan hämta den här lösningen genom att datasqlninja@microsoft.comkontakta .

    a. Du måste slutföra en engångskonfiguration av lösningen. Den här konfigurationen innebär att hämta åtkomstnycklarna för Blob Storage och flytta nödvändiga artefakter till stordatorsystemet.

    b. En JCL-överföring flyttar filer till och från stordator och Blob Storage.

    c. Filer lagras i binärt format i Azure. Du kan konfigurera den anpassade lösningen för att konvertera EBCDIC till ASCII för enkla datatyper.

  4. Alternativt kan Azure Data Box hjälpa dig att fysiskt överföra stordatordata till Azure. Det här alternativet är lämpligt när en stor mängd data behöver migreras och överföringsmetoder online tar för lång tid. (Om migreringen till exempel tar veckor.)

  5. Enkel interaktion med stordator- eller mellanregistermiljön tillhandahålls av arkivlösningar från tredje part.

    Dessa lösningar interagerar med stordator och hanterar olika stordatorparametrar, till exempel datatyper, posttyper, lagringstyper och åtkomstmetoder. De fungerar som en brygga mellan Azure och stordatorn. Vissa lösningar från tredje part ansluter en lagringsenhet till stordatorn och hjälper till att överföra data till Azure.

  6. Data synkroniseras och arkiveras regelbundet via arkivlösningen från tredje part. När data är tillgängliga via lösningen från tredje part kan lösningen enkelt skicka dem till Azure med hjälp av tillgängliga anslutningsappar.

  7. Data lagras i Azure.

  8. Vid behov återkallas data från Azure tillbaka till stordator- eller mellanregistersystemen.

Komponenter

  • Azure Storage tillhandahåller massivt skalbar och mycket säker molnlagring för dina data, appar och arbetsbelastningar. Azure Files tillhandahåller enkla och säkra serverlösa molnfilresurser. Dessa komponenter används för synkronisering och datakvarhållning.
  • Azure Data Factory är en hybriddataintegreringstjänst som du kan använda för att skapa, schemalägga och samordna dina ETL- och ELT-arbetsflöden.
  • Azure Data Box är en fysisk enhet som du kan använda för att flytta lokala data till Azure.

Alternativ

Du kan använda den klassiska metoden för att flytta data från stordator- eller mellanregistersystemet via FTP. Data Factory tillhandahåller en FTP-anslutning som du kan använda för att arkivera data i Azure.

Scenarioinformation

Stordator- och mellanregistersystem genererar, bearbetar och lagrar enorma mängder data. När dessa data blir gamla är det vanligtvis inte användbart. Efterlevnads- och regelregler kräver dock ibland att dessa data lagras under ett visst antal år, så arkivering är viktigt. Genom att arkivera dessa data kan du minska kostnaderna och optimera resurser. Arkivering av data hjälper också till med dataanalys och ger en historik över dina data.

Potentiella användningsfall

Arkivering av data till molnet kan hjälpa dig:

  • Frigör lagringsresurser i stordator- och mellanregistersystem.
  • Optimera prestanda för frågor genom att endast lagra relevanta data i det aktiva systemet.
  • Minska driftskostnaderna genom att lagra data på ett mer ekonomiskt sätt.
  • Använd arkiverade data för analys för att skapa nya affärsmöjligheter och fatta bättre affärsbeslut.

Rekommendationer

Beroende på hur du använder data kanske du vill konvertera dem till ASCII från binär fil och sedan ladda upp dem till Azure. Det gör det enklare att analysera i Azure.

Överväganden

  • Komplexa datatyper på stordatorn måste hanteras under arkivet.
  • Experter på programämnen kan identifiera vilka data som behöver arkiveras.
  • För att fastställa hur lång tid det tar mellan synkroniseringar bör du överväga faktorer som affärskritiskhet, efterlevnadsbehov och dataåtkomstfrekvens.

Arkivlösningar från tredje part

Vissa lösningar från tredje part finns på Azure Marketplace. Var och en av dessa lösningar kräver unik konfiguration. Att konfigurera dessa lösningar är en av de primära uppgifterna för att implementera den här arkitekturen.

Azure-lagring

Azure har en mängd olika alternativ för olika program- och tekniska krav, till exempel frekvent eller sällan förekommande åtkomst, och strukturerade och ostrukturerade data. Du kan konfigurera olika konfigurationer för lagringslivscykel i Azure Storage. Du kan definiera reglerna för att hantera livscykeln. En översikt finns i Konfigurera en livscykelhanteringsprincip.

Återkalla data

Återkallande av arkiverade data är en viktig aspekt av arkivlösningar. Få av lösningarna från tredje part ger en sömlös upplevelse för att återkalla arkiverade data. Det är så enkelt som att köra ett kommando lokalt. Tredjepartsagenten hämtar automatiskt data från Azure och matar in dem i stordatorsystemet igen.

Kostnadsoptimering

Använd priskalkylatorn för Azure för att beräkna kostnaden för att implementera den här lösningen.

Deltagare

Den här artikeln underhålls av Microsoft. Den skrevs ursprungligen av följande deltagare.

Huvudförfattare:

Andra deltagare:

Nästa steg

Mer information finns i Azure Datateknik – Stordator/Mellanregistermodernisering.

Se följande resurser: