Veri Azure Data Factory veya veri ambarından Azure'a veri geçirmek için veri depolamayı kullanma

  • Makale
  • Okumak için 2 dakika

AŞAĞıDAKILER IÇIN GEÇERLIDIR: Azure Data Factory Azure Synapse Analytics

Veri gölü veya kurumsal veri ambarınızı (EDW) Microsoft Azure geçirmek Azure Data Factory. Azure Data Factory aşağıdaki senaryolara çok uygun:

  • Amazon Simple Depolama Service'ten (Amazon S3) veya şirket içi Hadoop Dağıtılmış Dosya Sistemi(HDFS) Azure'a büyük veri iş yükü geçişi
  • Oracle Exadata, Netezza, Teradata veya Azure'a Amazon Redshift EDW geçişi

Azure Data Factory veri ambarı geçişi için petabaytlarca (PB) veri ve veri ambarı geçişi için onlarca terabayt (TB) veri hareket ettirebilirsiniz.

Veri Azure Data Factory için neden kullanılabilir?

  • Azure Data Factory, yüksek performans, dayanıklılık ve ölçeklenebilirlik ile verileri sunucusuz bir şekilde taşımak için işlem gücü miktarını kolayca ölçeklendirebilir. Ayrıca yalnızca kendi kullanımın için ödeme de ödersiniz. Ayrıca şunları da unutmayın:
    • Azure Data Factory birimi veya dosya sayısıyla ilgili bir sınırlaması yoktur.
    • Azure Data Factory ortamınıza en yüksek veri taşıma aktarım hızı hacmini elde etmek için ağ ve depolama bant genişliğinizi tam olarak kullanabilirsiniz.
    • Azure Data Factory, yalnızca Azure'a veri geçişini çalıştırmak için gerçekten kullanılan süre için ödeme yapmak için kullanıla öde yöntemini kullanır.
  • Azure Data Factory bir kez geçmiş yük ve zamanlanmış artımlı yükler gerçekleştirin.
  • Azure Data Factory genel olarak erişilebilen veri gölü ile ambar uç noktaları arasında veri taşımak için Azure tümleştirme çalışma zamanı (IR) kullanır. Ayrıca, Azure Sanal Ağ (VNet) içinde veya bir güvenlik duvarının arkasında veri gölü ve ambar uç noktalarına yönelik verileri hareket ettiren, kendinden konak IR de kullanabilir.
  • Azure Data Factory güvenliği vardır: Güvenli hizmetten hizmete tümleştirme için Windows Yükleyicisi (MSI) veya Hizmet Kimliği kullanabilir veya kimlik bilgileri yönetimi için Azure Key Vault kullanabilirsiniz.
  • Azure Data Factory kod yazma deneyimi ve zengin, yerleşik bir izleme panosu sağlar. 

Çevrimiçi ve çevrimdışı veri geçişi karşılaştırması

Azure Data Factory ağ (internet, ER veya VPN) üzerinden veri aktarmaya yönelik standart bir çevrimiçi veri geçiş aracıdır. Kullanıcılar, çevrimdışı veri geçişi sırasında kuruluşlarından Azure Veri Merkezi'ne fiziksel olarak veri aktarımı cihazları göndermektedir.

Çevrimiçi ve çevrimdışı geçiş yaklaşımı arasında seçim sırasında dikkat edilmesi gereken üç önemli nokta vardır:

  • Geçirilir verilerin boyutu
  • Ağ bant genişliği
  • Geçiş penceresi

Örneğin, veri geçişini iki hafta Azure Data Factory (geçiş pencereniz) için bir veri kaynağı kullanmayı planlayasınız. Aşağıdaki tabloda pembe/mavi kesme çizgisine dikkat edin. Belirli bir sütun için en düşük pembe hücre, geçiş penceresi iki haftadan kısa olan ancak geçiş penceresine en yakın olan veri boyutu/ağ bant genişliği eşleştirmeyi gösterir. (Mavi bir hücrede herhangi bir boyut/bant genişliği eşleştirmesi iki haftadan uzun bir çevrimiçi geçiş penceresine sahiptir.)

çevrimiçi ve çevrimdışı Bu tablo, verilerinizin boyutuna ve kullanılabilir ağ bant genişliğinize bağlı olarak çevrimiçi geçiş (Azure Data Factory) aracılığıyla hedeflenen geçiş penceresine uygun olup olmadığınızı belirlemenize yardımcı olur. Çevrimiçi geçiş penceresi iki haftadan uzunsa çevrimdışı geçişi kullanmak istemeniz gerekir.

Not

Çevrimiçi geçişi kullanarak hem geçmiş veri yükleme hem de artımlı akışlar için tek bir araçla 4'e ulaşabilirsiniz. Bu yaklaşım sayesinde, geçiş penceresinin tamamı boyunca verileriniz mevcut depo ile yeni depo arasında eşitlenmiş durumda tutulabilirsiniz. Bu, etl mantığınızı yeni depoda yenilenmiş verilerle yeniden oluşturabilirsiniz.

Sonraki adımlar