Azure Data Factory ile Azure Veri Gezgini’ne veri kopyalama

Önemli

Bu bağlayıcı Microsoft Fabric'teki Gerçek Zamanlı Analiz'de kullanılabilir. Aşağıdaki özel durumlar için bu makaledeki yönergeleri kullanın:

• Gerekirse KQL veritabanı oluşturma başlığındaki yönergeleri kullanarak veritabanları oluşturun.
• Gerekirse, Boş tablo oluşturma başlığındaki yönergeleri kullanarak tablolar oluşturun.
• Kopyalama URI'sindeki yönergeleri kullanarak sorgu veya alma URI'lerini alın.
• Sorguları bir KQL sorgu kümesinde çalıştırın.

Azure Veri Gezgini hızlı, tam olarak yönetilen bir veri analizi hizmetidir. Uygulamalar, web siteleri ve IoT cihazları gibi birçok kaynaktan akışla aktaran büyük hacimli veriler üzerinde gerçek zamanlı analiz sunar. Azure Veri Gezgini ile verileri yinelemeli olarak inceleyebilir ve ürünleri geliştirmek, müşteri deneyimlerini geliştirmek, cihazları izlemek ve işlemleri artırmak için desenleri ve anomalileri tanımlayabilirsiniz. Yeni soruları keşfetmenize ve dakikalar içinde yanıtlar almanıza yardımcı olur.

Azure Data Factory tam olarak yönetilen, bulut tabanlı bir veri tümleştirme hizmetidir. Bunu kullanarak Azure Veri Gezgini veritabanınızı mevcut sisteminizdeki verilerle doldurabilirsiniz. Analiz çözümleri oluştururken zaman kazanmanıza yardımcı olabilir.

Azure Veri Gezgini'a veri yüklediğinizde Data Factory aşağıdaki avantajları sağlar:

• Kolay kurulum: Betik oluşturma gerektirmeden sezgisel, beş adımlı bir sihirbaz edinin.
• Zengin veri deposu desteği: Zengin bir şirket içi ve bulut tabanlı veri deposu kümesi için yerleşik destek alın. Ayrıntılı liste için Desteklenen veri depoları tablosuna bakın.
• Güvenli ve uyumlu: Veriler HTTPS veya Azure ExpressRoute üzerinden aktarılır. Genel hizmet varlığı, verilerinizin coğrafi sınırdan hiçbir zaman ayrılmamasını sağlar.
• Yüksek performans: Azure Veri Gezgini'a saniyede 1 gigabayt (GBps) veri yükleme hızı sağlanır. Daha fazla bilgi için bkz. performans Kopyalama etkinliği.

Bu makalede, Data Factory Veri Kopyalama aracını kullanarak Amazon Simple Storage Service'ten (S3) Azure Veri Gezgini'a veri yükleyebilirsiniz. Aşağıdakiler gibi diğer veri depolarından veri kopyalamak için benzer bir işlemi izleyebilirsiniz:

• Azure Blob Depolama
• Azure SQL Veritabanı
• Azure SQL Veri Ambarı
• Google BigQuery
• Oracle
• Dosya sistemi

Önkoşullar

• Azure aboneliği. Ücretsiz bir Azure hesabı oluşturun.
• Azure Veri Gezgini kümesi ve veritabanı. Küme ve veritabanı oluşturma.
• Veri kaynağı.

Veri fabrikası oluşturma

1. Azure Portal’ında oturum açın.

2. Sol bölmede Kaynak> oluşturAnalytics>Data Factory'yi seçin.

   

3. Yeni veri fabrikası bölmesinde, aşağıdaki tablodaki alanlar için değerler sağlayın:

   

   Ayar	Girecek değer
   Ad	Kutuya veri fabrikanız için genel olarak benzersiz bir ad girin. "LoadADXDemo" Veri fabrikası adı kullanılamıyor hatasını alırsanız, veri fabrikası için farklı bir ad girin. Data Factory yapıtlarını adlandırma hakkında kurallar için bkz. Data Factory adlandırma kuralları.
   Abonelik	Açılan listede, veri fabrikasının oluşturulacağı Azure aboneliğini seçin.
   Kaynak Grubu	Yeni oluştur'u seçin ve ardından yeni kaynak grubunun adını girin. Zaten bir kaynak grubunuz varsa Var olanı kullan'ı seçin.
   Sürüm	Açılan listede V2'yi seçin.
   Konum	Açılan listeden veri fabrikasının konumunu seçin. Listede yalnızca desteklenen konumlar görüntülenir. Veri fabrikası tarafından kullanılan veri depoları başka konumlarda veya bölgelerde bulunabilir.

4. Oluştur’u seçin.

5. Oluşturma işlemini izlemek için araç çubuğunda Bildirimler'i seçin. Veri fabrikasını oluşturduktan sonra seçin.

   Data Factory bölmesi açılır.

   

6. Uygulamayı ayrı bir bölmede açmak için Yazar & İzleyici kutucuğunu seçin.

Azure Veri Gezgini'a veri yükleme

Birçok veri deposundan Azure Veri Gezgini'a veri yükleyebilirsiniz. Bu makalede, Amazon S3'ten veri yükleme ele alınmaktadır.

Verilerinizi aşağıdaki yollardan biriyle yükleyebilirsiniz:

• Azure Data Factory kullanıcı arabiriminin sol bölmesinde Yazar simgesini seçin. Bu, Azure Data Factory kullanıcı arabirimini kullanarak veri fabrikası oluşturma'nın "Veri fabrikası oluşturma" bölümünde gösterilir.
• verileri kopyalamak için Veri Kopyalama aracını kullanma başlığında gösterildiği gibi Azure Data Factory Veri Kopyalama aracında.

Amazon S3'ten veri kopyalama (kaynak)

1. Başlayalım bölmesinde Veri Kopyala'yı seçerek Veri Kopyalama aracını açın.

   

2. Özellikler bölmesindeki Görev adı kutusuna bir ad girin ve İleri'yi seçin.

   

3. Kaynak veri deposu bölmesinde Yeni bağlantı oluştur'u seçin.

   

4. Amazon S3'i ve ardından Devam'ı seçin.

   

5. Yeni Bağlı Hizmet (Amazon S3) bölmesinde aşağıdakileri yapın:

   

   a. Ad kutusuna yeni bağlı hizmetinizin adını girin.

   b. Tümleştirme çalışma zamanı aracılığıyla bağlan açılan listesinde değeri seçin.

   c. Erişim Anahtarı Kimliği kutusuna değeri girin.

   Not

   Amazon S3'te erişim anahtarınızı bulmak için gezinti çubuğunda Amazon kullanıcı adınızı ve ardından Güvenlik Kimlik Bilgilerim'i seçin.

   d. Gizli Erişim Anahtarı kutusuna bir değer girin.

   e. Oluşturduğunuz bağlı hizmet bağlantısını test etmek için Bağlantıyı Sına'yı seçin.

   f. Son'u seçin.

   Kaynak veri deposu bölmesinde yeni AmazonS31 bağlantınız görüntülenir.

6. İleri’yi seçin.

   

7. Giriş dosyasını veya klasörünü seçin bölmesinde aşağıdaki adımları uygulayın:

   a. Kopyalamak istediğiniz dosyaya veya klasöre gidin ve seçin.

   b. İstediğiniz kopyalama davranışını seçin. İkili kopya onay kutusunun temizlendiğinden emin olun.

   c. İleri’yi seçin.

   

8. Dosya biçimi ayarları bölmesinde dosyanız için ilgili ayarları seçin. ve ardından İleri'yi seçin.

   

Verileri Azure Veri Gezgini'a kopyalama (hedef)

Yeni Azure Veri Gezgini bağlı hizmeti, verileri bu bölümde belirtilen Azure Veri Gezgini hedef tablosuna (havuz) kopyalamak için oluşturulur.

Not

Azure Veri Gezgini yönetim komutlarını çalıştırmak için Azure Data Factory komut etkinliğini kullanın ve sorgu .set-or-replacekomutlarından alma gibi herhangi bir komutu kullanın.

Azure Veri Gezgini bağlı hizmetini oluşturma

Azure Veri Gezgini bağlı hizmetini oluşturmak için aşağıdaki adımları uygulayın:

1. Mevcut bir veri deposu bağlantısını kullanmak veya yeni bir veri deposu belirtmek için Hedef veri deposu bölmesinde Yeni bağlantı oluştur'u seçin.

   

2. Yeni Bağlı Hizmet bölmesinde Azure Veri Gezgini'ı ve ardından Devam'ı seçin.

   

3. Yeni Bağlı Hizmet (Azure Veri Gezgini) bölmesinde aşağıdaki adımları uygulayın:

   

   1. Ad kutusuna Azure Veri Gezgini bağlı hizmeti için bir ad girin.

   2. Kimlik doğrulama yöntemi'nin altında Sistem Tarafından Atanan Yönetilen Kimlik veya Hizmet Sorumlusu'nı seçin.

      • Yönetilen Kimlik kullanarak kimlik doğrulaması yapmak için Yönetilen kimlik adını veya Yönetilen kimliknesne kimliğini kullanarak veritabanına Yönetilen Kimlik erişimi verin.

      • Hizmet Sorumlusu kullanarak kimlik doğrulaması yapmak için:

        1. Kiracı kutusuna kiracı adını girin.
        2. Hizmet sorumlusu kimliği kutusuna hizmet sorumlusu kimliğini girin.
        3. Hizmet sorumlusu anahtarı'nı seçin ve ardından Hizmet sorumlusu anahtarı kutusuna anahtarın değerini girin.

      Not

      • Hizmet sorumlusu, azure Veri Gezgini hizmetine erişmek için Azure Data Factory tarafından kullanılır. Hizmet sorumlusu oluşturmak için Microsoft Entra hizmet sorumlusu oluşturma bölümüne gidin.
      • Yönetilen Kimliğe veya Hizmet Sorumlusuna veya öğesine izin atamak için bkz. izinleri yönetme.
      • Azure Key Vault yöntemini veya Kullanıcı Tarafından Atanan Yönetilen Kimlik'i kullanmayın.

   3. Hesap seçim yöntemi'nin altında aşağıdaki seçeneklerden birini belirleyin:

      • Azure aboneliğinden'i seçin ve ardından açılan listelerde Azure aboneliğinizi ve Kümenizi seçin.

        Not

        • Küme açılan denetimi yalnızca aboneliğinizle ilişkili kümeleri listeler.
        • Kümenizin en iyi performans için uygun SKU'ya sahip olması gerekir.

      • El ile gir'i seçin ve uç noktanızı girin.

   4. Veritabanı açılan listesinde veritabanı adınızı seçin. Alternatif olarak, Düzenle onay kutusunu seçin ve veritabanı adını girin.

   5. Oluşturduğunuz bağlı hizmet bağlantısını test etmek için Bağlantıyı Sına'yı seçin. Bağlı hizmetinize bağlanabiliyorsanız bölmede yeşil bir onay işareti ve Bağlantı başarılı iletisi görüntülenir.

   6. Oluşturduğunuz bağlı hizmet bağlantısını test etmek için Bağlantıyı Sına'yı seçin. Bağlı hizmetinize bağlanabiliyorsanız bölmede yeşil bir onay işareti ve Bağlantı başarılı iletisi görüntülenir.

   7. Bağlı hizmet oluşturmayı tamamlamak için Oluştur'u seçin.

Azure Veri Gezgini veri bağlantısını yapılandırma

Bağlı hizmet bağlantısını oluşturduktan sonra Hedef veri deposu bölmesi açılır ve oluşturduğunuz bağlantı kullanılabilir. Bağlantıyı yapılandırmak için aşağıdaki adımları uygulayın:

1. İleri’yi seçin.

   

2. Tablo eşleme bölmesinde hedef tablo adını ayarlayın ve İleri'yi seçin.

   

3. Sütun eşleme bölmesinde aşağıdaki eşlemeler gerçekleşir:

   a. İlk eşleme, Azure Data Factory şema eşlemesine göre Azure Data Factory tarafından gerçekleştirilir. Şunları yapın:

   • Azure Data Factory hedef tablosu için Sütun eşlemelerini ayarlayın. Varsayılan eşleme kaynaktan Azure Data Factory hedef tablosuna görüntülenir.

   • Sütun eşlemenizi tanımlamak için gerekmeyen sütunların seçimini iptal edin.

   b. İkinci eşleme, bu tablosal veriler Azure Veri Gezgini'a alındığında gerçekleşir. Eşleme, CSV eşleme kurallarına göre gerçekleştirilir. Kaynak veriler CSV biçiminde olmasa bile, Azure Data Factory verileri tablo biçiminde dönüştürür. Bu nedenle, CSV eşlemesi bu aşamadaki tek ilgili eşlemedir. Şunları yapın:

   • (İsteğe bağlı) Azure Veri Gezgini (Kusto) havuz özellikleri'nin altında, sütun eşlemesinin kullanılabilmesi için ilgili alım eşleme adını ekleyin.

   • Alma eşleme adı belirtilmezse, Sütun eşlemeleri bölümünde tanımlanan ada göre eşleme sırası kullanılır. Ada göre eşleme başarısız olursa, Azure Veri Gezgini verileri sütuna göre konum sırasına göre almaya çalışır (yani varsayılan olarak konuma göre eşler).

   • İleri’yi seçin.

   

4. Ayarlar bölmesinde aşağıdaki adımları uygulayın:

   a. Hataya dayanıklılık ayarları'nın altında ilgili ayarları girin.

   b. Performans ayarları'nın altında Hazırlamayı etkinleştir geçerli değildir ve Gelişmiş ayarlar maliyetle ilgili dikkat edilmesi gerekenleri içerir. Belirli gereksinimleriniz yoksa, bu ayarları olduğu gibi bırakın.

   c. İleri’yi seçin.

   

5. Özet bölmesinde ayarları gözden geçirin ve İleri'yi seçin.

   

6. Dağıtım tamamlandı bölmesinde aşağıdakileri yapın:

   a. İzleyici sekmesine geçmek ve işlem hattının durumunu (ilerleme durumu, hatalar ve veri akışı) görüntülemek için İzleyici'yi seçin.

   b. Bağlı hizmetleri, veri kümelerini ve işlem hatlarını düzenlemek için İşlem Hattını Düzenle'yi seçin.

   c. Veri kopyalama görevini tamamlamak için Son'u seçin.

   

İlgili içerik

• Azure Data Factory için Azure Veri Gezgini bağlayıcısı hakkında bilgi edinin.
• Data Factory kullanıcı arabiriminde bağlı hizmetleri, veri kümelerini ve işlem hatlarını düzenleyin.
• Azure Veri Gezgini web kullanıcı arabirimindeki verileri sorgulama.