Olay Hub 'ından Azure Veri Gezgini veri alma

Azure Veri Gezgini, günlük ve telemetri verileri için hızlı ve üst düzeyde ölçeklenebilir veri keşfetme hizmetidir. Azure Veri Gezgini, Event Hubs, IoT Hub 'larından ve BLOB kapsayıcılarına yazılan bloblardan alma (veri yükleme) sağlar.

Azure Veri Gezgini, büyük veri akış platformu ve olay ekleme hizmeti olan Event Hubs'dan veri eklemeyi (veri yüklemeyi) destekler. Event Hubs , neredeyse gerçek zamanlı olarak saniyede milyonlarca olayı işleyebilir. Bu makalede, bir olay hub 'ı oluşturur, Azure Veri Gezgini 'a bağlanırsınız ve sistem aracılığıyla veri akışını görürsünüz.

olay hub 'ından Azure Veri Gezgini 'ye giriş hakkında genel bilgi için bkz. Bağlan olay hub'ı.

Önkoşullar

• Azure aboneliği. Ücretsiz bir Azure hesabıoluşturun.
• Bir küme ve veritabanıoluşturun.
• Veri bağlantısı için Kullanıcı tarafından atanan yönetilen kimlik veya sistem tarafından atanmış yönetilen kimlik kullanmanızı öneririz (isteğe bağlı).
• Veri üreten ve onu bir olay hub 'ına Gönderen örnek bir uygulama . Örnek uygulamayı sisteminize indirin.
• örnek uygulamayı çalıştırmak için 2019 Visual Studio .

Azure portalında oturum açın

Azure Portal oturum açın.

Olay Hub'ı oluşturma

Azure portal bir Azure Resource Manager şablonu kullanarak bir olay hub 'ı oluşturun.

1. Bir olay hub 'ı oluşturmak için, dağıtımı başlatmak üzere aşağıdaki düğmeyi kullanın. Sağ tıklayıp Yeni pencerede aç' ı seçerek bu makaledeki adımların geri kalanını izleyebilirsiniz.

   

   Azure 'A dağıt düğmesi sizi Azure Portal götürür.

   

2. Olay Hub 'ını oluşturmak istediğiniz aboneliği seçin ve Test-Hub-RGadlı bir kaynak grubu oluşturun.

   

3. Formu aşağıdaki bilgilerle doldurun.

   Aşağıdaki tabloda yer almayan ayarlar için varsayılan değerleri kullanın.

   Ayar	Önerilen değer	Alan açıklaması
   Abonelik	Aboneliğiniz	Olay Hub 'ınız için kullanmak istediğiniz Azure aboneliğini seçin.
   Kaynak grubu	test-hub-rg	Yeni bir kaynak grubu oluşturma.
   Konum	Batı ABD	Bu makale için Batı ABD seçin. Üretim sisteminde ihtiyaçlarınıza en uygun bölgeyi seçmeniz gerekir. En iyi performansı elde etmek için Azure Veri Gezgini kümesiyle aynı konumda Olay Hub 'ı ad alanı oluşturun (yüksek aktarım hızı olan olay hub 'ı ad alanları için en önemli).
   Ad alanı adı	Benzersiz bir ad alanı adı	Ad alanınızı tanımlayan benzersiz bir ad seçin. Örneğin, mytestnamespace. Girdiğiniz adın sonuna servicebus.windows.net etki alanı adı eklenir. Ad yalnızca küçük harf, sayı ve kısa çizgi içerebilir. Ad bir harf ile başlamalı ve harf veya sayı ile bitmelidir. Değer uzunluğu 6 ile 50 karakter arasında olmalıdır.
   Olay hub'ı adı	test-hub	Olay Hub 'ı, benzersiz bir kapsam kapsayıcısı sağlayan ad alanı altında bulunur. Olay Hub 'ı adı ad alanı içinde benzersiz olmalıdır.
   Tüketici grubu adı	test-group	Tüketici grupları birden fazla tüketici uygulamasının ayrı olay akışı görünümüne sahip olmasını sağlar.

4. Gözden geçir ve oluştur’u seçin.

5. Oluşturulan kaynakların özetini gözden geçirin. Aboneliğinizde kaynak oluşturmakta olduğunuzu bildiren Oluştur' u seçin.

   

6. Araç çubuğunda Bildirimler’i seçip sağlama işlemini izleyin. Dağıtımın başarıyla tamamlanması birkaç dakika sürebilir ancak beklemeden bir sonraki adıma geçebilirsiniz.

   

Azure Veri Gezgini'nde hedef tablo oluşturma

Şimdi Azure Veri Gezgini'nde Event Hubs tarafından gönderilen verilerin ekleneceği tabloyu oluşturacaksınız. Tabloyu Önkoşullar bölümünde sağlanan kümede ve veritabanında oluşturacaksınız.

1. Azure portal, kümenize gidin ve sorgu' yı seçin.

   

2. Aşağıdaki komutu pencereye kopyalayın ve alınan verileri alacak tabloyu (TestTable) oluşturmak için Çalıştır ' ı seçin.

   .create table TestTable (TimeStamp: datetime, Name: string, Metric: int, Source:string)
   

   

3. Aşağıdaki komutu pencereye kopyalayın ve gelen JSON verilerini tablonun sütun adlarıyla ve veri türleriyle (TestTable) eşlemek için Çalıştır ' ı seçin.

   .create table TestTable ingestion json mapping 'TestMapping' '[{"column":"TimeStamp", "Properties": {"Path": "$.timeStamp"}},{"column":"Name", "Properties": {"Path":"$.name"}} ,{"column":"Metric", "Properties": {"Path":"$.metric"}}, {"column":"Source", "Properties": {"Path":"$.source"}}]'
   

olay Hub 'ına Bağlan

Artık Azure Veri Gezgini Olay Hub 'ına bağlanıyorsunuz. Bu bağlantı olduğunda, Olay Hub 'ına akan veriler, bu makalede daha önce oluşturduğunuz test tablosuna akar.

1. Olay Hub 'ının dağıtımının başarılı olduğunu doğrulamak için araç çubuğunda Bildirimler ' i seçin.

2. Oluşturduğunuz kümenin altında Veritabanları'nı ve ardından TestDatabase girişini seçin.

   

3. Veri alımı ' nı seçin ve veri bağlantısı ekleyin.

   

Veri bağlantısı oluşturma

Formu aşağıdaki bilgilerle doldurun ve Oluştur' u seçin.

Hedef tablo

Alan verileri yönlendirmeye iki seçenek vardır: statik vedinamik. Bu makalede tablo adını, veri biçimini ve eşlemeyi varsayılan değerler olarak belirttiğiniz statik yönlendirmeyi kullanırsınız. Olay Hub'ı iletisi veri yönlendirme bilgilerini içerirse, bu yönlendirme bilgileri varsayılan ayarları geçersiz kılar.

1. Aşağıdaki yönlendirme ayarlarını doldurun:

   

   Ayar	Önerilen değer	Alan açıklaması
   Tablo adı	TestTable	TestDatabase içinde oluşturduğunuz tablo.
   Veri biçimi	JSON	Avro, CSV, JSON, MULTILINE JSON, ORC, PARQUET, PSV, SCSV, SOHSV, TSV, TXT, TSVE, APACHEAVRO ve W3CLOG desteklenen biçimlerdir.
   Eşleme	TestMapping	TestDatabase'de oluşturduğunuz ve gelenverileri TestTablesütun adları ve veri türleriyle eşler. JSON, MULTILINE JSON ve AVRO için gereklidir ve diğer biçimler için isteğe bağlıdır.

   Not

   • Tüm Varsayılan yönlendirme ayarlarını belirtmenize gerek yok. Kısmi ayarlar da kabul edilir.
   • Yalnızca veri bağlantısını oluşturduk sonra enqueued olaylar alındı.

2. Oluştur’u seçin.

Olay sistemi özellikleri eşlemesi

Tablonun Veri Kaynağı bölümünde Olay sistemi özelliklerini seçtiysanız, sistem özelliklerini tablo şemasına ve eşlemesine dahil edin.

Bağlantı dizesini kopyalayın

Önkoşullar'da listelenen örnek uygulamayı çalıştırarak Olay Hub'ı ad alanı için bağlantı dizesine ihtiyacınız vardır.

1. Oluşturduğunuz Olay Hub'ı ad alanı altında Paylaşılan erişim ilkeleri'nin ardındanRootManageSharedAccessKey öğesini seçin.

   

2. Bağlantı dizesini kopyala - birincil anahtar. Bir sonraki bölümde bunu yapıştıracaksınız.

   

Örnek veri oluşturma

Veri oluşturmak için indirdiğiniz örnek uygulamayı kullanın.

1. Örnek uygulama çözümünü Visual Studio'da açın.

2. program.cs dosyasında sabitini Olay Hub'nizin adıyla güncelleştirin ve sabiti Olay Hub'ı ad alanının kopyalanmış bağlantı connectionString dizesiyle güncelleştirin.

   const string eventHubName = "test-hub";
   // Copy the connection string ("Connection string-primary key") from your Event Hub namespace.
   const string connectionString = @"<YourConnectionString>";
   

3. Uygulamayı derleyin ve çalıştırın. Uygulama, Olay Hub'ını ileti gönderir ve 10 saniyede bir durumunu yazdırır.

4. Uygulama birkaç ileti gönderdikten sonra bir sonraki adıma geçin: Olay Hub'ınıza veri akışını gözden geçirme ve tabloyu test etme.

Veri akışını inceleme

Uygulamanın veri oluşturması ile bu verilerin Event Hub'larından kümenizin tablosuna akışını artık göresiniz.

1. Bu Azure portal Olay Hub'nizin altında, uygulama çalışırken etkinlikte ani artış olduğunu görüyorsunuz.

   

2. Veritabanına ulaşan ileti sayısını denetlemek için test veritabanınızda aşağıdaki sorguyu çalıştırın.

   TestTable
   | count
   

3. İletilerin içeriğini görmek için aşağıdaki sorguyu çalıştırın:

   TestTable
   

   Sonuç kümesi aşağıdaki görüntüye benzin:

   

   Not

   • Azure Veri Gezgini veri alımı için bir toplama (toplu işlem) ilkesi vardır ve bu ilke, veri alımı işlemini iyileştirmek için tasarlanmıştır. Varsayılan toplu işlem ilkesi, toplu iş için aşağıdaki koşullardan biri doğruysa bir toplu işi mühürlemektedir: en uzun gecikme süresi 5 dakika, toplam 1G boyutu veya 1000 blob. Bu nedenle bir gecikme süresiyle karşınız olabilir. Daha fazla bilgi için bkz. toplu işlem ilkesi.
   • Olay Hub'ı alımı 10 saniye veya 1 MB'lık Olay Hub'ı yanıt süresi içerir.
   • Yanıt süresi gecikmesini azaltmak için tabloyu akışı destekleyecek şekilde yapılandırabilirsiniz. Bkz. akış ilkesi.

Kaynakları temizleme

Olay Hub'ını yeniden kullanmayı planlasanız maliyetlerden kaçınmak için test-hub-rg'nizitemizleyin.

1. Azure portalında, en solda bulunan Kaynak grupları’nı ve ardından oluşturduğunuz kaynak grubunu seçin.

   Sol menü daraltılmışsa Genişlet düğmesini

   

2. test-resource-group altında Kaynak grubunu sil'i seçin.

3. Yeni pencerede silinecek kaynak grubunun adını yazın (test-hub-rg) ve Sil'i seçin.

Sonraki adımlar

• Veri sorgulama Azure Veri Gezgini