Büyük veri mimarisinde gerçek zamanlı analiz

Analysis Services
Event Hubs
Synapse Analytics

Çözüm Fikri

Olası kullanım örnekleri, alternatif hizmetler, uygulama konuları veya fiyatlandırma kılavuzu gibi daha fazla bilgiyle bu makaleyi genişletmemizi görmek için Geri Bildirim ile GitHub!

Canlı akış verilerinden içgörüleri kolaylıkla alın. Herhangi bir IoT cihazından veya web sitesi tıklama akışlarından günlükleri sürekli olarak yakalayıp neredeyse gerçek zamanlı olarak işleyebilirsiniz.

Mimari

Azure Data Lake Depolama 2. Nesil, Event Hub, Azure Analysis Services, Azure Cosmos DB ve Power BI ile Azure Synapse Analytics kullanarak büyük veri mimarisinde gerçek zamanlı analiz Power BI.

Bu mimarinin SVG'lerini indirin.

Veri akışı

  1. Uygulama için canlı akış verilerini kolayca Azure Event Hubs.
  2. Synapse Pipelines kullanarak tüm yapılandırılmış verilerinizi Azure Blob Depolama.
  3. Akış verilerini Apache Spark, dönüştürmek ve analiz etmek ve işletimsel veritabanlarından veya veri ambarlarından yapılandırılmış verilerle birleştirmek için bu havuzlardan faydalanın.
  4. Havuzlarda not defteri deneyimleri ile Python, Scala veya .NET kullanarak bu verilerden daha derin içgörüler türetmek için ölçeklenebilir makine öğrenmesi/derin öğrenme Apache Spark kullanın.
  5. Büyük Apache Spark erişmek ve taşımak için Pipelines ve synapse Azure Synapse Analytics havuz ve Synapse havuzu uygulama.
  6. Analiz panoları ve tümleşik raporları SQL içgörüleri kuruluş içinde paylaşmak ve Azure Analysis Services binlerce kullanıcıya hizmet vermek için bu verileri kullanmak için ayrılmış bir havuza ekleyin.
  7. Gerçek zamanlı uygulamalar Apache Spark erişilebilir hale Cosmos veritabanına kadar farklı havuzlardan içgörüleri alın.

Bileşenler

  • Azure Synapse Analytics, yüksek ölçüde paralel işleme mimarisiyle esnek ve bağımsız bir şekilde ölçeklendirmenizi, hesaplamayı ve depolamayı sağlayan hızlı, esnek ve güvenilir bulut veri ambarıdır.
  • Synapse Pipelines Belgeleri, ETL/ELT iş akışlarınızı oluşturmanıza, zamanlamanıza ve düzenlemenize olanak sağlar.
  • Azure Data Lake Depolama:Azure Blob Depolama'da yerleşik yüksek düzeyde ölçeklenebilir, güvenli veri gölü Depolama
  • Azure Synapse Analytics Spark havuzları hızlı, kolay ve işbirliğine dayalı Apache Spark tabanlı bir analiz platformudur.
  • Azure Azure Event Hubs Belgeleri büyük bir veri akışı platformu ve olay alımı hizmetidir.
  • Azure Cosmos DB, genel olarak dağıtılmış, çok modelli bir veritabanı hizmetidir. Ardından verilerinizi herhangi bir sayıda Azure bölgesinde çoğaltmayı ve aktarım hızınızı depolama alanınıza göre ölçeklendirmeyi öğrenin.
  • Azure Cosmos DB için Azure Synapse Bağlantısı, Azure Synapse çalışma alanınız tarafından kullanılabilen iki analiz altyapısını kullanarak işlem iş yükünüz üzerinde herhangi bir performans veya maliyet etkisi olmadan Azure Cosmos DB'de işletimsel veriler üzerinde neredeyse gerçek zamanlı analiz çalıştırmanıza olanak sağlar: SQL Sunucusuz ve Spark Havuzları.
  • Azure Analysis Services, bi çözümlerinizi güvenle idare etmek, dağıtmak, test etmek ve sunmak için kurumsal sınıf bir hizmet olarak analizdir.
  • Power BI, kuruluş genelinde içgörüler sunan bir iş analizi araçları paketidir. Bağlan veri kaynağına sahip olmak, veri hazırlığı basitleştirmek ve planlanmamış analizler yapmak. Güzel raporlar üretin, sonra bunları web'de ve mobil cihazlardan tüketmesi için yayımlayın.

Alternatifler

  • Synapse Link veritabanı verileri üzerinde analiz için Microsoft tarafından tercih edilen Cosmos çözümdür.

Fiyatlandırma

Sonraki adımlar