Büyük Veri Mimarisinde Gerçek Zamanlı Analiz

Analysis Services
Event Hubs
Synapse Analytics

Çözüm Fikri

Olası kullanım örnekleri, alternatif hizmetler, uygulama konuları veya fiyatlandırma kılavuzu gibi daha fazla bilgiyle bu makaleyi genişletmemizi görmek için Geri Bildirim ile GitHub!

Canlı akış verilerinden kolayca Öngörüler elde edin. Tüm IoT cihazlarından veya Web sitesi tıklama akışlarındaki günlüklerden sürekli olarak veri yakalayın ve neredeyse gerçek zamanlı olarak işleyin.

Mimari

Azure Data Lake Storage 2., olay Hub 'ı, Azure Analysis Services, Azure Cosmos DB ve Power BI ile Azure Synapse analytics kullanan büyük veri mimarisinde gerçek zamanlı analizler diyagramı.

Bu mimarinin bir SVG indirin.

Veri akışı

  1. Azure Event Hubs kullanarak bir uygulama için kolayca canlı akış verileri alma.
  2. Azure Blob Depolama için Synapse Pipelines kullanarak tüm yapılandırılmış verilerinizi bir araya getirin.
  3. Akış verilerini temizlemek, dönüştürmek ve analiz etmek için Apache Spark havuzlarından yararlanın ve bunu işletimsel veritabanlarından veya veri ambarlarından yapılandırılmış verilerle birleştirin.
  4. Apache Spark havuzlardaki Not defteri deneyimleri ile Python, Scala veya .NET kullanarak bu verilerden daha derin Öngörüler elde etmek için ölçeklenebilir makine öğrenimi/derin öğrenme tekniklerini kullanın.
  5. Apache Spark pool ve Synapse Pipelines ' i Azure Synapse Analytics 'te, ölçeklendirerek verilere erişin ve taşıyın.
  6. kuruluşunuz dahilinde öngörüleri paylaşmak ve bu verileri binlerce kullanıcıya sağlamak için Azure Analysis Services kullanmak üzere adanmış SQL havuzunda analiz panoları ve ekli raporlar oluşturun.
  7. gerçek zamanlı uygulamalar üzerinden erişilebilir hale getirmek için Apache Spark havuzlarından öngörüleri Cosmos DB yapın.

Bileşenler

  • Azure SYNAPSE Analytics , esnek ve bağımsız olarak, yüksek düzeyde paralel işleme mimarisiyle ölçeklendirmenize, hesaplamanıza ve depolamanıza olanak sağlayan hızlı, esnek ve güvenilir bulut veri ambarıdır.
  • Synapse Pipelines belgeleri ETL/ELT iş akışlarınızı oluşturmanıza, zamanlamanıza ve düzenlemenize olanak tanır.
  • Azure Data Lake Storage: Azure Blob üzerinde oluşturulmuş, yüksek düzeyde ölçeklenebilir, güvenli Data Lake işlevselliği Depolama
  • Azure SYNAPSE Analytics Spark havuzları , hızlı, kolay ve işbirliğine dayalı Apache Spark tabanlı bir analiz platformudur.
  • Azure azure Event Hubs belgeleri , büyük bir veri akışı platformu ve olay alma hizmetidir.
  • Azure Cosmos DB , genel olarak dağıtılmış, çok modelli bir veritabanı hizmetidir. Daha sonra istediğiniz sayıda Azure bölgesinde verilerinizi çoğaltmayı ve depolama alanınızı depoınızdan bağımsız olarak ölçeklendirmenizi öğrenin.
  • Azure Cosmos DB için azure Synapse bağlantısı , azure Synapse çalışma alanınızda bulunan iki analiz altyapısını kullanarak, işlem iş yükünüz üzerinde herhangi bir performans veya maliyet etkisi olmadan Azure Cosmos DB işletimsel veriler üzerinde neredeyse gerçek zamanlı analizler çalıştırmanızı sağlar: sunucusuz ve Spark havuzlarınıSQL.
  • Azure Analysis Services , bı çözümünüzü güvenle yönetmenize, dağıtmanıza, test etmenize ve sunmanıza olanak tanıyan bir hizmet olarak kurumsal düzeyde analiz sağlar.
  • Power BI , kuruluşunuz genelinde öngörüler sağlayan bir iş analizi araçları paketidir. yüzlerce veri kaynağına Bağlan, veri prep 'i basitleştirecek ve planlanmamış analizler. Harika raporlar oluşturun ve ardından bunları kuruluşunuzda Web 'de ve mobil cihazlarda kullanmak üzere yayımlayın.

Alternatifler

  • Synapse Link , Cosmos DB verilerinin üzerine analiz için Microsoft tarafından tercih edilen çözümdür.

Fiyatlandırma

Sonraki adımlar