Návrhy řešení
Tento článek je nápadem na řešení. Pokud chcete, abychom obsah rozšířili o další informace, jako jsou potenciální případy použití, alternativní služby, aspekty implementace nebo pokyny k cenám, dejte nám vědět tím, že nám poskytnete zpětnou vazbu na GitHubu.
Tento nápad řešení ukazuje příjem dat s nízkou latencí a vysokou propustností u velkých objemů protokolů služby Content Delivery Network (CDN). Tato data můžete použít k vytváření analytických řídicích panelů téměř v reálném čase.
Architektura
Stáhněte si soubor aplikace Visio s touto architekturou.
Tok dat
- Poskytovatelé služby Content Delivery Network, jako je Verizon a Fastly, do Azure Data Explorer ingestují obrovské objemy protokolů CDN, aby mohli analyzovat latence, stav a výkon prostředků CDN.
- Většina scénářů CDN ingestuje data prostřednictvím služby Azure Storage (Blob nebo ADLS Gen2), která používá Azure Event Grid a aktivuje kanál příjmu dat do Azure Data Explorer. Případně můžete data hromadně ingestovat pomocí nástroje LightIngest. Můžete také průběžně exportovat data do Azure Storage v komprimovaném, děleném formátu parquet a bezproblémově se na tato data dotazovat, jak je podrobně popsáno v přehledu průběžného exportu dat.
- Azure Data Explorer poskytuje snadno použitelné nativní operátory a funkce pro zpracování, agregaci a analýzu dat časových řad a protokolů a poskytuje přehledy rychlostí blesku. Pomocí řídicích panelů Azure Data Explorer, Power BI nebo Grafany můžete vytvářet analytické řídicí panely téměř v reálném čase.
- Vytváření a plánování upozornění a oznámení pomocí konektoru Azure Data Explorer pro Azure Logic Apps
Komponenty
- Konektor Azure Storage Azure Data Explorer: Průběžný příjem dat ze služby Azure Storage (Blob Storage a ADLSv2) s předplatným Azure Event Grid pro streamování těchto oznámení do Azure Data Explorer.
- Azure Data Explorer: Rychlá, plně spravovaná a vysoce škálovatelná služba analýzy dat pro analýzu velkých objemů dat streamovaných z aplikací, webů, zařízení IoT a dalších dat v reálném čase.
- Řídicí panely Azure Data Explorer: Nativně exportujte dotazy Kusto, které byly prozkoumány ve webovém uživatelském rozhraní, do optimalizovaných řídicích panelů.
- Konektor Azure Data Explorer Azure Logic Apps: Automatické spouštění dotazů a příkazů Kusto v rámci naplánované nebo aktivované úlohy
Podrobnosti scénáře
Toto řešení můžete použít k ingestování velkých objemů protokolů CDN za účelem vytváření analytických řídicích panelů téměř v reálném čase.
Potenciální případy použití
- Log Analytics
- Analýza časových řad
- IoT
- Průzkumné analýzy pro obecné účely
Přispěvatelé
Tento článek spravuje Microsoft. Původně ji napsali následující přispěvatelé.
Hlavní autor:
- Ornat Spodek | Vedoucí správce obsahu
Další kroky
Další informace najdete v dokumentaci k Azure Data Explorer.