Lösningsidé
Om du vill att vi utökar den här artikeln med mer information, till exempel potentiella användningsfall, alternativa tjänster, implementeringsöverväganden eller prisvägledning, kan du berätta för GitHub Feedback!
Den här lösningsidéen demonstrerar dataflödesinmatning med låg latens för stora volymer Content Delivery Network (CDN) loggar för att skapa instrumentpaneler för analys i nära realtid.
Arkitektur
Dataflöde
- Content Delivery Network leverantörer som Verizon och Fastly matar in stora mängder CDN-loggar i Azure Data Explorer för att analysera svarstider, hälsotillstånd och prestanda för CDN tillgångar.
- De CDN scenarierna matar in data via Azure Storage (Blobeller ADLS Gen2), som använder Azure Event Grid och utlöser inmatningspipelinen för att Azure Data Explorer. Du kan också massinmatning av data med hjälp av lightingest-verktyget. Du kan också kontinuerligt exportera data till Azure Storage i komprimerat, partitionerat parquet-format och sömlöst fråga dessa data enligt beskrivningen i Översikt över löpande dataexport.
- Azure Data Explorer tillhandahåller lättanvända inbyggda operatorer och funktioner för att bearbeta, aggregera och analysera tidsserier och loggdata, samt ge insikter med blixthastighet. Du kan skapa instrumentpaneler för analys i nära realtid Azure Data Explorer instrumentpaneler,Power BIeller Grafana.
- Skapa och schemalägg aviseringar och meddelanden Azure Data Explorer anslutningsappen för Azure Logic Apps.
Komponenter
- Azure Storage Azure Data Explorer:Kontinuerliginmatning från Azure Storage (Blob Storage och ADLSv2) med Azure Event Grid-prenumeration för att strömma dessa meddelanden till Azure Data Explorer.
- Azure Data Explorer:Snabb, fullständigt hanterad och mycket skalbar dataanalystjänst för realtidsanalys på stora mängder data som strömmas från program, webbplatser, IoT-enheter med mera.
- Azure Data Explorer instrumentpaneler:Exportera Kusto-frågor som har utforskats i webbgränssnittet för att optimera instrumentpaneler.
- Azure Logic Apps Azure Data Explorer anslutning:Kör Kusto-frågor och kommandon automatiskt som en del av en schemalagd eller utlöst uppgift.
Nästa steg
Mer information finns i Azure Data Explorer dokumentationen.