Discovery Hub avec analytique à l’échelle du cloud

Analysis Services
Data Lake Storage
Databricks
Synapse Analytics

Idée de solution Solution Idea

Si vous souhaitez nous voir développer cet article avec d’autres informations, les détails de l’implémentation, le guide de tarification ou des exemples de code, faites-le-nous savoir avec les Commentaires de GitHub !If you'd like to see us expand this article with more information, implementation details, pricing guidance, or code examples, let us know with GitHub Feedback!

Utilisez Discovery Hub pour définir un patrimoine de données à l’aide d’une interface utilisateur graphique, avec les définitions stockées dans un référentiel de métadonnées.Use Discovery Hub to define a data estate using a graphical user interface, with definitions stored in a metadata repository. Le code permettant de créer le patrimoine de données est généré automatiquement mais reste entièrement personnalisable.Code for building the data estate is generated automatically while remaining fully customizable. L’entrepôt de données moderne qui en résulte est prêt à prendre en charge l’analytique à l’échelle du cloud et l’IA.The resulting modern data warehouse is ready to support cloud scale analytics and AI.

ArchitectureArchitecture

Diagramme d’architecture Télécharger une SVG de cette architecture.Architecture Diagram Download an SVG of this architecture.

Data FlowData Flow

  1. Combinez toutes vos données structurées et semi-structurées dans Azure Data Lake Storage à l’aide du pipeline d’ingénierie des données de Discovery Hub avec des centaines de connecteurs de données natifs.Combine all your structured and semi-structured data in Azure Data Lake Storage using Discovery Hub's data engineering pipeline with hundreds of native data connectors.
  2. Nettoyez et transformez les données à l’aide des puissantes fonctionnalités d’analytique et de calcul d’Azure Databricks.Clean and transform data using the powerful analytics and computational ability of Azure Databricks.
  3. Déplacez les données nettoyées et transformées vers Azure Synapse Analytics, en créant un hub pour toutes vos données.Move cleansed and transformed data to Azure Synapse Analytics, creating one hub for all your data. Tirez parti des connecteurs natifs entre Azure Databricks (PolyBase) et Azure Synapse Analytics pour accéder aux données et les déplacer à grande échelle.Take advantage of native connectors between Azure Databricks (PolyBase) and Azure Synapse Analytics to access and move data at scale.
  4. Créez des rapports opérationnels et des tableaux de bord analytiques s’appuyant sur SQL Database pour obtenir des insights à partir des données, et utilisez Azure Analysis Services pour fournir les données.Build operational reports and analytical dashboards on top of SQL Database to derive insights from the data and use Azure Analysis Services to serve the data.
  5. Exécutez des requêtes ad hoc directement sur les données dans Azure Databricks.Run ad-hoc queries directly on data within Azure Databricks.

ComposantsComponents

  • Azure Data Lake Storage : Fonctionnalité de lac de données sécurisée et extrêmement scalable qui repose sur le Stockage Blob AzureAzure Data Lake Storage: Massively scalable, secure data lake functionality built on Azure Blob Storage
  • Azure Databricks : Plateforme d’analytique Apache Spark rapide, facile et collaborativeAzure Databricks: Fast, easy, and collaborative Apache Spark-based analytics platform
  • Azure Synapse Analytics : Service analytique illimité avec une rapidité d’accès aux insights inégalée (anciennement SQL Data Warehouse)Azure Synapse Analytics: Limitless analytics service with unmatched time to insight (formerly SQL Data Warehouse)
  • Azure Analysis Services : Moteur d’analytique de niveau professionnel en tant que serviceAzure Analysis Services: Enterprise-grade analytics engine as a service
  • Power BI Embedded : Incorporez des visualisations de données totalement interactives et saisissantes dans vos applicationsPower BI Embedded: Embed fully interactive, stunning data visualizations in your applications

Étapes suivantesNext steps