フィードバック

Azure Data Lake で Azure Synapse Link for Dataverse を作成する

  • [アーティクル]

Azure Synapse Link を使用して、自分の Microsoft Dataverse データを Azure Data Lake Storage Gen2 に接続し、さまざまな分析シナリオを有効にできます。 この記事では、次のタスクを実行する方法を示します:

  1. Azure Synapse Link サービスを使用してご利用の Dataverse データを Azure Data Lake Storage Gen2 アカウントに接続します。
  2. Azure Synapse Link に含まれる Dataverse テーブルを管理します。
  3. ご利用の Azure Synapse Link を監視します。
  4. Azure Synapse Link のリンクを解除します。
  5. Azure Synapse Link を再リンクします。
  6. Azure Data Lake でデータを表示し、ファイル構造を理解する。

注意

Azure Synapse Link for Dataverse は以前は、Data Lake へのエクスポートと呼ばれていました。 このサービスは、2021 年 5 月より名称が変更され、Azure Synapse Analytics だけでなく、Azure Data Lake へのデータのエクスポートも継続されます。

前提条件

  • Azure Data Lake Storage Gen2: Azure Data Lake Storage Gen2 アカウントと 所有者 および ストレージ BLOB データ共同作成者 ロールのアクセス権を持っている必要があります。 ストレージ アカウントは、階層型名前空間 を有効にする必要があります。また、レプリケーションは リードアクセス geo 冗長ストレージ (RA-GRS) プロパティに設定することをお勧めします)。

注意

  • ストレージ アカウントは、Power Apps のテナントと同じ Azure Active Directory (Azure AD) テナントに作成する必要があります。
  • ストレージ アカウントは、使用する機能の存在する Power Apps 環境を同じ領域で作成することを推奨します。
  • ストレージ アカウントを持つリソース グループへの 閲覧者 ロール アクセスが必要です。
  • 環境を Azure Data Lake Storage Gen2 にリンクするには、Dataverse システム管理者のセキュリティ ロールが付与されている必要があります。
  • 有効な変更の追跡をするテーブルにのみエクスポートできます。

Dataverse を Azure Data Lake Storage Gen2 に接続する

  1. Power Apps にサインインし、好みの環境を選択します。

  2. 左側のナビゲーション ウィンドウで、データ を選択し、Azure Synapse Link を選択してから、コマンド バーで + Data Lake への新しいリンク を選択します。

    Power Apps に移動する。

  3. サブスクリプション、リソース グループ、ストレージ アカウント を選択します。 ストレージ アカウントが前提条件セクションで指定された要件を満たしていることを確認してください。 次へ を選択します。

    注意

    環境のデータ レイクへのリンクの一環として、自分のストレージ アカウントに Azure Synapse Link サービス アクセスを付与します。 Azure Data Lake Storage アカウントの作成および構成の前提条件 およびストレージ アカウントの所有者ロールを自分に付与する方法、に従うことを確認してください。 さらに、 Power Platform データフローのサービスへのアクセス権を自分のストレージ アカウントに付与します。 詳細: データフローでセルフサービス データを準備する。

  4. エクスポートするテーブルを追加してから、保存 を選択します。 変更の追跡が有効なテーブルにのみエクスポートできます。 詳細情報: 変更追跡を有効化する。

    エクスポートするテーブルを選択する。

上記の手順に従って、1 つの環境から Azure サブスクリプション内の複数の Azure Data Lake へのリンクを作成します。 同様に、すべて同じテナント内で複数の環境から同じ Azure Data Lake へのリンクを作成できます。

注意

Azure Synapse Link サービスによってエクスポートされたデータは、Azure Data Lake Storage Gen2 で保存時に暗号化されます。 さらに、BLOB ストレージ内の一時データも暗号化されて保存されます。 Azure Data Lake Storage Gen2 の暗号化は、データの保護、エンタープライズ セキュリティ ポリシー、規制コンプライアンス要件の順守に役立ちます。 詳細: Azure データ保存時の暗号化

現在、Azure Data Lake ファイアウォール設定 で使用できる Azure Synapse Link for Dataverse サービスに対してパブリック IP を提供することはできません。 パブリック IP ネットワーク ルールは、ストレージ アカウントと同じ Azure リージョンからのリクエストには影響しません。 ストレージ アカウントと同じリージョンにデプロイされたサービスは、通信にプライベート Azure IP アドレスを使用します。 したがって、パブリック アウトバウンド IP アドレスの範囲に基づいて、特定の Azure サービスへのアクセスを制限することはできません。 詳細: Azure Storage ファイアウォールと仮想ネットワークを構成する

テーブル データの Data Lake への移動を管理する

Azure Synapse Link を設定した後、次の 2 つの方法のいずれかでエクスポートされたテーブルを管理できます:

  • Power Apps メーカー ポータルの Azure Synapse Link エリアで、コマンド バーの テーブルの管理 を選択して 1 つ以上のリンク テーブルを追加または削除します。

  • Power Apps メーカー ポータルにある テーブル エリアで、テーブルの隣にある … を 選択してから、テーブル データをエクスポートするリンクされた Data Lake を選択します。

    エクスポートするテーブルを選択する。

Azure Synapse Link を設定した後、テーブル タブで Azure Synapse Link をモニターすることができます。

Azure Synapse Link 監視

  • 選択した Azure Synapse Link の一部であるテーブルのリストが表示されます。
  • 同期のステータスには、さまざまな段階があります。 NotStarted は、テーブルが同期の待機中であることを示します。 テーブルの初期同期が Completed になると、増分更新が行われない後処理の段階が発生します。 データのサイズによっては数時間かかる場合があります。 増分更新が開始すると、最後の同期の日付が定期的に更新されます。
  • カウント 列には、書き込まれた行数が表示されます。 追加のみ が いいえ に設定されている場合は、レコードの総数を表わします。 追加のみ が はい に設定されている場合は、変更の総数を表わします。
  • 追加のみ と パーティション戦略 の列には、さまざまな詳細構成の使用状況が表示されます。

  1. 希望する Azure Synapse Link を選択してリンクを解除します。

  2. コマンド バーから Data Lake のリンクを解除する を選択します。

  3. 両方の Data Lake ファイルシステムを削除するには、Data Lake ファイル システムの削除 を選択します。

  4. はい を選択し、すべてのリンクが解除されて削除されるまで数分待ちます。

リンク解除時にファイル システムを削除した場合は、上記の手順で同じ Data Lake を再リンクします。 リンク解除時にファイル システムを削除しなかった場合は、データをクリアしないと再リンクできません:

  1. Azure Data Lake にアクセスします。

  2. Dataverse コンテナを削除します。

  3. Power Apps にアクセスし、Data Lake を再リンクします。

Azure Data Lake Storage Gen2 でデータを表示する

  1. 希望する Azure Synapse Link を選択し、続いてトップパネルから Azure Data Lake にアクセス を選択します。

  2. ファイルシステム を展開し、次に dataverse-environmentName-organizationUniqueName を選択します。

model.json ファイルには、その名前とバージョンとともに、Data Lake にエクスポートされたテーブルの一覧が含まれます。 model.json ファイルには、初期同期状態と同期完了時間も含まれています。

Data Lake にエクスポートされたテーブルごとに、コンマ区切り (CSV 形式) されたスナップショットのファイルを含むフォルダーが表示されます。 Data Lake にあるテーブル データ。

スナップショットの継続的な更新

Microsoft Dataverseデータは、トランザクションの作成、更新、削除を通じて継続的に変更できます。 スナップショットは、定期的に (この場合は 1 時間ごとに) 更新されるデータの読み取り専用コピーを提供します。 これにより、任意の時点で、データ分析の利用者がレイクのデータを確実に消費できるようになります。

継続的なスナップショット更新。

初期エクスポートの一部としてテーブルが追加されると、テーブル データは Data Lake 内の対応するフォルダーの下にある table.csv ファイルに書き込まれます。 これは T1 サイクル間隔で、スナップショットの読み取り専用の、例えば テーブル-T1.csv— という名前のファイル、または、Account-T1.csv または Contacts-T1.csv— が作成されます。 さらに、これらのスナップショット ファイルをポイントするように model.json ファイルが更新されます。 model.json を開くと、スナップショットの詳細を表示できます。

次に、Data Lake の Account.csv パーティション ファイルとスナップショット フォルダーの例を示します。

アカウント テーブルのスナップショット。

Dataverse の変更は、トリクル フィード エンジンを使用して、対応する CSV ファイルに継続的にプッシュされます。 これは T2 サイクル間隔で、別のスナップショットが取得されます。 例えば テーブル-T2.csv—の場合、Accounts-T2.csv または Contacts-T2.csv (テーブルに変更があると想定) — および model.json が新しいスナップショット ファイルに更新されます。 T2 以降のスナップショット データを表示する新しいユーザーは、新しいスナップショット ファイルに送信されます。 これにより、元のスナップショット ビューアは古いスナップショット T1 ファイルで引き続き動作し、新しいビューアは最新の更新を読み取ることができます。 これは、下流プロセスの実行時間が長い場合に役立ちます。

model.json ファイルの例を次に示します。このファイルは、常に最新のタイムスタンプ付きアカウント スナップショッ トファイルを示します。

サンプル スナップショット model.json ファイル。

次の手順

Azure Synapse Link for Dataverse サービスを正常に使用した後、ハブの検出 を使用してデータを分析して使用する方法について説明します。 ハブの検出 にアクセスするには、Power Apps > Azure Synapse Link に移動します。 リンクされたサービスを選択してから、ハブの検出 タブを選択します。ここでは、データから最大の価値を引き出すのに役立つ推奨ツールとキュレーションされたドキュメントを見つけることができます。 ハブの検出。

関連項目

Power BI を使用して Data Lake にある Dataverse データを分析する

Azure Data Factory を使用して Data Lake にある Dataverse データを取り込む

Azure Synapse Link for Dataverse 高度な構成

Azure Synapse Link に関するよくあるご質問

注意

ドキュメントの言語設定についてお聞かせください。 簡単な調査を行います。 (この調査は英語です)

この調査には約 7 分かかります。 個人データは収集されません (プライバシー ステートメント)。