استخدام Azure Data Factory لاستيعاب البيانات في منتج بيانات Azure Operator Insights

تتناول هذه المقالة كيفية إعداد Azure Data Factory لكتابة البيانات في منتج بيانات Azure Operator Insights. لمزيد من المعلومات حول Azure Data Factory، راجع ما هو Azure Data Factory.

تحذير

لا تدعم منتجات البيانات الارتباطات الخاصة. لا يمكن إعداد ارتباط خاص بين Data Product وAzure Data Factory.

المتطلبات الأساسية

  • منتج بيانات منشور: راجع إنشاء منتج بيانات Azure Operator Insights.
  • إذن لإضافة تعيينات الدور إلى مثيل Azure Key Vault لمنتج البيانات.
    • للعثور على مخزن المفاتيح، ابحث عن مجموعة موارد باسم يبدأ ب <data-product-name>-HostedResources-؛ مخزن المفاتيح موجود في مجموعة الموارد هذه.
  • مثيل Azure Data Factory المنشور.
  • دور Data Factory Contributor على مثيل Data Factory.

إنشاء خدمة مرتبطة ب Key Vault

لتوصيل Azure Data Factory بخدمة Azure أخرى، يجب إنشاء خدمة مرتبطة. أولا، قم بإنشاء خدمة مرتبطة لتوصيل Azure Data Factory بخزنة مفاتيح منتج البيانات.

  1. في مدخل Microsoft Azure، ابحث عن مورد Azure Data Factory.
  2. من جزء Overview، قم بتشغيل Azure Data Factory studio.
  3. انتقل إلى طريقة العرض إدارة، ثم ابحث عن الاتصال وحددالخدمات المرتبطة.
  4. إنشاء خدمة مرتبطة جديدة باستخدام الزر جديد .
    1. حدد نوع Azure Key Vault.
    2. قم بتعيين الهدف إلى مخزن مفاتيح منتج البيانات (المخزن الرئيسي في مجموعة الموارد باسم يبدأ ب <data-product-name>-HostedResources- و يسمى aoi-<uid>-kv).
    3. تعيين أسلوب المصادقة إلى الهوية المدارة المعينة من قبل النظام.
  5. منح أذونات Azure Data Factory على مورد Key Vault.
    1. انتقل إلى مخزن مفاتيح منتج البيانات في مدخل Microsoft Azure.
    2. في جزء التحكم بالوصول (IAM)، أضف تعيين دور جديد.
    3. امنح الهوية المدارة ل Data Factory (وهذا له نفس اسم مورد Data Factory) دور "مستخدم أسرار Key Vault".

إنشاء خدمة مرتبطة ب Blob Storage

تعرض منتجات البيانات نقطة نهاية Blob Storage لاستيعاب البيانات. استخدم الخدمة المرتبطة ب Key Vault التي تم إنشاؤها حديثا لتوصيل Azure Data Factory بنقطة نهاية استيعاب منتج البيانات.

  1. في مدخل Microsoft Azure، ابحث عن مورد Azure Data Factory.
  2. من جزء Overview، قم بتشغيل Azure Data Factory studio.
  3. انتقل إلى طريقة العرض إدارة، ثم ابحث عن الاتصال وحددالخدمات المرتبطة.
  4. إنشاء خدمة مرتبطة جديدة باستخدام الزر جديد .
    1. حدد نوع Azure Blob Storage.
    2. تعيين نوع المصادقة إلى SAS URI.
    3. اختر Azure Key Vault كمصدر.
    4. حدد خدمة Key Vault المرتبطة التي قمت بإنشائها في إنشاء خدمة مرتبطة ب Key Vault.
    5. تعيين الاسم السري إلى input-storage-sas.
    6. اترك الإصدار السري كقيمة افتراضية ('أحدث إصدار').

الآن يتم توصيل Data Factory بنقطة نهاية استيعاب منتج البيانات.

إنشاء مجموعات بيانات Blob Storage

لاستخدام منتج البيانات كمتلقي لمسار Data Factory، يجب إنشاء مجموعة بيانات متلقي.

  1. في مدخل Microsoft Azure، ابحث عن مورد Azure Data Factory.
  2. من جزء Overview، قم بتشغيل Azure Data Factory studio.
  3. انتقل إلى طريقة عرض Author -> Add resource -> Dataset.
  4. إنشاء مجموعة بيانات Azure Blob Storage جديدة.
    1. حدد نوع الإخراج الخاص بك.
    2. قم بتعيين الخدمة المرتبطة إلى خدمة Data Product ingestion المرتبطة التي قمت بإنشائها في إنشاء خدمة مرتبطة بتخزين كائن ثنائي كبير الحجم.
    3. قم بتعيين اسم الحاوية إلى اسم نوع البيانات المقترن بمجموعة البيانات.
      • يمكن العثور على هذه المعلومات في قسم تكوين الاستيعاب المطلوب في وثائق منتج البيانات الخاص بك.
      • على سبيل المثال، راجع تكوين الاستيعاب المطلوب لمنتج بيانات Monitoring - MCC.
    4. تأكد من أن مسار المجلد يتضمن دليلا واحدا على الأقل؛ لن يتم استيعاب الملفات المنسخة في جذر الحاوية بشكل صحيح.
    5. قم بتعيين الحقول الأخرى حسب الاقتضاء لبياناتك.
  5. اتبع وثائق Azure Data Factory (على سبيل المثال إنشاء مسار باستخدام واجهة المستخدم) لإنشاء مسار مع مجموعة البيانات الجديدة هذه كمتلقي.

كرر هذه الخطوة لجميع مجموعات البيانات المطلوبة.

هام

قد يستخدم منتج البيانات بادئة المجلد أو بادئة اسم الملف (يمكن تعيين هذا كجزء من المسار، على سبيل المثال في نشاط النسخ) لتحديد كيفية معالجة ملف تم استيعابه. للحصول على متطلبات منتج البيانات لبادئات المجلد أو بادئات اسم الملف، راجع قسم تكوين الاستيعاب المطلوب في وثائق منتج البيانات. على سبيل المثال، راجع تكوين الاستيعاب المطلوب لمنتج بيانات Monitoring - MCC.

إنشاء البنية الأساسية لبرنامج ربط العمليات التجارية للبيانات

تم الآن تكوين Azure Data Factory للاتصال بمنتج البيانات الخاص بك. لاستيعاب البيانات باستخدام هذا التكوين، يجب اتباع وثائق Data Factory.

  1. إعداد اتصال في Azure Data Factory بالخدمة التي تحتوي على بيانات المصدر.
  2. قم بإعداد المسارات في Azure Data Factory لنسخ البيانات من المصدر إلى منتج البيانات الخاص بك، باستخدام مجموعات البيانات التي تم إنشاؤها في الخطوة الأخيرة.

تعلم كيف: