إنشاء نظام مجموعة Spark في HDInsight على AKS (معاينة)

هام

هذه الميزة في وضع المعاينة حاليًا. تتضمن شروط الاستخدام التكميلية لمعاينات Microsoft Azure المزيد من الشروط القانونية التي تنطبق على ميزات Azure الموجودة في الإصدار التجريبي أو قيد المعاينة أو التي لم يتم إصدارها بعد في التوفر العام. للحصول على معلومات حول هذه المعاينة المحددة، راجع معلومات معاينة Azure HDInsight على AKS. للأسئلة أو اقتراحات الميزات، يرجى إرسال طلب على AskHDInsight مع التفاصيل ومتابعتنا لمزيد من التحديثات على مجتمع Azure HDInsight.

بمجرد اكتمال متطلبات الاشتراك وخطوات المتطلبات الأساسية للموارد، ونشر تجمع نظام المجموعة، استمر في استخدام مدخل Microsoft Azure لإنشاء نظام مجموعة Spark. يمكنك استخدام مدخل Microsoft Azure لإنشاء مجموعة Apache Spark في تجمع نظام المجموعة. يمكنك بعد ذلك إنشاء Jupyter Notebook واستخدامه لتشغيل استعلامات Spark SQL مقابل جداول Apache Hive.

  1. في مدخل Microsoft Azure، اكتب cluster pools، وحدد cluster pools للانتقال إلى صفحة cluster pools. في صفحة تجمعات نظام المجموعة، حدد تجمع نظام المجموعة الذي يمكنك إضافة مجموعة Spark جديدة فيه.

  2. في صفحة تجمع نظام المجموعة المحددة، انقر فوق + مجموعة جديدة.

    لقطة شاشة توضح كيفية إنشاء مجموعة spark جديدة.

    تفتح هذه الخطوة صفحة إنشاء نظام المجموعة.

    لقطة شاشة تعرض إنشاء صفحة أساسية لنظام المجموعة.

    الخاصية ‏‏الوصف
    الاشتراك اشتراك Azure الذي تم تسجيله للاستخدام مع HDInsight على AKS في قسم المتطلبات الأساسية مع ملء مسبق
    مجموعة الموارد سيتم ملء نفس مجموعة الموارد مثل تجمع نظام المجموعة مسبقا
    المنطقة سيتم ملء نفس المنطقة مثل تجمع نظام المجموعة والظاهري مسبقا
    تجمع نظام المجموعة سيتم ملء اسم تجمع نظام المجموعة مسبقا
    إصدار تجمع HDInsight سيتم ملء إصدار تجمع نظام المجموعة مسبقا من تحديد إنشاء التجمع
    HDInsight على إصدار AKS تحديد HDI على إصدار AKS
    نوع شبكة نظام المجموعة من القائمة المنسدلة، حدد Spark
    إصدار نظام المجموعة حدد إصدار الصورة لاستخدامه
    اسم شبكة نظام المجموعة أدخل اسم نظام المجموعة الجديد
    الهوية المُدارة التي يعيّنها المُستخدم حدد الهوية المدارة المعينة من قبل المستخدم والتي ستعمل ك سلسلة الاتصال مع التخزين
    حساب التخزين حدد حساب التخزين الذي تم إنشاؤه مسبقا والذي سيتم استخدامه كمساحة تخزين أساسية للمجموعة
    اسم الحاوية حدد اسم الحاوية (فريد) إذا تم إنشاؤه مسبقا أو إنشاء حاوية جديدة
    كتالوج Hive (اختياري) حدد Hive metastore الذي تم إنشاؤه مسبقا (Azure SQL DB)
    قاعدة بيانات SQL ل Hive من القائمة المنسدلة، حدد قاعدة بيانات SQL لإضافة جداول hive-metastore.
    اسم المستخدم المسؤول في SQL أدخل اسم مستخدم مسؤول SQL
    Key Vault من القائمة المنسدلة، حدد Key Vault، الذي يحتوي على سر مع كلمة مرور لاستخدم مستخدم مسؤول SQL
    الاسم السري لكلمة مرور SQL أدخل الاسم السري من Key Vault حيث يتم تخزين كلمة مرور SQL DB

    إشعار

    • يدعم HDInsight حاليا قواعد بيانات MS SQL Server فقط.
    • بسبب قيود Hive، حرف "-" (واصلة) في اسم قاعدة بيانات metastore غير مدعوم.
  3. حدد Next: Configuration + pricing للمتابعة.

    لقطة شاشة تعرض علامة تبويب التسعير 1.

    لقطة شاشة تعرض علامة تبويب التسعير 2.

    لقطة شاشة تعرض علامة تبويب ssh.

    الخاصية ‏‏الوصف
    حجم العقدة حدد حجم العقدة لاستخدامه لعقد Spark
    عدد عقد العامل حدد عدد العقد لنظام مجموعة Spark. من هذه العقد، يتم حجز ثلاث عقد لخدمات المنسق والنظام، والعقد المتبقية مخصصة لعمال Spark، وعامل واحد لكل عقدة. على سبيل المثال، في مجموعة مكونة من خمس عقد هناك عاملان
    التحجيم التلقائي انقر فوق زر التبديل لتمكين التحجيم التلقائي
    نوع التحجيم التلقائي حدد إما من التحجيم التلقائي المستند إلى التحميل أو الجدولة
    مهلة إيقاف التشغيل بأمان تحديد مهلة إيقاف التشغيل بأمان
    لا توجد عقدة عاملة افتراضية حدد عدد العقد للتحجيم التلقائي
    المنطقة الزمنية تحديد المنطقة الزمنية
    قواعد التحجيم التلقائي حدد اليوم، وقت البدء، وقت الانتهاء، لا. العقد العاملة
    تمكين SSH إذا تم تمكينه، يسمح لك بتعريف البادئة وعدد عقد SSH
  4. انقر فوق Next : Integrations لتمكين Log Analytics للتسجيل وتحديده.

    يمكن تمكين Azure Prometheus للمراقبة والمقاييس بعد إنشاء نظام المجموعة.

    لقطة شاشة تعرض علامة تبويب التكامل.

  5. انقر فوق التالي: العلامات للمتابعة إلى الصفحة التالية.

    لقطة شاشة تعرض علامة تبويب العلامات.

  6. في صفحة Tags ، أدخل أي علامات ترغب في إضافتها إلى المورد الخاص بك.

    الخاصية الوصف
    الاسم اختياري. أدخل اسما مثل HDInsight على AKS Private Preview لتحديد جميع الموارد المرتبطة بمواردك بسهولة
    القيمة‬ اترك هذا فارغا
    Resource تحديد كافة الموارد المحددة
  7. انقر فوق التالي: مراجعة + إنشاء.

  8. في صفحة Review + create، ابحث عن رسالة Validation succeeded في أعلى الصفحة ثم انقر فوق Create.

  9. يتم عرض صفحة التوزيع قيد المعالجة التي تم إنشاء نظام المجموعة. يستغرق إنشاء نظام المجموعة من 5 إلى 10 دقائق. بمجرد إنشاء نظام المجموعة، يتم عرض رسالة اكتمال النشر. إذا انتقلت بعيدا عن الصفحة، يمكنك التحقق من الإعلامات الخاصة بك بحثا عن الحالة.

  10. انتقل إلى صفحة نظرة عامة على نظام المجموعة، يمكنك مشاهدة ارتباطات نقطة النهاية هناك.

    لقطة شاشة تعرض صفحة نظرة عامة على نظام المجموعة.