HDInsight على AKS - الأسئلة المتداولة
تتناول هذه المقالة بعض الأسئلة الشائعة حول Azure HDInsight على AKS.
عام
ما هو HDInsight على AKS؟
HDInsight على AKS هو إصدار HDInsight جديد، والذي يوفر خدمة نظام المجموعة المدارة الجاهزة للمؤسسات مع مشاريع التحليلات مفتوحة المصدر الناشئة مثل Apache Flink (للبث)، و Trino (لتحليلات adhoc و BI)، وApache Spark. لمزيد من المعلومات، راجع نظرة عامة.
ما هي أشكال نظام المجموعة التي يدعمها HDInsight على AKS؟
يدعم HDInsight على AKS Trino وApache Flink وApache Spark للبدء بها. ومع ذلك، توجد أشكال نظام المجموعة الأخرى مثل Kafka وHive وما إلى ذلك على المخطط.
كيف أعمل بدء استخدام HDInsight على AKS؟
للبدء، قم بزيارة Azure Marketplace وابحث عن Azure HDInsight على خدمة AKS وارجع إلى البدء.
ماذا يحدث ل HDInsight الموجود على الجهاز الظاهري والمجموعات التي أقوم بتشغيلها اليوم؟
لا توجد تغييرات على HDInsight الحالي (HDInsight على الجهاز الظاهري). تستمر جميع المجموعات الموجودة في التشغيل، ويمكنك الاستمرار في إنشاء مجموعات HDInsight جديدة وتوسيع نطاقها.
ما نظام التشغيل المدعوم مع HDInsight على AKS؟
يعتمد HDInsight على AKS على نظام التشغيل Mariner. لمزيد من المعلومات، راجع إصدار نظام التشغيل.
في ما هي جميع المناطق التي تتوفر فيها HDInsight على AKS؟
للحصول على قائمة بالمناطق المدعومة، راجع توفر المنطقة.
ما هي تكلفة نشر HDInsight على نظام مجموعة AKS؟
لمزيد من المعلومات حول التسعير، راجع HDInsight على أسعار AKS.
إدارة نظام المجموعة Cluster management
هل يمكنني تشغيل مجموعات متعددة في وقت واحد؟
نعم، يمكنك تشغيل العديد من المجموعات كما تريد لكل تجمع نظام مجموعة في وقت واحد. ومع ذلك، تأكد من عدم تقييدك حسب الحصة النسبية لاشتراكك. الحد الأقصى لعدد العقد المسموح بها في تجمع نظام المجموعة هو 250 (في المعاينة العامة).
هل يمكنني تثبيت أو إضافة المزيد من المكونات الإضافية/المكتبات على نظام المجموعة الخاص بي؟
نعم، يمكنك تثبيت المكونات الإضافية والمكتبات المخصصة اعتمادا على أشكال نظام المجموعة.
- بالنسبة إلى Trino، راجع تثبيت المكونات الإضافية المخصصة.
- بالنسبة إلى Spark، راجع إدارة المكتبة في Spark.
هل يمكنني إدخال SSH في مجموعتي؟
نعم، يمكنك SSH على نظام المجموعة الخاص بك عبر webssh وتنفيذ الاستعلامات وإرسال المهام مباشرة من هناك.
Metastore
هل يمكنني استخدام metastore خارجي للاتصال بالمجموعة الخاصة بي؟
نعم، يمكنك استخدام metastore خارجي. ومع ذلك، نحن ندعم قاعدة بيانات Azure SQL فقط كمخزن بيانات تعريف مخصص خارجي.
هل يمكنني مشاركة metastore عبر مجموعات متعددة؟
نعم، يمكنك مشاركة metastore عبر HDInsight متعددة من AKS.
ما هو إصدار Hive metastore المدعوم؟
Hive metastore الإصدار 3.1.2
أحمال العمل
Trino
ما هو ترينو؟
Trino هو محرك استعلام SQL موحد وموزع مصدر مفتوح، والذي يسمح لك بالاستعلام عن البيانات الموجودة على مصادر بيانات مختلفة دون الانتقال إلى مستودع بيانات مركزي. يمكنك الاستعلام عن البيانات باستخدام ANSI SQL، لا حاجة لتعلم لغة جديدة. لمزيد من المعلومات، راجع نظرة عامة على Trino.
ما هي جميع الموصلات التي تدعمها؟
HDInsight على AKS Trino يدعم موصلات متعددة. لمزيد من المعلومات، راجع قائمة موصلات Trino هذه. نستمر في إضافة موصلات جديدة ك وعند توفر موصلات جديدة في الإصدار مفتوح المصدر.
هل يمكنني إضافة كتالوجات إلى مجموعة موجودة؟
نعم، يمكنك إضافة كتالوجات مدعومة إلى المجموعة الموجودة. لمزيد من المعلومات، راجع إضافة كتالوجات إلى مجموعة موجودة.
Apache Flink
ما هو Apache Flink؟
Apache Flink هو أفضل محرك تحليلي مفتوح المصدر في فئته لمعالجة الدفق وإجراء حساب مناسب عبر تدفقات البيانات غير المحدودة والمقيدة. يمكنه إجراء عمليات حسابية بسرعة في الذاكرة وعلى أي مقياس. يوفر Flink على HDInsight على AKS Apache Flink مفتوح المصدر المدار. لمزيد من المعلومات، راجع نظرة عامة على Flink.
هل تدعم كل من وضع الجلسة والتطبيق في Apache Flink؟
في HDInsight على AKS، يدعم Flink حاليا مجموعات وضع الجلسة.
ما هي إدارة الواجهة الخلفية للحالة وكيف يتم ذلك في HDInsight على AKS؟
تحدد الخلفيات مكان تخزين الحالة. عند تنشيط نقاط التفتيش، تستمر الحالة عند نقاط التحقق للحماية من فقدان البيانات واستردادها باستمرار. تعتمد كيفية تمثيل الحالة داخليا، وكيفية ومكان استمرارها عند نقاط التحقق على واجهة الدولة الخلفية المختارة. لمزيد من المعلومات، راجع نظرة عامة على Flink
Apache Spark
ما هو Apache Spark؟
Apache Spark هو إطار عمل لمعالجة البيانات يمكنه تنفيذ مهام المعالجة بسرعة على مجموعات البيانات الكبيرة، ويمكنه أيضا توزيع مهام معالجة البيانات عبر أجهزة كمبيوتر متعددة، إما من تلقاء نفسها أو جنبا إلى جنب مع أدوات الحوسبة الموزعة الأخرى.
ما هي واجهات برمجة التطبيقات للغة المعتمدة في Spark؟
يدعم Azure HDInsight على AKS Python وSc scala.
هل metastore الخارجي مدعوم في HDInsight على AKS Spark؟
يدعم HDInsight على AKS اتصال metastore الخارجي. حاليا فقط Azure SQL DB في مدعومة كمخزن بيانات خارجي.
ما هي الطرق المختلفة لإرسال الوظائف في HDInsight على AKS Spark؟
يمكنك إرسال المهام على HDInsight على AKS Spark باستخدام Jupyter Notebook وZeppelin Notebook وSDK ومحطة نظام المجموعة. لمزيد من المعلومات، راجع إرسال المهام وإدارتها على مجموعة Spark في HDInsight على AKS