Databricks Runtime 11.3 LTS
توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 11.3 LTS، مدعوما ب Apache Spark 3.3.0. أصدرت Databricks هذه الصور في أكتوبر 2022.
إشعار
LTS يعني أن هذا الإصدار تحت الدعم طويل الأجل. راجع دورة حياة إصدار Databricks Runtime LTS.
ميزات وتحسينات جديدة
- مشغل الدفق المنظم مرة واحدة مهمل
- تغيير مسار المصدر للمحمل التلقائي
- يدعم موصل Databricks Kinesis الآن القراءة من تدفقات بيانات Kinesis في وضع EFO
- وظائف H3 جيوفضائية جديدة ودعم فوتون إضافي لجميع وظائف H3
- ميزات جديدة للإداء/إخراج التنبؤ
- زيادة الأقسام الأولية للفحص بحثا عن استعلامات انتقائية
- تصور إصدارات خطة AQE الجديدة
- أوضاع تعقب التقدم وإزالة السجل الجديدة غير المتزامنة
- يدعم الدفق المنظم على كتالوج Unity الآن
display() - يتم الآن تسجيل أحداث المسار بتنسيق JSON
- المعالجة التعسفية ذات الحالة في الدفق المنظم باستخدام Python
- استنتاج التاريخ في ملفات CSV
- نسخ الدعم لجداول Apache Parquet وApache Iceberg (معاينة عامة)
- استخدم SQL لتحديد مواقع التخزين على مستوى المخطط والكتالوج للجداول المدارة في كتالوج Unity
مشغل الدفق المنظم مرة واحدة مهمل
Trigger.Once تم إهمال الإعداد. توصي Databricks باستخدام Trigger.AvailableNow. راجع تكوين فواصل مشغل Structured Streaming.
تغيير مسار المصدر للمحمل التلقائي
يمكنك الآن تغيير مسار إدخال الدليل ل Auto Loader الذي تم تكوينه باستخدام وضع سرد الدليل دون الحاجة إلى اختيار دليل نقطة تحقق جديد. راجع تغيير مسار المصدر للتحميل التلقائي.
يدعم موصل Databricks Kinesis الآن القراءة من تدفقات بيانات Kinesis في وضع EFO
يمكنك الآن استخدام مصدر الدفق المهيكل Databricks Kinesis في Databricks Runtime 11.3 LTS لتشغيل الاستعلامات التي تقرأ من تدفقات بيانات Kinesis في وضع المروحة المحسن. يسمح هذا بمعدل نقل مخصص لكل جزء، لكل مستهلك، وتسليم السجل في وضع الدفع.
وظائف H3 جيوفضائية جديدة ودعم فوتون إضافي لجميع وظائف H3
تقديم 4 وظائف H3 جديدة و h3_maxchildh3_minchildh3_pointash3و و.h3_pointash3string تتوفر هذه الدالات في SQL وSc scala وPython. يتم الآن دعم جميع تعبيرات H3 في Photon. راجع الدالات الجغرافية المكانية H3.
ميزات جديدة للإداء/إخراج التنبؤ
يدعم Photon وضع النطاق لتشغيل الإطارات، باستخدام RANGE BETWEEN UNBOUNDED PRECEDING AND CURRENT ROW. يدعم Photon أيضا وضع النطاق لإطارات النمو، باستخدام RANGE BETWEEN UNBOUNDED PRECEDING AND offset_stop { PRECEDING | FOLLOWING }.
زيادة الأقسام الأولية للفحص بحثا عن استعلامات انتقائية
تمت زيادة قيمة الأقسام الأولية للمسح الضوئي إلى 10 للاستعلام الانتقائي مع take/tail/limit في أنظمة المجموعات التي تدعم Photon وفي LIMIT Databricks SQL. مع 10 أقسام، يمكنك تجنب النفقات العامة لبدء وظائف صغيرة متعددة وبطء التوسيع. يمكنك أيضا تكوين هذا من خلال spark.sql.limit.selectiveInitialNumPartitions.
تصور إصدارات خطة AQE الجديدة
تقديم إصدارات خطة AQE التي تسمح لك بتصور تحديثات خطة وقت التشغيل من تنفيذ الاستعلام التكيفي (AQE).
أوضاع تعقب التقدم وإزالة السجل الجديدة غير المتزامنة
تقديم أوضاع Structured Streaming تسمى تتبع التقدم غير المتزامن وتطهير السجل غير المتزامن. يقلل وضع إزالة السجل غير المتزامن من زمن انتقال استعلامات الدفق عن طريق إزالة السجلات المستخدمة لتعقب التقدم في الخلفية.
يدعم الدفق المنظم على كتالوج Unity الآن display()
يمكنك الآن استخدام display() عند استخدام Structured Streaming للعمل مع الجداول المسجلة في كتالوج Unity.
يتم الآن تسجيل أحداث المسار بتنسيق JSON
يكتب Azure Databricks الآن أحداث المسار إلى سجل برنامج التشغيل بتنسيق JSON. بينما سيكون كل حدث قابلا لتحليل JSON، قد لا تحتوي الأحداث الكبيرة على كافة الحقول، أو قد يتم اقتطاع الحقول. يتم تسجيل كل حدث في سطر واحد مع البادئة Event received: . فيما يلي مثال على الحدث.
Event received: {"id":"some-event-id","origin":{"pipeline_id":"some-pipeline-id","cluster_id":"some-cluster id"},"message":"simple [truncated] message","level":"WARN"}
المعالجة التعسفية ذات الحالة في الدفق المنظم باستخدام Python
تقديم الدالة applyInPandasWithState التي يمكن استخدامها لإجراء معالجة تعسفية ذات حالة في PySpark. وهذا يعادل الدالة flatMapGroupsWithState في واجهة برمجة تطبيقات Java.
استنتاج التاريخ في ملفات CSV
تقديم استدلال محسن لعمود نوع التاريخ في ملفات CSV. عندما يكون تنسيق التاريخ متناسقا عبر سجلات عمود، يمكن استنتاج هذه الأعمدة ك DateType. يمكنك أيضا الحصول على مجموعة من تنسيقات التاريخ عبر أعمدة مختلفة. يمكن ل Azure Databricks استنتاج تنسيق التاريخ تلقائيا لكل عمود. يتم ترك أعمدة التاريخ في ملفات CSV قبل Databricks Runtime 11.3 LTS ك StringType.
نسخ الدعم لجداول Apache Parquet وApache Iceberg (معاينة عامة)
يمكن الآن استخدام الاستنساخ لإنشاء جداول Delta وتحديثها بشكل متزايد والتي تعكس جداول Apache Parquet وApache Iceberg. يمكنك تحديث جدول Parquet المصدر وتطبيق التغييرات بشكل متزايد على جدول Delta المستنسخ باستخدام أمر الاستنساخ. راجع استنساخ جداول Parquet و Iceberg بشكل متزايد إلى Delta Lake.
استخدم SQL لتحديد مواقع التخزين على مستوى المخطط والكتالوج للجداول المدارة في كتالوج Unity
يمكنك الآن استخدام MANAGED LOCATION الأمر SQL لتحديد موقع تخزين سحابي للجداول المدارة على مستويات الكتالوج والمخطط. راجع إنشاء كتالوج وإنشاء مخطط.
تغييرات السلوك
Databricks الاتصال 11.3.2
Databricks الاتصال تحديث العميل 11.3.2 مدعوم الآن. راجع الاتصال Databricks وDatabricks الاتصال ملاحظات الإصدار.
موصل Azure Databricks Snowflake المحدث
تم تحديث موصل Azure Databricks Snowflake إلى أحدث إصدار من التعليمات البرمجية من المستودع مفتوح المصدر، Snowflake Data Source ل Apache Spark. وهو الآن متوافق تماما مع Databricks Runtime 11.3 LTS، بما في ذلك دفع التقييم والتنزيل التدريجي لخطة الاستعلام الداخلي مع الحفاظ على جميع ميزات الإصدار مفتوح المصدر.
ذاكرة التخزين المؤقت Hadoop ل S3A معطلة الآن
ذاكرة التخزين المؤقت Hadoop (FileSystem Apache Hadoop Main 3.3.4 API) ل S3A معطلة الآن. هذا للمحاذاة مع موصلات التخزين السحابية الأخرى. بالنسبة لأحمال العمل التي تعتمد على التخزين المؤقت لنظام الملفات، تأكد من تزويد أنظمة الملفات التي تم إنشاؤها حديثا بتكوينات Hadoop الصحيحة، بما في ذلك موفري بيانات الاعتماد.
يتطابق مخطط مجموعة إحصائيات Delta Lake الآن مع ترتيب الأعمدة في تعريف مخطط الجدول
يعالج هذا التغيير خطأ في بروتوكول Delta Lake حيث لم يتم تجميع الإحصائيات للأعمدة بسبب عدم تطابق في DataFrame وترتيب عمود الجدول. في بعض الحالات، قد تواجه انخفاض أداء الكتابة بسبب مجموعة الإحصائيات في الحقول التي لم يتم تعقبها مسبقا. راجع تخطي البيانات ل Delta Lake.
يطرح applyInPandasWithState خطأ إذا كان الاستعلام يحتوي على تبديل عشوائي بعد عامل التشغيل
يطرح عامل التشغيل applyInPandasWithState خطأ إذا كان الاستعلام يحتوي shuffle على بعد عامل التشغيل. يحدث هذا عندما يضيف shuffle المستخدم بعد العملية، أو يضيف shuffle المحسن أو المتلقي ضمنيا.
ترقيات المكتبة
- مكتبات Python التي تمت ترقيتها:
- استياء من 0.3.5 إلى 0.3.6
- مكتبات R التي تمت ترقيتها:
- مكنسة من 1.0.0 إلى 1.0.1
- المتصل من 3.7.1 إلى 3.7.2
- dplyr من 1.0.9 إلى 1.0.10
- dtplyr من 1.2.1 إلى 1.2.2
- forcats من 0.5.1 إلى 0.5.2
- في المستقبل من 1.27.0 إلى 1.28.0
- future.apply من 1.9.0 إلى 1.9.1
- غيرت من 1.7.0 إلى 1.8.0
- globals من 0.16.0 إلى 0.16.1
- gtable من 0.3.0 إلى 0.3.1
- haven من 2.5.0 إلى 2.5.1
- hms من 1.1.1 إلى 1.1.2
- httr من 1.4.3 إلى 1.4.4
- من 1.39 إلى 1.40
- modelr من 0.1.8 إلى 0.1.9
- الركيزة من 1.8.0 إلى 1.8.1
- progressr من 0.10.1 إلى 0.11.0
- readxl من 1.4.0 إلى 1.4.1
- reprex من 2.0.1 إلى 2.0.2
- rlang من 1.0.4 إلى 1.0.5
- rmarkdown من 2.14 إلى 2.16
- RSQLite من 2.2.15 إلى 2.2.16
- rstudioapi من 0.13 إلى 0.14
- rversions من 2.1.1 إلى 2.1.2
- rvest من 1.0.2 إلى 1.0.3
- مقاييس من 1.2.0 إلى 1.2.1
- sparklyr من 1.7.7 إلى 1.7.8
- stringr من 1.4.0 إلى 1.4.1
- البقاء على قيد الحياة من 3.2-13 إلى 3.4-0
- نص صغير من 0.40 إلى 0.41
- viridisLite من 0.4.0 إلى 0.4.1
- مكتبات Java التي تمت ترقيتها:
- com.fasterxml.jackson.core.jackson-annotations من 2.13.3 إلى 2.13.4
- com.fasterxml.jackson.core.jackson-core من 2.13.3 إلى 2.13.4
- com.fasterxml.jackson.core.jackson-databind من 2.13.3 إلى 2.13.4
- com.fasterxml.jackson.dataformat.jackson-dataformat-cbor من 2.13.3 إلى 2.13.4
- com.fasterxml.jackson.datatype.jackson-datatype-joda من 2.13.3 إلى 2.13.4
- com.fasterxml.jackson.datatype.jackson-datatype-jsr310 من 2.13.3 إلى 2.13.4
- com.fasterxml.jackson.module.jackson-module-paranamer من 2.13.3 إلى 2.13.4
- com.fasterxml.jackson.module.jackson-module-scala_2.12 من 2.13.3 إلى 2.13.4
- org.apache.hadoop.hadoop-client-api من 3.3.2-databricks إلى 3.3.4-databricks
- org.apache.hadoop.hadoop-client-runtime من 3.3.2 إلى 3.3.4
- org.apache.orc.orc-core من 1.7.5 إلى 1.7.6
- org.apache.orc.orc-mapreduce من 1.7.5 إلى 1.7.6
- org.apache.orc.orc-shims من 1.7.5 إلى 1.7.6
- org.apache.parquet.parquet-column من 1.12.0-databricks-0004 إلى 1.12.0-databricks-0007
- org.apache.parquet.parquet-common من 1.12.0-databricks-0004 إلى 1.12.0-databricks-0007
- org.apache.parquet.parquet-encoding من 1.12.0-databricks-0004 إلى 1.12.0-databricks-0007
- org.apache.parquet.parquet-format-structures من 1.12.0-databricks-0004 إلى 1.12.0-databricks-0007
- org.apache.parquet.parquet-hadoop من 1.12.0-databricks-0004 إلى 1.12.0-databricks-0007
- org.apache.parquet.parquet-jackson من 1.12.0-databricks-0004 إلى 1.12.0-databricks-0007
- org.glassfish.jersey.containers.jersey-container-servlet من 2.34 إلى 2.36
- org.glassfish.jersey.containers.jersey-container-servlet-core من 2.34 إلى 2.36
- org.glassfish.jersey.core.jersey-client من 2.34 إلى 2.36
- org.glassfish.jersey.core.jersey-common من 2.34 إلى 2.36
- org.glassfish.jersey.core.jersey-server من 2.34 إلى 2.36
- org.glassfish.jersey.inject.jersey-hk2 من 2.34 إلى 2.36
Apache Spark
يتضمن Databricks Runtime 11.3 LTS Apache Spark 3.3.0. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 11.2 (غير مدعوم)، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:
- [SPARK-39957] [WARMFIX] [SC-111425] [CORE] التأخير علىDisconnected لتمكين برنامج التشغيل يتلقى ExecutorExitCode
- [SPARK-39955] [WARMFIX] [SC-111424] [CORE] تحسين عملية LaunchTask لتجنب فشل المرحلة الناجم عن فشل إرسال رسائل LaunchTask
- [SPARK-40474] [SC-106248] [Cherry-Pick] تصحيح سلوك استنتاج مخطط CSV لأعمدة التاريخ والوقت وتقديم الكشف التلقائي لحقول التاريخ
- [SPARK-40535] [SC-111243] [SQL] إصلاح الخطأ لن يتم إنشاء المخزن المؤقت ل AggregatingAccumulator إذا كانت صفوف الإدخال فارغة
- [SPARK-40434] [SC-111125] [SC-111144] [SC-111138] [SPARK-40435] [11.3] [SS] [PYTHON] تنفيذ applyInPandasWithState في PySpark
- [SPARK-40460] [SC-110832] [SS] إصلاح مقاييس الدفق عند تحديد
_metadata - [SPARK-40324] [SC-109943] [SQL] توفير سياق استعلام ل
ParseException - [SPARK-40466] [SC-110899] [SS] تحسين رسالة الخطأ عند تعطيل DSv2 أثناء عدم توفر DSv1
- [SPARK-40456] [SC-110848] [SQL] يجب أن يكون PartitionIterator.hasNext رخيصة للاتصال بشكل متكرر
- [SPARK-40169] [SC-110772] [SQL] عدم الضغط على عوامل تصفية Parquet بدون أي مرجع إلى مخطط البيانات
- [SPARK-40467] [SC-110759] [SS] تقسيم FlatMapGroupsWithState إلى مجموعات اختبار متعددة
- [SPARK-40468] [SC-110813] [SQL] إصلاح تشذيب العمود في CSV عند تحديد _corrupt_record
- [SPARK-40291] [SC-110085] [SQL] تحسين الرسالة للعمود غير الموجود في خطأ عبارة تجميع حسب
- [SPARK-40398] [SC-110762] [CORE] [SQL] استخدام التكرار الحلقي بدلا من Arrays.stream api
- [SPARK-40433] [SC-110684] [SS] [PYTHON] أضف إلىJVMRow في PythonSQLUtils لتحويل صف PySpark المخلل إلى صف JVM
- [SPARK-40414] [SC-110568] [SQL] [PYTHON] نوع أكثر عمومية على PythonArrowInput وPythonArrowOutput
- [SPARK-40352] [SC-109945] [SQL] إضافة أسماء مستعارة للدالة: len و datepart و dateadd و date_diff و curdate
- [SPARK-40470] [SC-110761] [SQL] معالجة GetArrayStructFields و GetMapValue في دالة "arrays_zip"
- [SPARK-40387] [SC-110685] [SQL] تحسين تنفيذ Spark Decimal
- [SPARK-40429] [SC-110675] [SQL] تعيين KeyGroupedPartitioning فقط عندما يكون العمود المشار إليه في الإخراج
- [SPARK-40432] [SC-110716] [SS] [PYTHON] تقديم GroupStateImpl وGroupStateTimeout في PySpark
- [SPARK-39915] [SC-110496] [SQL] تأكد من تحديد المستخدم لتقسيم الإخراج في AQE
- [SPARK-29260] [SQL] الدعم
ALTER DATABASE SET LOCATIONإذا كان HMS يدعم - [SPARK-40185] [SC-110056] [SQL] إزالة اقتراح العمود عندما تكون قائمة المرشحين فارغة
- [SPARK-40362] [SC-110401] [SQL] إصلاح المتعارف عليه في BinaryComparison
- [SPARK-40411] [SC-110381] [SS] إعادة بناء التعليمات البرمجية FlatMapGroupsWithStateExec ليكون لها سمة أصل
- [SPARK-40293] [SC-110084] [SQL] جعل رسالة خطأ الجدول V2 أكثر معنى
- [SPARK-38734] [SC-110383] [SQL] إزالة فئة الخطأ
INDEX_OUT_OF_BOUNDS - [SPARK-40292] [SC-110300] [SQL] إصلاح أسماء الأعمدة في الدالة "arrays_zip" عند الإشارة إلى الصفائف من البنيات المتداخلة
- [SPARK-40276] [SC-109674] [CORE] تقليل حجم نتيجة RDD.takeOrdered
- [SPARK-40197] [SC-109176] [SQL] استبدال خطة الاستعلام بسياق MULTI_VALUE_SUBQUERY_ERROR
- [SPARK-40300] [SC-109942] [SQL] الترحيل إلى
DATATYPE_MISMATCHفئة الخطأ - [SPARK-40149] [SC-110055] [SQL] نشر أعمدة بيانات التعريف من خلال Project
- [SPARK-40280] [SC-110146] [SQL] إضافة دعم للدفع لأسفل parquet لل int مشروح وطويل
- [SPARK-40220] [SC-110143] [SC-109175] [SQL] عدم إخراج الخريطة الفارغة لمعلمات رسالة الخطأ
- [SPARK-40295] [SC-110070] [SQL] السماح بوظائف v2 مع args الحرفية في توزيع/ترتيب الكتابة
- [SPARK-40156] [SC-109264] [SQL]
url_decode()يجب أن ترجع فئة خطأ - [SPARK-39195] [SQL] يجب أن يجهض Spark OutputCommitCoordinator المرحلة عندما يكون الملف الملتزم به غير متناسق مع حالة المهمة
- [SPARK-40260] [SC-109424] [SQL] استخدام فئات الخطأ في أخطاء التحويل البرمجي لموضع GROUP BY
- [SPARK-40205] [SC-110144] [SC-109082] [SQL] توفير سياق استعلام ELEMENT_AT_BY_INDEX_ZERO
- [SPARK-40112] [SC-109676] [SQL] تحسين الدالة TO_BINARY()
- [SPARK-40209] [SC-109081] [SQL] لا تغير قيمة الفاصل الزمني للعدد العشري في
changePrecision()عند حدوث أخطاء - [SPARK-40319] [SC-109873] [SQL] إزالة أسلوب خطأ تنفيذ الاستعلام المكرر PARSE_DATETIME_BY_NEW_PARSER
- [SPARK-40222] [SC-109209] [SQL] يجب أن يطرح try_add/try_divide/try_subtract/try_multiply الرقمية خطأ من أطفالهم
- [SPARK-40183] [SC-108907] [SQL] استخدام NUMERIC_VALUE_OUT_OF_RANGE فئة الخطأ للتجاوز في التحويل العشري
- [SPARK-40180] [SC-109069] [SQL] تنسيق رسائل الخطأ حسب
spark-sql - [SPARK-40153] [SC-109165] [SQL] توحيد دالات الحل والدالات ذات القيمة الجدولية
- [SPARK-40308] [SC-109880] [SQL] السماح لوسائط المحدد غير القابلة للطي بالوظيفة
str_to_map - [SPARK-40219] [SC-110052] [SC-109663] [SQL] يجب أن تحتوي الخطة المنطقية للعرض الذي تم حله على المخطط لتجنب البحث المتكرر
- [SPARK-40098] [SC-109939] [SC-108693] [SQL] تنسيق رسائل الخطأ في Thrift Server
- [SPARK-39917] [SC-109038] [SQL] استخدام فئات خطأ مختلفة للتجاوز الحسابي الرقمي/الفاصل الزمني
- [SPARK-40033] [SC-109875] [SQL] دعم تنقيح المخطط المتداخل من خلال element_at
- [SPARK-40194] [SC-109660] [SQL] يجب أن تقوم الدالة SPLIT على regex الفارغة باقتطاع سلسلة فارغة لاحقة.
- [SPARK-40228] [SC-109835] [SQL] لا تبسط multiLike إذا لم يكن الطفل تعبيرا رخيصة
- [SPARK-40039] [SC-109896] [SC-109260] [SS] تقديم مدير ملفات نقطة التحقق المتدفقة استنادا إلى واجهة Hadoop القابلة للاجهاض
- [SPARK-40285] [SC-109679] [SQL]
roundTo[Numeric]تبسيط ل SparkDecimal - [SPARK-39896] [SC-109658] [SQL] يجب أن يعمل UnwrapCastInBinaryComparison عند فشل القيمة الحرفية ل In/InSet downcast
- [SPARK-40040] [SC-109662] [SQL] دفع الحد المحلي إلى كلا الجانبين إذا كان شرط الانضمام فارغا
- [SPARK-40055] [SC-109075] [SQL] يجب أن ترجع listCatalogs أيضا spark_catalog حتى عندما يكون تنفيذ spark_catalog هو defaultSessionCatalog
- [SPARK-39915] [SC-109391] [SQL] قد لا تقوم Dataset.repartition(N) بإنشاء أجزاء N غير AQE
- [SPARK-40207] [SC-109401] [SQL] حدد اسم العمود عندما لا يكون نوع البيانات معتمدا من قبل مصدر البيانات
- [SPARK-40245] [SC-109295] [SQL] إصلاح التحقق من المساواة FileScan عند عدم قراءة أعمدة تصفية الأقسام أو البيانات
- [SPARK-40113] [SC-109405] [SQL] تطبيقات واجهة Reactor ParquetScanBuilder DataSourceV2
- [SPARK-40211] [SC-109226] [CORE] [SQL] السماح بتخصيص رقم الأقسام الأولية في سلوك take()
- [SPARK-40252] [SC-109379] [SQL] استبدال
Stream.collect(Collectors.joining)بواجهةStringJoinerبرمجة التطبيقات - [SPARK-40247] [SC-109272] [SQL] إصلاح التحقق من المساواة في BitSet
- [SPARK-40067] [SQL] استخدم Table#name() بدلا من Scan#name() لملء اسم الجدول في عقدة BatchScan في SparkUI
- [SPARK-39966] [SQL] استخدام عامل تصفية V2 في SupportsDelete
- [SPARK-39607] [SC-109268] [SQL] [DSV2] يدعم التوزيع وترتيب الدالة V2 كتابة
- [SPARK-40224] [SC-109271] [SQL] جعل ObjectHashAggregateExec يصدر الذاكرة بفارغ الصبر عند الرجوع إلى القائمة على الفرز
- [SPARK-40013] [SQL] يجب أن يكون لتعبيرات DS V2 الافتراضية
toString - [SPARK-40214] [SC-109079] [PYTHON] [SQL] إضافة "get" إلى الوظائف
- [SPARK-40192] [SC-109089] [SQL] [ML] إزالة المجموعة الزائدة عن الحاجة
- [SPARK-40146] [SC-108694] [SQL] ببساطة codegen للحصول على قيمة الخريطة
- [SPARK-40109] [SQL] دالة SQL جديدة: get()
- [SPARK-39929] [SQL] يدعم DS V2 دفع دالات السلسلة لأسفل (غير ANSI)
- [SPARK-39819] [SQL] يمكن أن يعمل الدفع التجميعي DS V2 مع Top N أو Paging (فرز مع التعبيرات)
- [SPARK-40213] [SC-109077] [SQL] دعم تحويل قيمة ASCII للأحرف اللاتينية 1
- [SPARK-39887] [SQL] يجب أن تحتفظ RemoveRedundantAliases بأسماء مستعارة تجعل إخراج عقد الإسقاط فريدا
- [SPARK-39764] [SQL] جعل عملية فعلية مماثلة ل ScanOperation
- [SPARK-39964] [SQL] يجب أن تعمل عملية الدفع DS V2 على توحيد مسار الترجمة
- [SPARK-39528] [SQL] استخدام عامل تصفية V2 في SupportsRuntimeFiltering
- [SPARK-40066] [SQL] وضع ANSI: إرجاع القيمة الفارغة دائما عند الوصول غير الصالح إلى عمود الخريطة
- [SPARK-39912] [SPARK-39828] [SQL] تحسين CatalogImpl
- [SPARK-39833] [SC-108736] [SQL] تعطيل فهرس عمود Parquet في DSv1 لإصلاح مشكلة تصحيح في حالة تداخل الأقسام وأعمدة البيانات
- [SPARK-39880] [SQL] يجب أن يطبع الأمر V2 SHOW FUNCTIONS اسم الدالة المؤهلة مثل v1
- [SPARK-39767] [SQL] إزالة اسم كائن ثنائي كبير الحجم لم يتم حله وإضافة معرف غير محلول
- [SPARK-40163] [SC-108740] [SQL] feat: SparkSession.config(Map)
- [SPARK-40136] [SQL] إصلاح جزء سياقات استعلام SQL
- [SPARK-40107] [SC-108689] [SQL] سحب التحويل الفارغ2null من FileFormatWriter
- [SPARK-40121] [PYTHON] [SQL] تهيئة الإسقاط المستخدم ل Python UDF
- [SPARK-40128] [SQL] جعل VectorizedColumnReader يتعرف على DELTA_LENGTH_BYTE_ARRAY كترميز عمود مستقل
- [SPARK-40132] [ML] استعادة rawPredictionCol إلى MultilayerPerceptronClassifier.setParams
- [SPARK-40050] [SC-108696] [SQL] تحسين
EliminateSortsلدعم إزالة الفرز عبرLocalLimit - [SPARK-39629] [SQL] دعم v2 SHOW FUNCTIONS
- [SPARK-39925] [SC-108734] [SQL] إضافة تحميل زائد array_sort (عمود، مقارن) إلى عمليات DataFrame
- [SPARK-40117] [PYTHON] [SQL] تحويل الشرط إلى java في DataFrameWriterV2.overwrite
- [SPARK-40105] [SQL] تحسين إعادة الجزاء في ReplaceCTERefWithRepartition
- [SPARK-39503] [SQL] إضافة اسم كتالوج جلسة العمل لجدول ودالة قاعدة البيانات v1
- [SPARK-39889] [SQL] استخدام فئات خطأ مختلفة للفاصل الرقمي/الفاصل الزمني مقسوما على 0
- [SPARK-39741] [SQL] دعم ترميز/فك ترميز url كدالة مضمنة ووظائف مرتبطة ب url مرتبة
- [SPARK-40102] [SQL] استخدام SparkException بدلا من IllegalStateException في SparkPlan
- [SPARK-40014] [SQL] دعم تحويل المنازل العشرية إلى فواصل ANSI
- [SPARK-39776] [SQL] [متابعة] تحديث UT من PlanStabilitySuite في وضع ANSI
- [SPARK-39963] [SQL] تبسيط
SimplifyCasts.isWiderCast
تحديثات الصيانة
راجع تحديثات صيانة Databricks Runtime 11.3.
بيئة النظام
- نظام التشغيل: Ubuntu 20.04.5 LTS
- Java: Zulu 8.56.0.21-CA-linux64
- Scala: 2.12.14
- Python: 3.9.5
- R: 4.1.3
- Delta Lake: 2.1.0
مكتبات Python المثبتة
| مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
|---|---|---|---|---|---|
| argon2-cffi | 20.1.0 | مولد غير متزامن | 1.10 | سلاسل السلاسل | 21.2.0 |
| تثبيت خلفي | 0.2.0 | backports.entry-points-selectable | 1.1.1 | black | 22.3.0 |
| التبييض | 4.0.0 | boto3 | 1.21.18 | روبوت الدردشة | 1.24.18 |
| شهادة | 2021.10.8 | cffi | 1.14.6 | تجزئة | 4.0.0 |
| charset-normalizer | 2.0.4 | انقر فوق | 8.0.3 | التشفير | 3.4.8 |
| دورة | 0.10.0 | Cython | 0.29.24 | dbus-python | 1.2.16 |
| تصحيح الأخطاء | 1.4.1 | ديكور | 5.1.0 | defusedxml | 0.7.1 |
| استياء | 0.3.6 | نقاط الإدخال | 0.3 | نظرة عامة على الواجهات | 1.0.0 |
| قفل الملف | 3.8.0 | idna | 3.2 | ipykernel | 6.12.1 |
| ipython | 7.32.0 | ipython-genutils | 0.2.0 | عناوين ipywidgets | 7.7.0 |
| جدي | 0.18.0 | جينجا 2 | 2.11.3 | مسار jmespath | 0.10.0 |
| joblib | 1.0.1 | jsonschema | 3.2.0 | jupyter-client | 6.1.12 |
| jupyter-core | 4.8.1 | jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 |
| kiwisolver | 1.3.1 | العلامات خزينة | 2.0.1 | matplotlib | 3.4.3 |
| matplotlib-inline | 0.1.2 | سوء الحظ | 0.8.4 | mypy-extensions | 0.4.3 |
| nbclient | 0.5.3 | nbconvert | 6.1.0 | تنسيق nbformat | 5.1.3 |
| nest-asyncio | 1.5.1 | notebook | 6.4.5 | numpy | 1.20.3 |
| التغليف | 21.0 | pandas | 1.3.4 | عوامل تصفية pandocfilter | 1.4.3 |
| parso | 0.8.2 | pathspec | 0.9.0 | باتسي | 0.5.2 |
| pexpect | 4.8.0 | pickleshare | 0.7.5 | وساده | 8.4.0 |
| pip | 21.2.4 | المنصات | 2.5.2 | بشكل مخطط | 5.9.0 |
| prometheus-client | 0.11.0 | مجموعة أدوات المطالبة | 3.0.20 | protobuf | 4.21.5 |
| psutil | 5.8.0 | psycopg2 | 2.9.3 | عملية ptyprocess | 0.7.0 |
| pyarrow | 7.0.0 | pycparser | 2.20 | Pygments | 2.10.0 |
| PyGObject | 3.36.0 | pyodbc | 4.0.31 | pyparsing | 3.0.4 |
| pyrsistent | 0.18.0 | python-dateutil | 2.8.2 | pytz | 2021.3 |
| pyzmq | 22.2.1 | الطلبات | 2.26.0 | requests-unixsocket | 0.2.0 |
| s3transfer | 0.5.2 | scikit-learn | 0.24.2 | شفرة | 1.7.1 |
| بحر محمول | 0.11.2 | Send2Trash | 1.8.0 | أدوات الإعداد | 58.0.4 |
| ستة | 1.16.0 | ssh-import-id | 5.10 | نماذج الإحصائيات | 0.12.2 |
| مثابره | 8.0.1 | terminado | 0.9.4 | مسار الاختبار | 0.5.0 |
| threadpoolctl | 2.2.0 | tokenize-rt | 4.2.1 | tomli | 2.0.1 |
| اعصار | 6.1 | سمات السمات | 5.1.0 | ملحقات الكتابة | 3.10.0.2 |
| ترقيات غير مراقبة | 0.1 | urllib3 | 1.26.7 | virtualenv | 20.8.0 |
| wcwidth | 0.2.5 | ترميزات الويب | 0.5.1 | عجله | 0.37.0 |
| عنصر واجهة المستخدم | 3.6.0 |
مكتبات R المثبتة
يتم تثبيت مكتبات R من لقطة Microsoft CRAN على 2022-09-08.
| مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
|---|---|---|---|---|---|
| askpass | 1.1 | assertthat | 0.2.1 | backports | 1.4.1 |
| الأساس | 4.1.3 | base64enc | 0.1-3 | بت | 4.0.4 |
| bit64 | 4.0.5 | كائن ثنائي كبير الحجم | 1.2.3 | boot | 1.3-28 |
| المشروب | 1.0-7 | بريو | 1.1.3 | broom | 1.0.1 |
| bslib | 0.4.0 | ذاكرة التخزين المؤقت | 1.0.6 | callr | 3.7.2 |
| علامة إقحام | 6.0-93 | cellranger | 1.1.0 | كرون | 2.3-57 |
| فئة | 7.3-20 | cli | 3.3.0 | clipr | 0.8.0 |
| نظام مجموعة | 2.1.3 | codetools | 0.2-18 | colorspace | 2.0-3 |
| العلامة الشائعة | 1.8.0 | compiler | 4.1.3 | config | 0.3.1 |
| cpp11 | 0.4.2 | crayon | 1.5.1 | بيانات الاعتماد | 1.3.2 |
| curl | 4.3.2 | data.table | 1.14.2 | مجموعات البيانات | 4.1.3 |
| DBI | 1.1.3 | dbplyr | 2.2.1 | تنازلي | 1.4.1 |
| devtools | 2.4.4 | diffobj | 0.3.5 | digest | 0.6.29 |
| إضاءة هابطة | 0.4.2 | dplyr | 1.0.10 | dtplyr | 1.2.2 |
| e1071 | 1.7-11 | علامة الحذف | 0.3.2 | التقييم | 0.16 |
| fansi | 1.0.3 | مسافة بعيدة | 2.1.1 | خريطة سريعة | 1.1.0 |
| fontawesome | 0.3.0 | forcats | 0.5.2 | Foreach | 1.5.2 |
| foreign | 0.8-82 | صياغه | 0.2.0 | fs | 1.5.2 |
| future | 1.28.0 | future.apply | 1.9.1 | الغرغره | 1.2.0 |
| generics | 0.1.3 | غيرت | 1.8.0 | ggplot2 | 3.3.6 |
| غ | 1.3.0 | صور gitcred | 0.1.1 | glmnet | 4.1-4 |
| Globals | 0.16.1 | glue | 1.6.2 | googledrive | 2.0.0 |
| googlesheets4 | 1.0.1 | gower | 1.0.0 | graphics | 4.1.3 |
| grDevices | 4.1.3 | grid | 4.1.3 | gridExtra | 2.3 |
| gsubfn | 0.7 | gtable | 0.3.1 | هاردات | 1.2.0 |
| haven | 2.5.1 | highr | 0.9 | hms | 1.1.2 |
| htmltools | 0.5.3 | htmlwidgets | 1.5.4 | httpuv | 1.6.5 |
| httr | 1.4.4 | ids | 1.0.1 | Ini | 0.3.1 |
| ipred | 0.9-13 | isoband | 0.2.5 | iterators | 1.0.14 |
| jquerylib | 0.1.4 | jsonlite | 1.8.0 | KernSmooth | 2.23-20 |
| knitr | 1.40 | labeling | 0.4.2 | لاحقا | 1.3.0 |
| lattice | 0.20-45 | lava | 1.6.10 | دورة الحياة | 1.0.1 |
| listenv | 0.8.0 | lubridate | 1.8.0 | magrittr | 2.0.3 |
| markdown | 1.1 | MASS | 7.3-56 | مصفوفة | 1.4-1 |
| المذكرة | 2.0.1 | الأساليب | 4.1.3 | mgcv | 1.8-40 |
| mime | 0.12 | واجهة مستخدم مصغرة | 0.1.1.1 | ModelMetrics | 1.2.2.2 |
| modelr | 0.1.9 | munsell | 0.5.0 | nlme | 3.1-157 |
| nnet | 7.3-17 | numDeriv | 2016.8-1.1 | openssl | 2.0.2 |
| parallel | 4.1.3 | بالتوازي | 1.32.1 | pillar | 1.8.1 |
| pkgbuild | 1.3.1 | pkgconfig | 2.0.3 | pkgdown | 2.0.6 |
| pkgload | 1.3.0 | plogr | 0.2.0 | plyr | 1.8.7 |
| الثناء | 1.0.0 | prettyunits | 1.1.1 | بروك | 1.18.0 |
| processx | 3.7.0 | prodlim | 2019.11.13 | ملفات تعريفية | 0.3.7 |
| التقدم | 1.2.2 | متدرج التقدم | 0.11.0 | وعود | 1.2.0.1 |
| proto | 1.0.0 | الوكيل | 0.4-27 | ps | 1.7.1 |
| purrr | 0.3.4 | r2d3 | 0.2.6 | R6 | 2.5.1 |
| رعوج | 1.2.2 | randomForest | 4.7-1.1 | طيور الراب | 0.3.3 |
| rcmdcheck | 1.4.0 | RColorBrewer | 1.1-3 | Rcpp | 1.0.9 |
| RcppEigen | 0.3.3.9.2 | readr | 2.1.2 | readxl | 1.4.1 |
| recipes | 1.0.1 | rematch | 1.0.1 | إعادة المباراة2 | 2.1.2 |
| Remotes | 2.4.2 | reprex | 2.0.2 | reshape2 | 1.4.4 |
| rlang | 1.0.5 | rmarkdown | 2.16 | RODBC | 1.3-19 |
| roxygen2 | 7.2.1 | rpart | 4.1.16 | rprojroot | 2.0.3 |
| Rserve | 1.8-11 | RSQLite | 2.2.16 | rstudioapi | 0.14 |
| تحويلات | 2.1.2 | rvest | 1.0.3 | ساس | 0.4.2 |
| scales | 1.2.1 | selectr | 0.4-2 | معلومات الجلسة | 1.2.2 |
| الشكل | 1.4.6 | لامعه | 1.7.2 | قوالب المصدر | 0.1.7 |
| sparklyr | 1.7.8 | سبارك | 3.3.0 | spatial | 7.3-11 |
| splines | 4.1.3 | sqldf | 0.4-11 | SQUAREM | 2021.1 |
| stats | 4.1.3 | stats4 | 4.1.3 | stringi | 1.7.8 |
| stringr | 1.4.1 | survival | 3.4-0 | sys | 3.4 |
| الشبكات الأساسية للنظام | 1.0.4 | tcltk | 4.1.3 | اختبار الذي | 3.1.4 |
| تشكيل النص | 0.3.6 | tibble | 3.1.8 | tidyr | 1.2.0 |
| tidyselect | 1.1.2 | tidyverse | 1.3.2 | timeDate | 4021.104 |
| tinytex | 0.41 | الأدوات | 4.1.3 | tzdb | 0.3.0 |
| محدد موقع المعلومات (urlchecker) | 1.0.1 | استخدام هذا | 2.1.6 | utf8 | 1.2.2 |
| utils | 4.1.3 | uuid | 1.1-0 | vctrs | 0.4.1 |
| viridisLite | 0.4.1 | غرفة vroom | 1.5.7 | والدو | 0.4.0 |
| whisker | 0.4 | withr | 2.5.0 | xfun | 0.32 |
| xml2 | 1.3.3 | xopen | 1.0.0 | xtable | 1.8-4 |
| yaml | 2.3.5 | zip | 2.2.0 |
مكتبات Java و Scala المثبتة (إصدار مجموعة Scala 2.12)
| معرف مجموعة | معرف البيانات الاصطناعية | إصدار |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.12.0 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.12.189 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.12.189 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.12.189 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.12.189 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.12.189 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.12.189 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.12.189 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.189 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.12.189 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.189 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.12.189 |
| com.amazonaws | aws-java-sdk-config | 1.12.189 |
| com.amazonaws | aws-java-sdk-core | 1.12.189 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.12.189 |
| com.amazonaws | aws-java-sdk-directconnect | 1.12.189 |
| com.amazonaws | aws-java-sdk-directory | 1.12.189 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.12.189 |
| com.amazonaws | aws-java-sdk-ec2 | 1.12.189 |
| com.amazonaws | aws-java-sdk-ecs | 1.12.189 |
| com.amazonaws | aws-java-sdk-efs | 1.12.189 |
| com.amazonaws | aws-java-sdk-elasticache | 1.12.189 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.189 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.189 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.189 |
| com.amazonaws | aws-java-sdk-emr | 1.12.189 |
| com.amazonaws | aws-java-sdk-glacier | 1.12.189 |
| com.amazonaws | aws-java-sdk-glue | 1.12.189 |
| com.amazonaws | aws-java-sdk-iam | 1.12.189 |
| com.amazonaws | aws-java-sdk-importexport | 1.12.189 |
| com.amazonaws | aws-java-sdk-kinesis | 1.12.189 |
| com.amazonaws | aws-java-sdk-kms | 1.12.189 |
| com.amazonaws | aws-java-sdk-lambda | 1.12.189 |
| com.amazonaws | aws-java-sdk-logs | 1.12.189 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.12.189 |
| com.amazonaws | aws-java-sdk-opsworks | 1.12.189 |
| com.amazonaws | aws-java-sdk-rds | 1.12.189 |
| com.amazonaws | aws-java-sdk-redshift | 1.12.189 |
| com.amazonaws | aws-java-sdk-route53 | 1.12.189 |
| com.amazonaws | aws-java-sdk-s3 | 1.12.189 |
| com.amazonaws | aws-java-sdk-ses | 1.12.189 |
| com.amazonaws | aws-java-sdk-simpledb | 1.12.189 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.189 |
| com.amazonaws | aws-java-sdk-sns | 1.12.189 |
| com.amazonaws | aws-java-sdk-sqs | 1.12.189 |
| com.amazonaws | aws-java-sdk-ssm | 1.12.189 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.12.189 |
| com.amazonaws | aws-java-sdk-sts | 1.12.189 |
| com.amazonaws | دعم aws-java-sdk | 1.12.189 |
| com.amazonaws | مكتبات aws-java-sdk-swf | 1.11.22 |
| com.amazonaws | مساحات عمل aws-java-sdk | 1.12.189 |
| com.amazonaws | jmespath-java | 1.12.189 |
| com.chuusai | shapeless_2.12 | 2.3.3 |
| com.clearspring.analytics | تيار | 2.9.6 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
| com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
| com.esotericsoftware | kryo مظلل | 4.0.2 |
| com.esotericsoftware | سجل الحد الأدنى | 1.3.0 |
| com.fasterxml | زميل | 1.3.4 |
| com.fasterxml.jackson.core | التعليقات التوضيحية ل جاكسون | 2.13.4 |
| com.fasterxml.jackson.core | جاكسون النواة | 2.13.4 |
| com.fasterxml.jackson.core | جاكسون-databind | 2.13.4 |
| com.fasterxml.jackson.dataformat | جاكسون-dataformat-cbor | 2.13.4 |
| com.fasterxml.jackson.datatype | جاكسون-datatype-joda | 2.13.4 |
| com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.13.4 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.13.4 |
| com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.13.4 |
| com.github.ben-manes.كافيين | الكافيين | 2.3.4 |
| com.github.fommil | أداة تحميل jniloader | 1.1 |
| com.github.fommil.netlib | الذاكرة الأساسية | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_system-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.luben | zstd-jni | 1.5.2-1 |
| com.github.wendykierp | JTransforms | 3.1 |
| com.google.code.findbugs | jsr305 | 3.0.0 |
| com.google.code.gson | gson | 2.8.6 |
| com.google.crypto.tink | تينك | 1.6.1 |
| com.google.flatbuffers | flatbuffers-java | 1.12.0 |
| com.google.guava | الجوافه | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.h2database | h2 | 2.0.204 |
| com.helger | profiler | 1.1.1 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | cp عظمي | 0.8.0.RELEASE |
| com.lihaoyi | sourcecode_2.12 | 0.1.9 |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
| com.microsoft.sqlserver | mssql-jdbc | 9.2.1.jre8 |
| com.ning | ضغط lzf | 1.1 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.tdunning | json | 1.8 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
| com.twitter | برد-java | 0.10.0 |
| com.twitter | chill_2.12 | 0.10.0 |
| com.twitter | util-app_2.12 | 7.1.0 |
| com.twitter | util-core_2.12 | 7.1.0 |
| com.twitter | util-function_2.12 | 7.1.0 |
| com.twitter | util-jvm_2.12 | 7.1.0 |
| com.twitter | util-lint_2.12 | 7.1.0 |
| com.twitter | util-registry_2.12 | 7.1.0 |
| com.twitter | util-stats_2.12 | 7.1.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
| com.uber | h3 | 3.7.0 |
| com.univocity | محللات أحادية التكافؤ | 2.9.1 |
| com.zaxxer | HikariCP | 4.0.3 |
| commons-cli | commons-cli | 1.5.0 |
| commons-codec | commons-codec | 1.15 |
| المجموعات المشتركة | المجموعات المشتركة | 3.2.2 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-fileupload | commons-fileupload | 1.3.3 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.11.0 |
| commons-lang | commons-lang | 2.6 |
| تسجيل المشتركات | تسجيل المشتركات | 1.1.3 |
| تجمع مشترك | تجمع مشترك | 1.5.4 |
| dev.ludovic.netlib | arpack | 2.2.1 |
| dev.ludovic.netlib | بلاس | 2.2.1 |
| dev.ludovic.netlib | lapack | 2.2.1 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
| io.airlift | أداة ضغط الهواء | 0.21 |
| io.delta | delta-sharing-spark_2.12 | 0.5.1 |
| io.dropwizard.metrics | metrics-core | 4.1.1 |
| io.dropwizard.metrics | metrics-graphite | 4.1.1 |
| io.dropwizard.metrics | المقاييس-الفحوصات الصحية | 4.1.1 |
| io.dropwizard.metrics | metrics-jetty9 | 4.1.1 |
| io.dropwizard.metrics | metrics-jmx | 4.1.1 |
| io.dropwizard.metrics | metrics-json | 4.1.1 |
| io.dropwizard.metrics | metrics-jvm | 4.1.1 |
| io.dropwizard.metrics | metrics-servlets | 4.1.1 |
| io.netty | netty-all | 4.1.74.Final |
| io.netty | netty-buffer | 4.1.74.Final |
| io.netty | netty-codec | 4.1.74.Final |
| io.netty | netty-common | 4.1.74.Final |
| io.netty | معالج netty | 4.1.74.Final |
| io.netty | محلل netty | 4.1.74.Final |
| io.netty | netty-tcnative-classes | 2.0.48.Final |
| io.netty | netty-transport | 4.1.74.Final |
| io.netty | netty-transport-classes-epoll | 4.1.74.Final |
| io.netty | netty-transport-classes-kqueue | 4.1.74.Final |
| io.netty | netty-transport-native-epoll-linux-aarch_64 | 4.1.74.Final |
| io.netty | netty-transport-native-epoll-linux-x86_64 | 4.1.74.Final |
| io.netty | netty-transport-native-kqueue-osx-aarch_64 | 4.1.74.Final |
| io.netty | netty-transport-native-kqueue-osx-x86_64 | 4.1.74.Final |
| io.netty | netty-transport-native-unix-common | 4.1.74.Final |
| io.prometheus | واجهة سطر الأوامر البسيطة | 0.7.0 |
| io.prometheus | simpleclient_common | 0.7.0 |
| io.prometheus | simpleclient_dropwizard | 0.7.0 |
| io.prometheus | simpleclient_pushgateway | 0.7.0 |
| io.prometheus | simpleclient_servlet | 0.7.0 |
| io.prometheus.jmx | جامع | 0.12.0 |
| jakarta.annotation | jakarta.annotation-api | 1.3.5 |
| jakarta.servlet | jakarta.servlet-api | 4.0.3 |
| jakarta.validation | jakarta.validation-api | 2.0.2 |
| jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
| javax.activation | التنشيط | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.3.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.transaction | jta | 1.1 |
| javax.transaction | واجهة برمجة تطبيقات المعاملات | 1.1 |
| javax.xml.bind | jaxb-api | 2.2.11 |
| التفاف دائري | التفاف دائري | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.10.13 |
| net.java.dev.jna | jna | 5.8.0 |
| net.razorvine | المخلل | 1.2 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.6 |
| net.snowflake | snowflake-jdbc | 3.13.14 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | وقت تشغيل antlr | 3.5.2 |
| org.antlr | وقت تشغيل antlr4 | 4.8 |
| org.antlr | سلسلة قوالب | 3.2.1 |
| org.apache.ant | النمل | 1.9.2 |
| org.apache.ant | نملة-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.سهم | تنسيق السهم | 7.0.0 |
| org.apache.سهم | ذاكرة أساسية للسهم | 7.0.0 |
| org.apache.سهم | سهم-ذاكرة-netty | 7.0.0 |
| org.apache.سهم | خط متجه للسهم | 7.0.0 |
| org.apache.avro | افرو | 1.11.0 |
| org.apache.avro | avro-ipc | 1.11.0 |
| org.apache.avro | avro-mapred | 1.11.0 |
| org.apache.commons | commons-collections4 | 4.4 |
| org.apache.commons | ضغط الشائعات | 1.21 |
| org.apache.commons | commons-crypto | 1.1.0 |
| org.apache.commons | commons-lang3 | 3.12.0 |
| org.apache.commons | commons-math3 | 3.6.1 |
| org.apache.commons | commons-text | 1.9 |
| org.apache.curator | عميل أمين | 2.13.0 |
| org.apache.curator | إطار عمل أمين | 2.13.0 |
| org.apache.curator | وصفات أمين | 2.13.0 |
| org.apache.derby | ديربي | 10.14.2.0 |
| org.apache.hadoop | hadoop-client-api | 3.3.4-databricks |
| org.apache.hadoop | وقت تشغيل عميل hadoop | 3.3.4 |
| org.apache.hive | hive-beeline | 2.3.9 |
| org.apache.hive | hive-cli | 2.3.9 |
| org.apache.hive | hive-jdbc | 2.3.9 |
| org.apache.hive | عميل hive-llap | 2.3.9 |
| org.apache.hive | hive-llap-common | 2.3.9 |
| org.apache.hive | hive-serde | 2.3.9 |
| org.apache.hive | hive-shims | 2.3.9 |
| org.apache.hive | hive-storage-api | 2.7.2 |
| org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
| org.apache.hive.shims | hive-shims-common | 2.3.9 |
| org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
| org.apache.httpcomponents | httpclient | 4.5.13 |
| org.apache.httpcomponents | httpcore | 4.4.14 |
| org.apache.ivy | اللبلاب | 2.5.0 |
| org.apache.logging.log4j | log4j-1.2-api | 2.18.0 |
| org.apache.logging.log4j | log4j-api | 2.18.0 |
| org.apache.logging.log4j | log4j-core | 2.18.0 |
| org.apache.logging.log4j | log4j-slf4j-impl | 2.18.0 |
| org.apache.mesos | mesos-shaded-protobuf | 1.4.0 |
| org.apache.orc | orc-core | 1.7.6 |
| org.apache.orc | orc-mapreduce | 1.7.6 |
| org.apache.orc | orc-shims | 1.7.6 |
| org.apache.parquet | عمود باركيه | 1.12.0-databricks-0007 |
| org.apache.parquet | parquet-common | 1.12.0-databricks-0007 |
| org.apache.parquet | ترميز باركيه | 1.12.0-databricks-0007 |
| org.apache.parquet | parquet-format-structures | 1.12.0-databricks-0007 |
| org.apache.parquet | parquet-hadoop | 1.12.0-databricks-0007 |
| org.apache.parquet | باركيه جاكسون | 1.12.0-databricks-0007 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.12.0 |
| org.apache.xbean | xbean-asm9-shaded | 4.20 |
| org.apache.yetus | التعليقات التوضيحية للجمهور | 0.5.0 |
| org.apache.zookeeper | zookeeper | 3.6.2 |
| org.apache.zookeeper | zookeeper-jute | 3.6.2 |
| org.checkerframework | مدقق كهومي | 3.5.0 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | جاكسون-mapper-asl | 1.9.13 |
| org.codehaus.janino | محول برمجي مشترك | 3.0.16 |
| org.codehaus.janino | جانينو | 3.0.16 |
| org.datanucleus | datanucleus-api-jdo | 4.2.4 |
| org.datanucleus | datanucleus-core | 4.1.17 |
| org.datanucleus | datanucleus-rdbms | 4.1.19 |
| org.datanucleus | javax.jdo | 3.2.0-m3 |
| org.eclipse.jetty | عميل jetty | 9.4.46.v20220331 |
| org.eclipse.jetty | متابعة jetty | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-http | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-io | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-jndi | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-plus | 9.4.46.v20220331 |
| org.eclipse.jetty | وكيل jetty | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-security | 9.4.46.v20220331 |
| org.eclipse.jetty | خادم jetty | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-servlet | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-servlets | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-util | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-util-ajax | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-webapp | 9.4.46.v20220331 |
| org.eclipse.jetty | jetty-xml | 9.4.46.v20220331 |
| org.eclipse.jetty.websocket | websocket-api | 9.4.46.v20220331 |
| org.eclipse.jetty.websocket | عميل websocket | 9.4.46.v20220331 |
| org.eclipse.jetty.websocket | websocket-common | 9.4.46.v20220331 |
| org.eclipse.jetty.websocket | خادم websocket | 9.4.46.v20220331 |
| org.eclipse.jetty.websocket | websocket-servlet | 9.4.46.v20220331 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.6.1 |
| org.glassfish.hk2 | محدد موقع hk2 | 2.6.1 |
| org.glassfish.hk2 | hk2-utils | 2.6.1 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
| org.glassfish.hk2.external | إعادة حزم الأوبالين | 2.6.1 |
| org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
| org.glassfish.jersey.containers | جيرسي حاوية-servlet | 2.36 |
| org.glassfish.jersey.containers | جيرسي-حاوية-servlet-core | 2.36 |
| org.glassfish.jersey.core | جيرسي-العميل | 2.36 |
| org.glassfish.jersey.core | جيرسي المشتركة | 2.36 |
| org.glassfish.jersey.core | خادم جيرسي | 2.36 |
| org.glassfish.jersey.inject | جيرسي-hk2 | 2.36 |
| org.hibernate.validator | مدقق الإسبات | 6.1.0.Final |
| org.javassist | javassist | 3.25.0-GA |
| org.jboss.logging | تسجيل jboss | 3.3.2.Final |
| org.jdbi | jdbi | 2.63.1 |
| org.jetbrains | التعليقات التوضيحية | 17.0.0 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
| org.json4s | json4s-core_2.12 | 3.7.0-M11 |
| org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
| org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
| org.lz4 | lz4-java | 1.8.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.7.4 |
| org.mlflow | mlflow-spark | 1.27.0 |
| org.objenesis | داء objenesis | 2.5.1 |
| org.postgresql | الانترنت | 42.3.3 |
| org.roaringbitmap | هديرBitmap | 0.9.25 |
| org.roaringbitmap | الحشوات | 0.9.25 |
| org.rocksdb | rocksdbjni | 6.24.2 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.12 | 2.12.14 |
| org.scala-lang | scala-library_2.12 | 2.12.14 |
| org.scala-lang | scala-reflect_2.12 | 2.12.14 |
| org.scala-lang.modules | scala-collection-compat_2.12 | 2.4.3 |
| org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
| org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
| org.scala-sbt | واجهة الاختبار | 1.0 |
| org.scalacheck | scalacheck_2.12 | 1.14.2 |
| org.scalactic | scalactic_2.12 | 3.0.8 |
| org.scalanlp | macros_2.12 | 1.2 |
| org.scalanlp | breeze_2.12 | 1.2 |
| org.scalatest | scalatest_2.12 | 3.0.8 |
| org.slf4j | jcl-over-slf4j | 1.7.36 |
| org.slf4j | jul-to-slf4j | 1.7.36 |
| org.slf4j | slf4j-api | 1.7.36 |
| org.spark-project.spark | غير مستخدم | 1.0.0 |
| org.threeten | ثلاثتين إضافية | 1.5.0 |
| org.tukaani | xz | 1.8 |
| مستوى org.typelevel | algebra_2.12 | 2.0.1 |
| مستوى org.typelevel | cats-kernel_2.12 | 2.1.1 |
| مستوى org.typelevel | ماكرو-compat_2.12 | 1.1.1 |
| مستوى org.typelevel | spire-macros_2.12 | 0.17.0 |
| مستوى org.typelevel | spire-platform_2.12 | 0.17.0 |
| مستوى org.typelevel | spire-util_2.12 | 0.17.0 |
| مستوى org.typelevel | spire_2.12 | 0.17.0 |
| org.wildfly.openssl | wildfly-openssl | 1.0.7.Final |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.8.4 |
| org.yaml | ثعبان الثعبان | 1.24 |
| oro | oro | 2.0.8 |
| pl.edu.icm | JLargeArrays | 1.5 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |