Databricks Runtime 12.0 (EoS)
إشعار
انتهى دعم إصدار وقت تشغيل Databricks هذا. للحصول على تاريخ انتهاء الدعم، راجع محفوظات انتهاء الدعم. لجميع إصدارات وقت تشغيل Databricks المدعومة، راجع إصدارات ملاحظات إصدار Databricks Runtime والتوافق.
توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 12.0، مدعومة من Apache Spark 3.3.1.
أصدرت Databricks هذا الإصدار في ديسمبر 2022.
ميزات وتحسينات جديدة
- الإدخال/إخراج التنبؤ هو GA
- يدعم كاتب Photon ضغط zstd
- دعم ملف تعريف موارد المهام على مستوى المرحلة للمجموعات المستقلة
- دعم SQL للكتابة فوق الانتقائية باستخدام
REPLACE WHERE
- العلامات المائية مدعومة الآن في SQL
- جمع معلومات ذاكرة PySpark
- التقليم الديناميكي ل DELETE و UPDATE
- مقاييس الحذف على مستوى الصف لعمليات لغة معالجة البيانات المقسمة
الإدخال/إخراج التنبؤ هو GA
يتوفر الإدخال/إخراج التنبؤ الآن بشكل عام. لمزيد من المعلومات، راجع ما هو الإدخال/إخراج التنبؤ؟.
يدعم كاتب Photon ضغط zstd
يدعم الآن كاتب Photon الأصلي برنامج ترميز ضغط zstd عند تمكين zstd عن طريق تعيين spark.sql.parquet.compression.codec
إلى zstd
.
دعم ملف تعريف موارد المهام على مستوى المرحلة للمجموعات المستقلة
يمكنك الآن استخدام الجدولة على مستوى المرحلة على أنظمة المجموعات المستقلة عند تعطيل التخصيص الديناميكي. لاستخدام هذه الميزة، حدد موارد المهام مع ResourceProfileBuilder
لكل مرحلة.
دعم SQL للكتابة فوق الانتقائية باستخدام REPLACE WHERE
يمكنك الآن الكتابة فوق البيانات المطابقة لتعبير عشوائي بشكل انتقائي في جدول Delta باستخدام النمط التالي.
INSERT INTO table_name REPLACE WHERE predicate append_relation
راجع الكتابة فوق انتقائية عشوائية مع استبدال مكان.
العلامات المائية مدعومة الآن في SQL
يمكنك الآن تحديد العلامات المائية باستخدام واجهة Delta Live Tables SQL وفي استعلامات SQL مقابل دفق DataFrames. راجع عبارة WATERMARK.
جمع معلومات ذاكرة PySpark
تم الآن تمكين جمع معلومات الذاكرة للوظائف المعرفة من قبل المستخدم PySpark. يوفر هذا معلومات حول زيادة الذاكرة واستخدام الذاكرة وعدد التكرارات لكل سطر من التعليمات البرمجية في دالة معرفة من قبل المستخدم.
التقليم الديناميكي ل DELETE و UPDATE
عند استخدام الحوسبة التي تدعم Photon، DELETE
والآن UPDATE
استخدم الملفات الديناميكية وتقليم القسم حيث يحسن الأداء. على سبيل المثال، يتم تمكين التقليم الديناميكي عند استخدام جدول مصدر أصغر لتحديث الصفوف أو حذفها في جدول أكبر.
مقاييس الحذف على مستوى الصف لعمليات لغة معالجة البيانات المقسمة
باستخدام دالات التقييم المقسمة، يمكن للمستخدمين الآن تدقيق عدد الصفوف التي يتم حذفها عند تشغيل عمليات لغة معالجة البيانات (DML) مثل DELETE
و TRUNCATE
و replaceWhere
.
إصلاح الأخطاء
تم إصلاح مشكلة في تحليل JSON في "المحمل التلقائي" حيث تركت جميع الأعمدة كسلاسل. في السابق، cloudFiles.inferColumnTypes
لم يتم تعيين أو تعيين إلى false
وكان JSON يحتوي على كائنات متداخلة.
ترقيات المكتبة
- مكتبات Python التي تمت ترقيتها:
- argon2-cffi من 20.1.0 إلى 21.3.0
- attrs من 21.2.0 إلى 21.4.0
- backports.entry-points-selectable من 1.1.1 إلى 1.2.0
- تبييض من 4.0.0 إلى 4.1.0
- boto3 من 1.21.18 إلى 1.21.32
- botocore من 1.24.18 إلى 1.24.32
- cffi من 1.14.6 إلى 1.15.0
- انقر من 8.0.3 إلى 8.0.4
- دورة من 0.10.0 إلى 0.11.0
- Cython من 0.29.24 إلى 0.29.28
- تصحيح الأخطاء من 1.4.1 إلى 1.5.1
- مصمم الديكور من 5.1.0 إلى 5.1.1
- نقاط الإدخال من 0.3 إلى 0.4
- idna من 3.2 إلى 3.3
- ipykernel من 6.12.1 إلى 6.15.3
- ipython من 7.32.0 إلى 8.5.0
- ipywidgets من 7.7.0 إلى 7.7.2
- jedi من 0.18.0 إلى 0.18.1
- joblib من 1.0.1 إلى 1.1.0
- jsonschema من 3.2.0 إلى 4.4.0
- kiwisolver من 1.3.1 إلى 1.3.2
- matplotlib من 3.4.3 إلى 3.5.1
- nbclient من 0.5.3 إلى 0.5.13
- nbconvert من 6.1.0 إلى 6.4.4
- nbformat من 5.1.3 إلى 5.3.0
- nest-asyncio من 1.5.1 إلى 1.5.5
- دفتر الملاحظات من 6.4.5 إلى 6.4.8
- numpy من 1.20.3 إلى 1.21.5
- التعبئة والتغليف من 21.0 إلى 21.3
- الباندا من 1.3.4 إلى 1.4.2
- pandocfilters من 1.4.3 إلى 1.5.0
- parso من 0.8.2 إلى 0.8.3
- وسادة من 8.4.0 إلى 9.0.1
- المنصات من 2.5.2 إلى 2.5.4
- رسم من 5.9.0 إلى 5.6.0
- prometheus-client من 0.11.0 إلى 0.13.1
- protobuf من 4.21.5 إلى 3.19.4
- pycparser من 2.20 إلى 2.21
- Pygments من 2.10.0 إلى 2.11.2
- pyodbc من 4.0.31 إلى 4.0.32
- pyzmq من 22.2.1 إلى 22.3.0
- الطلبات من 2.26.0 إلى 2.27.1
- s3transfer من 0.5.2 إلى 0.5.0
- scikit-learn من 0.24.2 إلى 1.0.2
- scipy من 1.7.1 إلى 1.7.3
- statsmodels من 0.12.2 إلى 0.13.2
- terminado من 0.9.4 إلى 0.13.1
- tomli من 2.0.1 إلى 1.2.2
- سمات من 5.1.0 إلى 5.1.1
- urllib3 من 1.26.7 إلى 1.26.9
- widgetsnbextension من 3.6.0 إلى 3.6.1
- مكتبات R التي تمت ترقيتها:
- قاعدة من 4.1.3 إلى 4.2.2
- المشروب من 1.0-7 إلى 1.0-8
- bslib من 0.4.0 إلى 0.4.1
- المتصل من 3.7.2 إلى 3.7.3
- chron من 2.3-57 إلى 2.3-58
- cli من 3.3.0 إلى 3.4.1
- نظام المجموعة من 2.1.3 إلى 2.1.4
- علامة مشتركة من 1.8.0 إلى 1.8.1
- المحول البرمجي من 4.1.3 إلى 4.2.2
- cpp11 من 0.4.2 إلى 0.4.3
- crayon من 1.5.1 إلى 1.5.2
- curl من 4.3.2 إلى 4.3.3
- data.table من 1.14.2 إلى 1.14.4
- مجموعات البيانات من 4.1.3 إلى 4.2.2
- desc من 1.4.1 إلى 1.4.2
- devtools من 2.4.4 إلى 2.4.5
- ملخص من 0.6.29 إلى 0.6.30
- e1071 من 1.7-11 إلى 1.7-12
- تقييم من 0.16 إلى 0.18
- fontawesome من 0.3.0 إلى 0.4.0
- في المستقبل من 1.28.0 إلى 1.29.0
- future.apply من 1.9.1 إلى 1.10.0
- الغرغرة من 1.2.0 إلى 1.2.1
- غيرت من 1.8.0 إلى 1.9.1
- ggplot2 من 3.3.6 إلى 3.4.0
- gh من 1.3.0 إلى 1.3.1
- gitcreds من 0.1.1 إلى 0.1.2
- الرسومات من 4.1.3 إلى 4.2.2
- grDevices من 4.1.3 إلى 4.2.2
- شبكة من 4.1.3 إلى 4.2.2
- httpuv من 1.6.5 إلى 1.6.6
- isoband من 0.2.5 إلى 0.2.6
- jsonlite من 1.8.0 إلى 1.8.3
- الحمم من 1.6.10 إلى 1.7.0
- دورة الحياة من 1.0.1 إلى 1.0.3
- التشحيم من 1.8.0 إلى 1.9.0
- markdown من 1.1 إلى 1.3
- كتلة من 7.3-56 إلى 7.3-58
- مصفوفة من 1.4-1 إلى 1.5-1
- أساليب من 4.1.3 إلى 4.2.2
- mgcv من 1.8-40 إلى 1.8-41
- nlme من 3.1-157 إلى 3.1-160
- nnet من 7.3-17 إلى 7.3-18
- openssl من 2.0.2 إلى 2.0.4
- متوازي من 4.1.3 إلى 4.2.2
- pkgload من 1.3.0 إلى 1.3.1
- processx من 3.7.0 إلى 3.8.0
- ps من 1.7.1 إلى 1.7.2
- purrr من 0.3.4 إلى 0.3.5
- ragg من 1.2.2 إلى 1.2.4
- RcppEigen من 0.3.3.9.2 إلى 0.3.3.9.3
- قراءة من 2.1.2 إلى 2.1.3
- وصفات من 1.0.1 إلى 1.0.3
- rlang من 1.0.5 إلى 1.0.6
- rmarkdown من 2.16 إلى 2.18
- rpart من 4.1.16 إلى 4.1.19
- RSQLite من 2.2.16 إلى 2.2.18
- لامعة من 1.7.2 إلى 1.7.3
- SparkR من 3.3.0 إلى 3.3.1
- خطوط من 4.1.3 إلى 4.2.2
- إحصائيات من 4.1.3 إلى 4.2.2
- الإحصائيات4 من 4.1.3 إلى 4.2.2
- sys من 3.4 إلى 3.4.1
- tcltk من 4.1.3 إلى 4.2.2
- اختبار من 3.1.4 إلى 3.1.5
- مرتبة من 1.2.0 إلى 1.2.1
- تحديد من 1.1.2 إلى 1.2.0
- timeDate من 4021.104 إلى 4021.106
- نص صغير من 0.41 إلى 0.42
- أدوات من 4.1.3 إلى 4.2.2
- utils من 4.1.3 إلى 4.2.2
- vctrs من 0.4.1 إلى 0.5.0
- vroom من 1.5.7 إلى 1.6.0
- xfun من 0.32 إلى 0.34
- yaml من 2.3.5 إلى 2.3.6
- zip من 2.2.0 إلى 2.2.2
- مكتبات Java التي تمت ترقيتها:
- com.fasterxml.jackson.core.jackson-databind من 2.13.4 إلى 2.13.4.2
- org.apache.parquet.parquet-column من 1.12.0-databricks-0007 إلى 1.12.3-databricks-0001
- org.apache.parquet.parquet-common من 1.12.0-databricks-0007 إلى 1.12.3-databricks-0001
- org.apache.parquet.parquet-encoding من 1.12.0-databricks-0007 إلى 1.12.3-databricks-0001
- org.apache.parquet.parquet-format-structures من 1.12.0-databricks-0007 إلى 1.12.3-databricks-0001
- org.apache.parquet.parquet-hadoop من 1.12.0-databricks-0007 إلى 1.12.3-databricks-0001
- org.apache.parquet.parquet-jackson من 1.12.0-databricks-0007 إلى 1.12.3-databricks-0001
- org.apache.yetus.audience-annotations من 0.5.0 إلى 0.13.0
Apache Spark
يتضمن Databricks Runtime 12.0 Apache Spark 3.3.1. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 11.3 LTS، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:
- [SPARK-40844] [SC-116996][12.x][12.0][12.0.0] إرجاع "[SC-113542][SS] عكس القيمة الافتراضية لجلب تكوين إزاحة Kafka"
- [SPARK-40646] [SC-116061] إرجاع "[SC-113379][SQL] إصلاح إرجاع النتائج الجزئية في مصدر بيانات JSON ووظائف JSON"
- [SPARK-41195] [SC-116305][SQL] دعم PIVOT/UNPIVOT مع الانضمام إلى الأطفال
- [SPARK-41178] [SC-116139][SQL] إصلاح أسبقية قاعدة المحلل بين JOIN والفاصلة
- [SPARK-41072] [SC-116140][SC-116044][SC-115852][SQL][SS] إضافة فئة
STREAM_FAILED
الخطأ إلىStreamingQueryException
- [SPARK-40921] إرجاع "[SC-115140][SC-114585][SQL] إضافة عبارة WHEN NOT MATCHED BY SOURCE إلى MERGE INTO
- [SPARK-37980] [SC-115758] [SQL] توسيع عمود METADATA لدعم فهارس الصفوف لملفات Parquet
- [SPARK-41055] [SC-115582][SQL] إعادة التسمية
_LEGACY_ERROR_TEMP_2424
إلىGROUP_BY_AGGREGATE
- [SPARK-41101] [SC-115849][PYTHON][PROTOBUF] دعم اسم فئة الرسالة ل PYSPARK-PROTOBUF
- [SPARK-40956] [SC-115867] أمر الكتابة فوق SQL Equivalent for Dataframe
- [SPARK-41095] [SC-115659][SQL] تحويل عوامل التشغيل التي لم يتم حلها إلى أخطاء داخلية
- [SPARK-41144] [SC-115866][SQL] يجب ألا يتسبب التلميح الذي لم يتم حله في فشل الاستعلام
- [SPARK-41137] [SC-115858][SQL] إعادة التسمية
LATERAL_JOIN_OF_TYPE
إلىINVALID_LATERAL_JOIN_TYPE
- [SPARK-40998] [SC-114754][SQL] إعادة تسمية فئة
_LEGACY_ERROR_TEMP_0040
الخطأ إلىINVALID_IDENTIFIER
- [SPARK-41015] [SC-115130][SQL][PROTOBUF] التحقق من قيمة UnitTest الفارغة لمولد البيانات
- [SPARK-40769] [SC-114923][CORE][SQL] ترحيل حالات فشل التحقق من النوع للتعبيرات التجميعية إلى فئات الخطأ
- [SPARK-41043] [SC-115183][SQL] إعادة تسمية فئة
_LEGACY_ERROR_TEMP_2429
الخطأ إلىNUM_COLUMNS_MISMATCH
- [SPARK-40777] [SC-114855][SQL][PROTOBUF] دعم استيراد Protobuf ونقل فئات الخطأ.
- [SPARK-41019] [SC-114987][SQL] توفير سياق استعلام إلى
failAnalysis()
- [SPARK-41027] [SC-115131][SQL] استخدم
UNEXPECTED_INPUT_TYPE
بدلا منMAP_FROM_ENTRIES_WRONG_TYPE
- [SPARK-40476] [SC-115868][SC-111163][التعلم الآلي][SQL] تقليل حجم التبديل العشوائي ل ALS
- [SPARK-41134] [SC-115851][SQL] تحسين رسالة الخطأ للأخطاء الداخلية
- [SPARK-37980] Revert " [SQL] توسيع عمود METADATA لدعم فهارس الصفوف لملفات Parquet
- [SPARK-41109] [SC-115788][SQL] إعادة تسمية فئة الخطأ _LEGACY_ERROR_TEMP_1216 إلى INVALID_LIKE_PATTERN
- [SPARK-40984] [SC-115844][CORE][SQL] استخدم
NON_FOLDABLE_INPUT
بدلا منFRAME_LESS_OFFSET_WITHOUT_FOLDABLE
- [SPARK-41029] [SC-115828][SQL] تحسين استخدام
GenericArrayData
المنشئ ل Scala 2.13 - [SPARK-40697] [SC-113648][SQL] إضافة ترك مساحة للأحرف من جانب القراءة لتغطية ملفات البيانات الخارجية
- [SPARK-40978] [SC-114574][SQL]
failAnalysis()
ترحيل سياق w/o إلى فئات الخطأ - [SPARK-40663] [SC-114586][SQL] ترحيل أخطاء التنفيذ إلى فئات الخطأ: _LEGACY_ERROR_TEMP_2251-2275
- [SPARK-38959] [SC-115672][SC-112707][SQL] DS V2: دعم تصفية مجموعة وقت التشغيل في الأوامر على مستوى الصف
- [SPARK-40372] [SC-115668][SQL] ترحيل حالات الفشل من نوع الصفيف يتحقق إلى فئات الخطأ
- [SPARK-41038] [SC-115371][SQL] إعادة التسمية
MULTI_VALUE_SUBQUERY_ERROR
إلىSCALAR_SUBQUERY_TOO_MANY_ROWS
- [SPARK-40965] [SC-114443][SQL] إعادة تسمية فئة
_LEGACY_ERROR_TEMP_1208
الخطأ إلىFIELD_NOT_FOUND
- [SPARK-40748] [SC-114696][SQL] ترحيل حالات فشل التحقق من النوع للشروط إلى فئات الخطأ
- [SPARK-40371] [SC-114557][SQL] ترحيل حالات فشل التحقق من النوع ل NthValue وNTile إلى فئات الخطأ
- [SPARK-41092] [SC-115547][SQL] عدم استخدام المعرف لمطابقة وحدات الفاصل الزمني
- [SPARK-41009] [SC-115360][SQL] إعادة تسمية فئة
_LEGACY_ERROR_TEMP_1070
الخطأ إلىLOCATION_ALREADY_EXISTS
- [SPARK-37980] [SQL] توسيع عمود METADATA لدعم فهارس الصفوف لملفات Parquet
- [SPARK-40967] [SC-114448][SQL]
failAnalysis()
الترحيل إلى فئات الخطأ - [SPARK-34265] [SC-115486][SC-113788][PYTHON][SQL] أدوات Python UDFs باستخدام مقاييس SQL
- [SPARK-41012] [SC-114873][SQL] إعادة التسمية
_LEGACY_ERROR_TEMP_1022
إلىORDER_BY_POS_OUT_OF_RANGE
- [SPARK-41042] [SC-115142][SQL] إعادة التسمية
PARSE_CHAR_MISSING_LENGTH
إلىDATATYPE_MISSING_SIZE
- [SPARK-40752] [SC-114442][SQL] ترحيل حالات فشل التحقق من النوع للتعبيرات الخاطئة إلى فئات الخطأ
- [SPARK-37945] [SC-115534][SQL][CORE] استخدام فئات الخطأ في أخطاء تنفيذ العمليات الحسابية
- [SPARK-40374] [SC-114705][SQL] ترحيل حالات فشل التحقق من النوع لمنشئي النوع إلى فئات الخطأ
- [SPARK-41056] [SC-115354][R] إصلاح سلوك R_LIBS_SITE الجديد المقدم في R 4.2
- [SPARK-41041] [SC-115357][SQL] التكامل
_LEGACY_ERROR_TEMP_1279
فيTABLE_OR_VIEW_ALREADY_EXISTS
- [SPARK-40663] [SC-114852][SQL] ترحيل أخطاء التنفيذ إلى فئات الخطأ: _LEGACY_ERROR_TEMP_2201-2225
- [SPARK-41020] [SC-114984][SQL] إعادة تسمية فئة
_LEGACY_ERROR_TEMP_1019
الخطأ إلىSTAR_GROUP_BY_POS
- [SPARK-41035] [SC-115233][SQL] لا تقم بتصحيح التوابع القابلة للطي للوظائف التجميعية في
RewriteDistinctAggregates
- [SPARK-39778] [SC-114353][SQL] تحسين فئات الخطأ والرسائل
- [SPARK-40798] [SC-113782][SQL] يجب أن يتحقق تغيير القسم من القيمة باتباع storeAssignmentPolicy
- [SPARK-40810] [SC-113533][SQL] استخدام SparkIllegalArgumentException بدلا من IllegalArgumentException في CreateDatabaseCommand و AlterDatabaseSetLocationCommand
- [SPARK-40921] [SC-115140][SC-114585][SQL] إضافة عبارة WHEN NOT MATCHED BY SOURCE إلى MERGE INTO
- [SPARK-40360] [SC-114965] استثناءات ALREADY_EXISTS NOT_FOUND
- [SPARK-41007] [SC-115085][SQL] إضافة مسلسل مفقود ل java.math.BigInteger
- [SPARK-40751] [SC-114254][SQL] ترحيل حالات فشل التحقق من النوع للدالات عالية الترتيب إلى فئات الخطأ
- [SPARK-40248] [SC-114704][SQL] استخدام عدد أكبر من البتات لإنشاء عامل تصفية Bloom
- [SPARK-41040] [SC-115145][SS] إصلاح فشل استعلام تدفق الاتحاد الذاتي عند استخدام readStream.table
- [SPARK-32380] [SC-114966][SQL] إصلاح الوصول إلى جدول HBase عبر Hive من Spark
- [SPARK-40749] [SC-114860][SQL] ترحيل فشل التحقق من النوع للمولدات إلى فئات الخطأ
- [SPARK-40925] [SC-114445][SQL][SS][WARMFIX][12.x] إصلاح عامل التشغيل ذي الحالة في وقت متأخر...
- [SPARK-40654] [SC-112783] إزالة خطوط السجل المؤقتة
- [SPARK-40742] [SC-114913][SC-112646][CORE][SQL] إصلاح تحذيرات التحويل البرمجي ل Java المتعلقة بنوع عام
- [SPARK-40657] [SC-113642][Cherry-pick] إضافة دعم لفئات Java في Protob...
- [SPARK-40898] [SC-113932][SQL] أسماء دالات الاقتباس في أخطاء عدم تطابق نوع البيانات
- [SPARK-40760] [SC-113750][SQL] ترحيل حالات فشل التحقق من النوع لتعبيرات الفاصل الزمني إلى فئات الخطأ
- [SPARK-36114] [SC-113771][SQL] دعم الاستعلامات الفرعية ذات التقييمات المرتبطة بعدم المساواة
- [SPARK-40856] [SC-113738][SQL] تحديث قالب الخطأ WRONG_NUM_PARAMS
- [SPARK-40759] [SC-114251][SQL] ترحيل حالات فشل التحقق من النوع للنافذة الزمنية إلى فئات الخطأ
- [SPARK-40750] [SC-113812][SQL] ترحيل فشل التحقق من النوع للتعبيرات الرياضية إلى فئات الخطأ
- [SPARK-40756] [SC-113749][SQL] ترحيل فشل التحقق من النوع لتعبيرات السلسلة إلى فئات الخطأ
- [SPARK-40768] [SC-113640][SQL] ترحيل حالات فشل التحقق من النوع bloom_filter_agg() إلى فئات الخطأ
- [SPARK-40369] [SC-113402][CORE][SQL] ترحيل فشل التحقق من النوع للمكالمات عبر الانعكاس إلى فئات الخطأ
- [SPARK-39445] [SQL] إزالة النافذة إذا كانت windowExpressions فارغة في تقليم الأعمدة
- [SPARK-40761] [SC-113245][SQL] ترحيل فشل التحقق من النوع للتعبيرات المئوية إلى فئات الخطأ
- [SPARK-40361] [SC-112789][SQL] ترحيل فشل التحقق من النوع الحسابي إلى فئات الخطأ
- [SPARK-40714] [SC-112576][SQL] أبعد
PartitionAlreadyExistsException
- [SPARK-40702] [SC-112437][SQL] إصلاح مواصفات القسم في
PartitionsAlreadyExistException
- [SPARK-40358] [SC-112631][SQL] ترحيل حالات فشل التحقق من نوع المجموعة إلى فئات الخطأ
- [SPARK-40910] [SC-114259][SQL] استبدال UnsupportedOperationException ب SparkUnsupportedOperationException
- [SPARK-39876] [SC-112429][SQL] إضافة UNPIVOT إلى بناء جملة SQL
- [SPARK-39783] [SC-113389][SQL] Quote qualifiedName لإصلاح العلامات الخلفية لمرشحي الأعمدة في رسائل الخطأ
- [SPARK-40663] [SC-112520][SQL] ترحيل أخطاء التنفيذ إلى فئات الخطأ: _LEGACY_ERROR_TEMP_2026-2282
- [SPARK-40975] [SC-114555][SQL] إعادة تسمية فئة
_LEGACY_ERROR_TEMP_0021
الخطأ إلىUNSUPPORTED_TYPED_LITERAL
- [SPARK-37935] [SC-114472][SQL] إزالة حقول فئات فرعية منفصلة للخطأ
- [SPARK-40944] [SC-114530][SQL] تقييد ترتيب الاسترخاء لخيارات عمود CREATE TABLE
- [SPARK-40815] [SC-114528][SQL] إضافة
DelegateSymlinkTextInputFormat
إلى خطأ الحل البديلSymlinkTextInputSplit
- [SPARK-40933] [SC-114441][SQL] إعادة تطبيق df.stat. {cov, corr} مع وظائف sql المضمنة
- [SPARK-40932] [SC-114439][CORE] يتم تجاوز رسائل إصلاح المشكلة لكافةGather
- [SPARK-39312] [SQL] استخدام parquet الأصلي In predicate ل في دفع عامل التصفية لأسفل
- [SPARK-40862] [SC-114352][SQL] دعم الاستعلامات الفرعية غير المجمعة في RewriteCorrelatedScalarSubquery
- [SPARK-40963] [SC-114446][SQL] تعيين القيم الخالية بشكل صحيح في المشروع الذي تم إنشاؤه بواسطة
ExtractGenerator
- [SPARK-40663] [SC-112295][SQL] ترحيل أخطاء التنفيذ إلى فئات الخطأ: _LEGACY_ERROR_TEMP_2000-2024
- [SPARK-40892] [SC-114347][SQL][SS] تخفيف متطلبات قاعدة window_time - السماح بمكالمات window_time متعددة
- [SPARK-40540] [SC-111639][SQL] ترحيل أخطاء التحويل البرمجي إلى فئات الخطأ: _LEGACY_ERROR_TEMP_1100-1347
- [SPARK-40924] [SC-114258][SQL] إصلاح ل Unhex عندما يحتوي الإدخال على عدد فردي من الرموز
- [SPARK-40821] [SC-113754][SQL][CORE][PYTHON][SS] تقديم دالة window_time لاستخراج وقت الحدث من عمود النافذة
- [SPARK-40800] [SC-113772][SQL] التعبيرات المضمنة دائما في OptimizeOneRowRelationSubquery
- [SPARK-40900] [SC-114006][SQL] إعادة التنفيذ
frequentItems
مع عمليات إطار البيانات - [SPARK-40735] [SC-114022][SC-112657] استدعاء bash باستمرار مع /usr/bin/env bash في البرامج النصية لجعل التعليمات البرمجية أكثر قابلية للنقل
- [SPARK-40773] [SC-113091][SQL] إعادة بناء التعليمات البرمجية checkCorrelationsInSubquery
- [SPARK-40615] [SC-113400][SQL] التحقق من أنواع البيانات غير المدعومة عند فصل الاستعلامات الفرعية
- [SPARK-40660] [SC-112293][CORE][SQL] التبديل إلى XORShiftRandom لتوزيع العناصر
- [SPARK-40540] [SC-113926][SC-111331][SQL] ترحيل أخطاء التحويل البرمجي إلى فئات الخطأ
- [SPARK-40551] [SC-113135][SQL] DataSource V2: إضافة واجهات برمجة التطبيقات للعمليات المستندة إلى دلتا على مستوى الصف
- [SPARK-39391] [SC-110676][CORE] إعادة استخدام فئات المقسم
- [SPARK-40368] [SC-113396][SQL] ترحيل فشل التحقق من نوع عامل تصفية Bloom إلى فئات الخطأ
- [SPARK-39146] [SC-111814][CORE][SQL] إدخال مفردة محلية لذلك
ObjectMapper
يمكن إعادة استخدامها - [SPARK-40357] [SC-113786][SC-111352][SQL] ترحيل حالات فشل التحقق من نوع النافذة إلى فئات الخطأ
- [SPARK-40874] [SC-113756][PYTHON] إصلاح عمليات البث في Python UDFs عند تمكين التشفير
- [SPARK-40359] [SC-113770][SC-111146][SQL] فشل التحقق من نوع الترحيل في تعبيرات CSV/JSON إلى فئات الخطأ
- [SPARK-40880] [SC-113764][SQL] إعادة التنفيذ
summary
مع عمليات إطار البيانات - [SPARK-40877] [SC-113763][SQL] إعادة التنفيذ
crosstab
مع عمليات إطار البيانات - [SPARK-40382] [SC-113098][SQL] تجميع التعبيرات التجميعية المميزة بواسطة توابع مكافئة دلاليا في
RewriteDistinctAggregates
- [SPARK-40826] [SC-113532][SS] إضافة فحص إضافي لملف إعادة تسمية نقطة التحقق
- [SPARK-40829] [SC-113426][SQL] لا يعمل STORED AS serde في طريقة عرض CREATE TABLE LIKE
- [SPARK-40844] [SC-113542][SS] عكس القيمة الافتراضية لإزاحة Kafka لجلب التكوين
- [SPARK-40488] [SC-113568][SC-111160] لا تقم بتضمين الاستثناءات التي تم طرحها عند فشل كتابة مصدر البيانات
- [SPARK-40560] [SC-113631][SC-111335][SQL] إعادة التسمية
message
بتنسيقmessageTemplate
STANDARD
الأخطاء - [SPARK-40618] [SC-113096][SQL] إصلاح الخطأ في قاعدة MergeScalarSubqueries باستخدام الاستعلامات الفرعية المتداخلة باستخدام التعقب المرجعي
- [SPARK-40530] [SC-113528][SC-111332][SQL] إضافة واجهات برمجة تطبيقات المطور المتعلقة بالخطأ
- [SPARK-40806] [SC-113250][SQL] إصلاح الأخطاء المطبعية: إنشاء جدول -> استبدال الجدول
- [SPARK-40646] [SC-113379][SQL] إصلاح إرجاع النتائج الجزئية في مصدر بيانات JSON ووظائف JSON
- [SPARK-40654] [Cherry-pick][SC-112783][SQL] دعم Protobuf ل Spark - من...
- [SPARK-40753] [SC-113539][SQL] إصلاح الخطأ في حالة الاختبار لعملية دليل الكتالوج
- [SPARK-40765] [SC-113056][SQL] تحسين عملية fs المكررة في
CommandUtils#calculateSingleLocationSize#getPathSize
الأسلوب - [SPARK-40114] [ES-479282][R][11.X] دعم السهم 9.0.0 مع SparkR
- [SPARK-40479] [SC-110935][SQL] ترحيل خطأ نوع إدخال غير متوقع إلى فئة خطأ
- [SPARK-40473] [SC-113388][SC-111141][SQL] ترحيل أخطاء التحليل إلى فئات الخطأ
- [SPARK-39853] [SC-111867][CORE] دعم ملف تعريف مورد المهمة على مستوى المرحلة لنظام المجموعة المستقلة عند تعطيل التخصيص الديناميكي (المنفذ الخلفي من PR-47157)
- [SPARK-40407] [SC-111161][SQL] إصلاح انحراف البيانات المحتمل بسبب df.repartition
- [SPARK-40425] [SC-110840][SQL] لا يحتاج DROP TABLE إلى إجراء بحث في الجدول
- [SPARK-40703] [SC-113242][SQL] إدخال التبديل العشوائي على SinglePartition لتحسين التوازي
- [SPARK-40640] [SC-113138][CORE] SparkHadoopUtil لتعيين أصل خيارات تكوين hadoop/hive
- [SPARK-39062] [11.x][CORE] إضافة دعم جدولة الموارد على مستوى المرحلة للمجموعة المستقلة
- [SPARK-33861] [SC-109877]إرجاع "[SQL] تبسيط الشرطي في التقييم"
- [SPARK-40667] [SC-113136][SQL] إعادة بناء التعليمات البرمجية لخيارات مصدر بيانات الملف
- [SPARK-40370] [SC-110677][SQL] فشل التحقق من نوع الترحيل في فئات الخطأ في CAST
- [SPARK-40611] [SC-113105][SQL] تحسين أداء و
getInterval
منsetInterval
أجلUnsafeRow
- [SPARK-40733] [SC-113126][SQL] جعل محتويات
SERDEPROPERTIES
في نتيجةShowCreateTableAsSerdeCommand
لها ترتيب ثابت - [SPARK-40585] [SC-112180][SQL] دعم المعرفات المقتبسة المزدوجة
- [SPARK-40772] [SC-112992][SQL] تحسين
spark.sql.adaptive.skewJoin.skewedPartitionFactor
لدعمDouble
القيم - [SPARK-40565] [SC-112417][SQL] لا تدفع عوامل التصفية غير المحددة إلى مصادر ملفات V2
- [SPARK-8731] [SC-112784] لا يعمل Beeline مع الخيار -e عند البدء في الخلفية
- [SPARK-35242] [SC-111398][SQL] دعم تغيير قاعدة البيانات الافتراضية في كتالوج الجلسة
- [SPARK-40426] [SC-110672][SQL] إرجاع خريطة من SparkThrowable.getMessageParameters
- [SPARK-40494] [SC-112655][SC-111025][CORE][SQL][التعلم الآلي][MLLIB] تحسين أداء نمط التعليمات البرمجية
keys.zipWithIndex.toMap
- [SPARK-40521] [SC-112430][SQL] إرجاع أقسام موجودة فقط في
PartitionsAlreadyExistException
من قسم إنشاء Apache Hive - [SPARK-40705] [SC-112567][SQL] معالجة حالة استخدام صفيف قابل للتغيير عند تحويل الصف إلى JSON ل Scala 2.13
- [SPARK-39895] [SC-112590][SQL][PYTHON] دعم إسقاط أعمدة متعددة
- [SPARK-40607] [SC-112296][CORE][SQL][MLLIB][SS] إزالة عمليات مستوفي السلاسل المكررة
- [SPARK-40420] [SC-112604][SC-110569][SQL] فرز معلمات رسالة الخطأ حسب الأسماء بتنسيقات JSON
- [SPARK-40403] [SC-110564][SQL] حساب حجم الصفيف غير الآمن باستخدام الطول لتجنب الحجم السالب في رسالة الخطأ
- [SPARK-40482] [SC-110831][SQL] آض
SPARK-24544 Print actual failure cause when look up function failed
- [SPARK-40400] [SC-112555][SC-110397][SQL] تمرير معلمات رسالة الخطأ إلى الاستثناءات كخرائط
- [SPARK-40628] [SC-112414][SQL] لا تدفع حالة شبه/مضادة معقدة للصلة اليسرى من خلال المشروع
- [SPARK-40562] [SC-111455][SQL] جمع
spark.sql.legacy.groupingIdWithAppendedUserGroupBy
- [SPARK-40501] [SC-111333][SQL] إضافة PushProjectionThroughLimit للمحسن
- [SPARK-39200] [SC-111244][CORE] جعل التخزين الاحتياطي للقراءة بشكل مقروء على المحتوى
- [SPARK-38717] [SC-111241][SQL] معالجة حالة مواصفات مستودع Apache Hive للحفاظ على السلوك
- [SPARK-40385] [SC-111123][SQL] إصلاح المسار المفسر لمنشئ الكائن المصاحب
- [SPARK-40216] [SC-112413][SQL] استخراج الأسلوب الشائع
ParquetUtils.prepareWrite
لإلغاء تكرار التعليمات البرمجية فيParquetFileFormat
وParquetWrite
- [SPARK-40636] [SC-112160][CORE] تم تصحيح الخطأ في تسجيل التبديل العشوائي في BlockManagerDecommissioner
- [SPARK-40617] [SC-112009] إصلاح حالة السباق في معالجة إدخالات ExecutorMetricsPoller's stageTCMP
- [SPARK-40618] [SC-112046][SQL] إصلاح الخطأ في قاعدة MergeScalarSubqueries مع الاستعلامات الفرعية المتداخلة
- [SPARK-40612] [SC-111933][CORE] إصلاح الأساسي المستخدم لتجديد الرمز المميز للتفويض على مديري الموارد غير التابعين ل YARN
- [SPARK-40595] [SC-111662][SQL] تحسين رسالة الخطأ لعلاقات CTE غير المستخدمة
- [SPARK-40314] [SC-111879][SQL][PYTHON] إضافة روابط scala وpython للمضمنة inline_outer
- [SPARK-40416] [SC-110945][SQL] نقل تعبير الاستعلام الفرعي رسائل خطأ CheckAnalysis لاستخدام إطار عمل الخطأ الجديد
- [SPARK-40318] [SC-111865][SC-109986][SQL] يجب على try_avg() طرح الاستثناءات من التابع الخاص به
- [SPARK-40509] [SC-111644][SS][PYTHON] إضافة مثال ل applyInPandasWithState
- [SPARK-40310] [SC-111329][SC-109842][SQL] يجب على try_sum() طرح الاستثناءات من التابع الخاص به
- [SPARK-40016] [SQL] إزالة TryEval غير الضرورية في تنفيذ try_sum()
- [SPARK-40527] [SC-111224][SQL] الاحتفاظ بأسماء حقول البنية أو مفاتيح الخريطة في CreateStruct
- [SPARK-38098] [SC-111178][PYTHON] إضافة دعم ل ArrayType من StructType المتداخل إلى التحويل المستند إلى الأسهم
- [SPARK-40324] [SC-111359][SC-110293][SQL] توفير سياق الاستعلام في AnalysisException
- [SPARK-40492] [SC-111324][SS] إجراء الصيانة قبل دفق StateStore إلغاء التحميل
- [SPARK-40487] [SC-111124][SQL] جعل defaultJoin في BroadcastNestedLoopJoinExec قيد التشغيل بالتوازي
- [SPARK-40474] [SC-111273][SQL] استنتاج مخطط CSV الصحيح وسلوك تحليل البيانات على أعمدة ذات تواريخ وطوابع زمنية مختلطة
- [SPARK-40508] [SC-111066][SQL] التعامل مع التقسيم غير المعروف على أنه UnknownPartitioning
- [SPARK-40496] [SC-111234][SC-111013][SQL] إصلاح التكوينات للتحكم في "enableDateTimeParsingFallback"
- [SPARK-40435] [SC-111214][SS][PYTHON] إضافة مجموعات اختبار ل applyInPandasWithState في PySpark
- [SPARK-40434] [SC-111125][SS][PYTHON] تنفيذ applyInPandasWithState في PySpark
تحديثات الصيانة
راجع تحديثات صيانة Databricks Runtime 12.0.
بيئة النظام
- نظام التشغيل: Ubuntu 20.04.5 LTS
- Java: Zulu 8.64.0.19-CA-linux64
- Scala: 2.12.14
- Python: 3.9.5
- R: 4.2.2
- Delta Lake: 2.2.0
مكتبات Python المثبتة
مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
---|---|---|---|---|---|
argon2-cffi | 21.3.0 | روابط argon2-cffi | 21.2.0 | الرموز المميزة | 2.0.5 |
سلاسل السلاسل | 21.4.0 | تثبيت خلفي | 0.2.0 | backports.entry-points-selectable | 1.2.0 |
beautifulsoup4 | 4.11.1 | black | 22.3.0 | بيض | 4.1.0 |
boto3 | 1.21.32 | روبوت الدردشة | 1.24.32 | شهادة | 2021.10.8 |
cffi | 1.15.0 | تجزئة | 4.0.0 | charset-normalizer | 2.0.4 |
نقر | 8.0.4 | التشفير | 3.4.8 | دورة | 0.11.0 |
Cython | 0.29.28 | dbus-python | 1.2.16 | تصحيح الأخطاء | 1.5.1 |
ديكور | 5.1.1 | defusedxml | 0.7.1 | استياء | 0.3.6 |
نقاط الإدخال | 0.4 | تنفيذ | 0.8.3 | نظرة عامة على الواجهات | 1.0.0 |
fastjsonschema | 2.16.2 | قفل الملف | 3.8.0 | أصوام الخطوط | 4.25.0 |
idna | 3.3 | ipykernel | 6.15.3 | ipython | 8.5.0 |
ipython-genutils | 0.2.0 | عناوين ipywidgets | 7.7.2 | jedi | 0.18.1 |
جينجا 2 | 2.11.3 | مسار jmespath | 0.10.0 | joblib | 1.1.0 |
jsonschema | 4.4.0 | jupyter-client | 6.1.12 | jupyter_core | 4.11.2 |
jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | kiwisolver | 1.3.2 |
MarkupSafe | 2.0.1 | matplotlib | 3.5.1 | matplotlib-inline | 0.1.2 |
سوء الحظ | 0.8.4 | mypy-extensions | 0.4.3 | nbclient | 0.5.13 |
nbconvert | 6.4.4 | تنسيق nbformat | 5.3.0 | nest-asyncio | 1.5.5 |
notebook | 6.4.8 | numpy | 1.21.5 | التغليف | 21.3 |
pandas | 1.4.2 | عوامل تصفية pandocfilter | 1.5.0 | parso | 0.8.3 |
pathspec | 0.9.0 | بتسي | 0.5.2 | pexpect | 4.8.0 |
pickleshare | 0.7.5 | مخدة | 9.0.1 | pip | 21.2.4 |
المنصات | 2.5.4 | بشكل مخطط | 5.6.0 | prometheus-client | 0.13.1 |
مجموعة أدوات المطالبة | 3.0.20 | protobuf | 3.19.4 | psutil | 5.8.0 |
psycopg2 | 2.9.3 | عملية ptyprocess | 0.7.0 | تقييم خالص | 0.2.2 |
pyarrow | 7.0.0 | pycparser | 2.21 | Pygments | 2.11.2 |
PyGObject | 3.36.0 | pyodbc | 4.0.32 | pyparsing | 3.0.4 |
pyrsistent | 0.18.0 | python-dateutil | 2.8.2 | pytz | 2021.3 |
pyzmq | 22.3.0 | الطلبات | 2.27.1 | requests-unixsocket | 0.2.0 |
s3transfer | 0.5.0 | scikit-learn | 1.0.2 | شفرة | 1.7.3 |
بحر محمول | 0.11.2 | Send2Trash | 1.8.0 | أدوات الإعداد | 58.0.4 |
ستة | 1.16.0 | شوربة الحساء | 2.3.1 | ssh-import-id | 5.10 |
بيانات المكدس | 0.2.0 | نماذج الإحصائيات | 0.13.2 | مثابره | 8.0.1 |
terminado | 0.13.1 | مسار الاختبار | 0.5.0 | threadpoolctl | 2.2.0 |
tokenize-rt | 4.2.1 | tomli | 1.2.2 | اعصار | 6.1 |
سمات السمات | 5.1.1 | typing_extensions | 4.1.1 | ترقيات غير مراقبة | 0.1 |
urllib3 | 1.26.9 | virtualenv | 20.8.0 | wcwidth | 0.2.5 |
ترميزات الويب | 0.5.1 | دولاب | 0.37.0 | عنصر واجهة المستخدم | 3.6.1 |
مكتبات R المثبتة
يتم تثبيت مكتبات R من لقطة Microsoft CRAN في 2022-11-11.
مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
---|---|---|---|---|---|
سهم | 10.0.0 | askpass | 1.1 | assertthat | 0.2.1 |
backports | 1.4.1 | الأساس | 4.2.2 | base64enc | 0.1-3 |
بت | 4.0.4 | bit64 | 4.0.5 | كائن ثنائي كبير الحجم | 1.2.3 |
boot | 1.3-28 | المشروب | 1.0-8 | بريو | 1.1.3 |
broom | 1.0.1 | bslib | 0.4.1 | ذاكرة التخزين المؤقت | 1.0.6 |
callr | 3.7.3 | علامة إقحام | 6.0-93 | cellranger | 1.1.0 |
كرون | 2.3-58 | فئة | 7.3-20 | cli | 3.4.1 |
clipr | 0.8.0 | ساعة | 0.6.1 | نظام مجموعة | 2.1.4 |
codetools | 0.2-18 | colorspace | 2.0-3 | العلامة الشائعة | 1.8.1 |
compiler | 4.2.2 | config | 0.3.1 | cpp11 | 0.4.3 |
crayon | 1.5.2 | بيانات الاعتماد | 1.3.2 | curl | 4.3.3 |
data.table | 1.14.4 | مجموعات البيانات | 4.2.2 | DBI | 1.1.3 |
dbplyr | 2.2.1 | تنازلي | 1.4.2 | devtools | 2.4.5 |
diffobj | 0.3.5 | digest | 0.6.30 | إضاءة هابطة | 0.4.2 |
dplyr | 1.0.10 | dtplyr | 1.2.2 | e1071 | 1.7-12 |
علامة الحذف | 0.3.2 | التقييم | 0.18 | fansi | 1.0.3 |
مسافة بعيدة | 2.1.1 | خريطة سريعة | 1.1.0 | fontawesome | 0.4.0 |
forcats | 0.5.2 | Foreach | 1.5.2 | foreign | 0.8-82 |
زور | 0.2.0 | fs | 1.5.2 | future | 1.29.0 |
future.apply | 1.10.0 | تغرغر | 1.2.1 | generics | 0.1.3 |
غيرت | 1.9.1 | ggplot2 | 3.4.0 | غ | 1.3.1 |
صور gitcred | 0.1.2 | glmnet | 4.1-4 | عموميات | 0.16.1 |
glue | 1.6.2 | googledrive | 2.0.0 | googlesheets4 | 1.0.1 |
gower | 1.0.0 | graphics | 4.2.2 | grDevices | 4.2.2 |
grid | 4.2.2 | gridExtra | 2.3 | gsubfn | 0.7 |
gtable | 0.3.1 | هاردات | 1.2.0 | haven | 2.5.1 |
highr | 0.9 | hms | 1.1.2 | htmltools | 0.5.3 |
htmlwidgets | 1.5.4 | httpuv | 1.6.6 | httr | 1.4.4 |
ids | 1.0.1 | ini | 0.3.1 | ipred | 0.9-13 |
isoband | 0.2.6 | iterators | 1.0.14 | jquerylib | 0.1.4 |
jsonlite | 1.8.3 | KernSmooth | 2.23-20 | knitr | 1.40 |
labeling | 0.4.2 | فيما بعد | 1.3.0 | lattice | 0.20-45 |
lava | 1.7.0 | دورة الحياة | 1.0.3 | listenv | 0.8.0 |
lubridate | 1.9.0 | magrittr | 2.0.3 | markdown | 1.3 |
MASS | 7.3-58 | مصفوفة | 1.5-1 | المذكرة | 2.0.1 |
الأساليب | 4.2.2 | mgcv | 1.8-41 | mime | 0.12 |
واجهة مستخدم مصغرة | 0.1.1.1 | ModelMetrics | 1.2.2.2 | modelr | 0.1.9 |
munsell | 0.5.0 | nlme | 3.1-160 | nnet | 7.3-18 |
numDeriv | 2016.8-1.1 | openssl | 2.0.4 | parallel | 4.2.2 |
بالتوازي | 1.32.1 | pillar | 1.8.1 | pkgbuild | 1.3.1 |
pkgconfig | 2.0.3 | pkgdown | 2.0.6 | pkgload | 1.3.1 |
plogr | 0.2.0 | plyr | 1.8.7 | مدح | 1.0.0 |
prettyunits | 1.1.1 | بروك | 1.18.0 | processx | 3.8.0 |
prodlim | 2019.11.13 | ملفات تعريفية | 0.3.7 | التقدم | 1.2.2 |
متدرج التقدم | 0.11.0 | الوعود | 1.2.0.1 | proto | 1.0.0 |
الوكيل | 0.4-27 | ps | 1.7.2 | purrr | 0.3.5 |
r2d3 | 0.2.6 | R6 | 2.5.1 | رعوج | 1.2.4 |
randomForest | 4.7-1.1 | طيور الراب | 0.3.3 | rcmdcheck | 1.4.0 |
RColorBrewer | 1.1-3 | Rcpp | 1.0.9 | RcppEigen | 0.3.3.9.3 |
readr | 2.1.3 | readxl | 1.4.1 | recipes | 1.0.3 |
rematch | 1.0.1 | إعادة المباراة2 | 2.1.2 | أجهزة التحكم عن بعد | 2.4.2 |
reprex | 2.0.2 | reshape2 | 1.4.4 | rlang | 1.0.6 |
rmarkdown | 2.18 | RODBC | 1.3-19 | roxygen2 | 7.2.1 |
rpart | 4.1.19 | rprojroot | 2.0.3 | Rserve | 1.8-11 |
RSQLite | 2.2.18 | rstudioapi | 0.14 | تحويلات | 2.1.2 |
rvest | 1.0.3 | ساس | 0.4.2 | scales | 1.2.1 |
selectr | 0.4-2 | معلومات الجلسة | 1.2.2 | شكل | 1.4.6 |
بَرَّاق | 1.7.3 | قوالب المصدر | 0.1.7 | sparklyr | 1.7.8 |
سبارك | 3.3.1 | spatial | 7.3-11 | splines | 4.2.2 |
sqldf | 0.4-11 | SQUAREM | 2021.1 | stats | 4.2.2 |
stats4 | 4.2.2 | stringi | 1.7.8 | stringr | 1.4.1 |
survival | 3.4-0 | sys | 3.4.1 | الشبكات الأساسية للنظام | 1.0.4 |
tcltk | 4.2.2 | اختبار الذي | 3.1.5 | تشكيل النص | 0.3.6 |
tibble | 3.1.8 | tidyr | 1.2.1 | tidyselect | 1.2.0 |
tidyverse | 1.3.2 | تغيير الوقت | 0.1.1 | timeDate | 4021.106 |
tinytex | 0.42 | الأدوات | 4.2.2 | tzdb | 0.3.0 |
محدد موقع المعلومات (urlchecker) | 1.0.1 | استخدام هذا | 2.1.6 | utf8 | 1.2.2 |
utils | 4.2.2 | uuid | 1.1-0 | vctrs | 0.5.0 |
viridisLite | 0.4.1 | غرفة vroom | 1.6.0 | والدو | 0.4.0 |
whisker | 0.4 | withr | 2.5.0 | xfun | 0.34 |
xml2 | 1.3.3 | xopen | 1.0.0 | xtable | 1.8-4 |
yaml | 2.3.6 | zip | 2.2.2 |
مكتبات Java و Scala المثبتة (إصدار مجموعة Scala 2.12)
معرف مجموعة | معرف البيانات الاصطناعية | إصدار |
---|---|---|
antlr | antlr | 2.7.7 |
com.amazonaws | amazon-kinesis-client | 1.12.0 |
com.amazonaws | aws-java-sdk-autoscaling | 1.12.189 |
com.amazonaws | aws-java-sdk-cloudformation | 1.12.189 |
com.amazonaws | aws-java-sdk-cloudfront | 1.12.189 |
com.amazonaws | aws-java-sdk-cloudhsm | 1.12.189 |
com.amazonaws | aws-java-sdk-cloudsearch | 1.12.189 |
com.amazonaws | aws-java-sdk-cloudtrail | 1.12.189 |
com.amazonaws | aws-java-sdk-cloudwatch | 1.12.189 |
com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.189 |
com.amazonaws | aws-java-sdk-codedeploy | 1.12.189 |
com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.189 |
com.amazonaws | aws-java-sdk-cognitosync | 1.12.189 |
com.amazonaws | aws-java-sdk-config | 1.12.189 |
com.amazonaws | aws-java-sdk-core | 1.12.189 |
com.amazonaws | aws-java-sdk-datapipeline | 1.12.189 |
com.amazonaws | aws-java-sdk-directconnect | 1.12.189 |
com.amazonaws | aws-java-sdk-directory | 1.12.189 |
com.amazonaws | aws-java-sdk-dynamodb | 1.12.189 |
com.amazonaws | aws-java-sdk-ec2 | 1.12.189 |
com.amazonaws | aws-java-sdk-ecs | 1.12.189 |
com.amazonaws | aws-java-sdk-efs | 1.12.189 |
com.amazonaws | aws-java-sdk-elasticache | 1.12.189 |
com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.189 |
com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.189 |
com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.189 |
com.amazonaws | aws-java-sdk-emr | 1.12.189 |
com.amazonaws | aws-java-sdk-glacier | 1.12.189 |
com.amazonaws | aws-java-sdk-glue | 1.12.189 |
com.amazonaws | aws-java-sdk-iam | 1.12.189 |
com.amazonaws | aws-java-sdk-importexport | 1.12.189 |
com.amazonaws | aws-java-sdk-kinesis | 1.12.189 |
com.amazonaws | aws-java-sdk-kms | 1.12.189 |
com.amazonaws | aws-java-sdk-lambda | 1.12.189 |
com.amazonaws | aws-java-sdk-logs | 1.12.189 |
com.amazonaws | aws-java-sdk-machinelearning | 1.12.189 |
com.amazonaws | aws-java-sdk-opsworks | 1.12.189 |
com.amazonaws | aws-java-sdk-rds | 1.12.189 |
com.amazonaws | aws-java-sdk-redshift | 1.12.189 |
com.amazonaws | aws-java-sdk-route53 | 1.12.189 |
com.amazonaws | aws-java-sdk-s3 | 1.12.189 |
com.amazonaws | aws-java-sdk-ses | 1.12.189 |
com.amazonaws | aws-java-sdk-simpledb | 1.12.189 |
com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.189 |
com.amazonaws | aws-java-sdk-sns | 1.12.189 |
com.amazonaws | aws-java-sdk-sqs | 1.12.189 |
com.amazonaws | aws-java-sdk-ssm | 1.12.189 |
com.amazonaws | aws-java-sdk-storagegateway | 1.12.189 |
com.amazonaws | aws-java-sdk-sts | 1.12.189 |
com.amazonaws | دعم aws-java-sdk | 1.12.189 |
com.amazonaws | مكتبات aws-java-sdk-swf | 1.11.22 |
com.amazonaws | مساحات عمل aws-java-sdk | 1.12.189 |
com.amazonaws | jmespath-java | 1.12.189 |
com.chuusai | shapeless_2.12 | 2.3.3 |
com.clearspring.analytics | استدر | 2.9.6 |
com.databricks | Rserve | 1.8-3 |
com.databricks | jets3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
com.esotericsoftware | kryo مظلل | 4.0.2 |
com.esotericsoftware | سجل الحد الأدنى | 1.3.0 |
com.fasterxml | زميل | 1.3.4 |
com.fasterxml.jackson.core | التعليقات التوضيحية ل جاكسون | 2.13.4 |
com.fasterxml.jackson.core | جاكسون النواة | 2.13.4 |
com.fasterxml.jackson.core | جاكسون-databind | 2.13.4.2 |
com.fasterxml.jackson.dataformat | جاكسون-dataformat-cbor | 2.13.4 |
com.fasterxml.jackson.datatype | جاكسون-datatype-joda | 2.13.4 |
com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.13.4 |
com.fasterxml.jackson.module | jackson-module-paranamer | 2.13.4 |
com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.13.4 |
com.github.ben-manes.كافيين | كافايين | 2.3.4 |
com.github.fommil | أداة تحميل jniloader | 1.1 |
com.github.fommil.netlib | الذاكرة الأساسية | 1.1.2 |
com.github.fommil.netlib | native_ref-java | 1.1 |
com.github.fommil.netlib | native_ref-java-natives | 1.1 |
com.github.fommil.netlib | native_system-java | 1.1 |
com.github.fommil.netlib | native_system-java-natives | 1.1 |
com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
com.github.luben | zstd-jni | 1.5.2-1 |
com.github.wendykierp | JTransforms | 3.1 |
com.google.code.findbugs | jsr305 | 3.0.0 |
com.google.code.gson | gson | 2.8.6 |
com.google.crypto.tink | تينك | 1.6.1 |
com.google.flatbuffers | flatbuffers-java | 1.12.0 |
com.google.guava | الجوافه | 15.0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.h2database | h2 | 2.0.204 |
com.helger | profiler | 1.1.1 |
com.jcraft | jsch | 0.1.50 |
com.jolbox | cp عظمي | 0.8.0.RELEASE |
com.lihaoyi | sourcecode_2.12 | 0.1.9 |
com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
com.ning | ضغط lzf | 1.1 |
com.sun.mail | javax.mail | 1.5.2 |
com.tdunning | json | 1.8 |
com.thoughtworks.paranamer | paranamer | 2.8 |
com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
com.twitter | برد-java | 0.10.0 |
com.twitter | chill_2.12 | 0.10.0 |
com.twitter | util-app_2.12 | 7.1.0 |
com.twitter | util-core_2.12 | 7.1.0 |
com.twitter | util-function_2.12 | 7.1.0 |
com.twitter | util-jvm_2.12 | 7.1.0 |
com.twitter | util-lint_2.12 | 7.1.0 |
com.twitter | util-registry_2.12 | 7.1.0 |
com.twitter | util-stats_2.12 | 7.1.0 |
com.typesafe | config | 1.2.1 |
com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
com.uber | h3 | 3.7.0 |
com.univocity | محللات أحادية التكافؤ | 2.9.1 |
com.zaxxer | HikariCP | 4.0.3 |
commons-cli | commons-cli | 1.5.0 |
commons-codec | commons-codec | 1.15 |
المجموعات المشتركة | المجموعات المشتركة | 3.2.2 |
commons-dbcp | commons-dbcp | 1.4 |
commons-fileupload | commons-fileupload | 1.3.3 |
commons-httpclient | commons-httpclient | 3.1 |
commons-io | commons-io | 2.11.0 |
commons-lang | commons-lang | 2.6 |
تسجيل المشتركات | تسجيل المشتركات | 1.1.3 |
تجمع مشترك | تجمع مشترك | 1.5.4 |
dev.ludovic.netlib | arpack | 2.2.1 |
dev.ludovic.netlib | بلاس | 2.2.1 |
dev.ludovic.netlib | lapack | 2.2.1 |
info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
io.airlift | أداة ضغط الهواء | 0.21 |
io.delta | delta-sharing-spark_2.12 | 0.5.2 |
io.dropwizard.metrics | metrics-core | 4.1.1 |
io.dropwizard.metrics | metrics-graphite | 4.1.1 |
io.dropwizard.metrics | المقاييس-الفحوصات الصحية | 4.1.1 |
io.dropwizard.metrics | metrics-jetty9 | 4.1.1 |
io.dropwizard.metrics | metrics-jmx | 4.1.1 |
io.dropwizard.metrics | metrics-json | 4.1.1 |
io.dropwizard.metrics | metrics-jvm | 4.1.1 |
io.dropwizard.metrics | metrics-servlets | 4.1.1 |
io.netty | netty-all | 4.1.74.Final |
io.netty | netty-buffer | 4.1.74.Final |
io.netty | netty-codec | 4.1.74.Final |
io.netty | netty-common | 4.1.74.Final |
io.netty | معالج netty | 4.1.74.Final |
io.netty | محلل netty | 4.1.74.Final |
io.netty | netty-tcnative-classes | 2.0.48.Final |
io.netty | netty-transport | 4.1.74.Final |
io.netty | netty-transport-classes-epoll | 4.1.74.Final |
io.netty | netty-transport-classes-kqueue | 4.1.74.Final |
io.netty | netty-transport-native-epoll-linux-aarch_64 | 4.1.74.Final |
io.netty | netty-transport-native-epoll-linux-x86_64 | 4.1.74.Final |
io.netty | netty-transport-native-kqueue-osx-aarch_64 | 4.1.74.Final |
io.netty | netty-transport-native-kqueue-osx-x86_64 | 4.1.74.Final |
io.netty | netty-transport-native-unix-common | 4.1.74.Final |
io.prometheus | واجهة سطر الأوامر البسيطة | 0.7.0 |
io.prometheus | simpleclient_common | 0.7.0 |
io.prometheus | simpleclient_dropwizard | 0.7.0 |
io.prometheus | simpleclient_pushgateway | 0.7.0 |
io.prometheus | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | جامع | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet | jakarta.servlet-api | 4.0.3 |
jakarta.validation | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activation | التنشيط | 1.1.1 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1.1 |
javax.transaction | واجهة برمجة تطبيقات المعاملات | 1.1 |
javax.xml.bind | jaxb-api | 2.2.11 |
التفاف دائري | التفاف دائري | 5.5.1 |
jline | jline | 2.14.6 |
joda-time | joda-time | 2.10.13 |
net.java.dev.jna | jna | 5.8.0 |
net.razorvine | مخلل | 1.2 |
net.sf.jpam | jpam | 1.1 |
net.sf.opencsv | opencsv | 2.3 |
net.sf.supercsv | super-csv | 2.2.0 |
net.snowflake | snowflake-ingest-sdk | 0.9.6 |
net.snowflake | snowflake-jdbc | 3.13.22 |
net.sourceforge.f2j | arpack_combined_all | 0.1 |
org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
org.antlr | ST4 | 4.0.4 |
org.antlr | وقت تشغيل antlr | 3.5.2 |
org.antlr | وقت تشغيل antlr4 | 4.8 |
org.antlr | سلسلة قوالب | 3.2.1 |
org.apache.ant | نمل | 1.9.2 |
org.apache.ant | نملة-jsch | 1.9.2 |
org.apache.ant | ant-launcher | 1.9.2 |
org.apache.سهم | تنسيق السهم | 7.0.0 |
org.apache.سهم | ذاكرة أساسية للسهم | 7.0.0 |
org.apache.سهم | سهم-ذاكرة-netty | 7.0.0 |
org.apache.سهم | خط متجه للسهم | 7.0.0 |
org.apache.avro | avro | 1.11.0 |
org.apache.avro | avro-ipc | 1.11.0 |
org.apache.avro | avro-mapred | 1.11.0 |
org.apache.commons | commons-collections4 | 4.4 |
org.apache.commons | ضغط الشائعات | 1.21 |
org.apache.commons | commons-crypto | 1.1.0 |
org.apache.commons | commons-lang3 | 3.12.0 |
org.apache.commons | commons-math3 | 3.6.1 |
org.apache.commons | commons-text | 1.10.0 |
org.apache.curator | عميل أمين | 2.13.0 |
org.apache.curator | إطار عمل أمين | 2.13.0 |
org.apache.curator | وصفات أمين | 2.13.0 |
org.apache.derby | الدربي | 10.14.2.0 |
org.apache.hadoop | hadoop-client-api | 3.3.4-databricks |
org.apache.hadoop | وقت تشغيل عميل hadoop | 3.3.4 |
org.apache.hive | hive-beeline | 2.3.9 |
org.apache.hive | hive-cli | 2.3.9 |
org.apache.hive | hive-jdbc | 2.3.9 |
org.apache.hive | عميل hive-llap | 2.3.9 |
org.apache.hive | hive-llap-common | 2.3.9 |
org.apache.hive | hive-serde | 2.3.9 |
org.apache.hive | hive-shims | 2.3.9 |
org.apache.hive | hive-storage-api | 2.7.2 |
org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
org.apache.hive.shims | hive-shims-common | 2.3.9 |
org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
org.apache.httpcomponents | httpclient | 4.5.13 |
org.apache.httpcomponents | httpcore | 4.4.14 |
org.apache.ivy | لبلاب | 2.5.0 |
org.apache.logging.log4j | log4j-1.2-api | 2.18.0 |
org.apache.logging.log4j | log4j-api | 2.18.0 |
org.apache.logging.log4j | log4j-core | 2.18.0 |
org.apache.logging.log4j | log4j-slf4j-impl | 2.18.0 |
org.apache.mesos | mesos-shaded-protobuf | 1.4.0 |
org.apache.orc | orc-core | 1.7.6 |
org.apache.orc | orc-mapreduce | 1.7.6 |
org.apache.orc | orc-shims | 1.7.6 |
org.apache.parquet | عمود باركيه | 1.12.3-databricks-0001 |
org.apache.parquet | parquet-common | 1.12.3-databricks-0001 |
org.apache.parquet | ترميز باركيه | 1.12.3-databricks-0001 |
org.apache.parquet | parquet-format-structures | 1.12.3-databricks-0001 |
org.apache.parquet | parquet-hadoop | 1.12.3-databricks-0001 |
org.apache.parquet | باركيه جاكسون | 1.12.3-databricks-0001 |
org.apache.thrift | libfb303 | 0.9.3 |
org.apache.thrift | libthrift | 0.12.0 |
org.apache.xbean | xbean-asm9-shaded | 4.20 |
org.apache.yetus | التعليقات التوضيحية للجمهور | 0.13.0 |
org.apache.zookeeper | zookeeper | 3.6.2 |
org.apache.zookeeper | zookeeper-jute | 3.6.2 |
org.checkerframework | مدقق كهومي | 3.5.0 |
org.codehaus.jackson | jackson-core-asl | 1.9.13 |
org.codehaus.jackson | جاكسون-mapper-asl | 1.9.13 |
org.codehaus.janino | محول برمجي مشترك | 3.0.16 |
org.codehaus.janino | جانينو | 3.0.16 |
org.datanucleus | datanucleus-api-jdo | 4.2.4 |
org.datanucleus | datanucleus-core | 4.1.17 |
org.datanucleus | datanucleus-rdbms | 4.1.19 |
org.datanucleus | javax.jdo | 3.2.0-m3 |
org.eclipse.jetty | عميل jetty | 9.4.46.v20220331 |
org.eclipse.jetty | متابعة jetty | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-http | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-io | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-jndi | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-plus | 9.4.46.v20220331 |
org.eclipse.jetty | وكيل jetty | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-security | 9.4.46.v20220331 |
org.eclipse.jetty | خادم jetty | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-servlet | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-servlets | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-util | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-util-ajax | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-webapp | 9.4.46.v20220331 |
org.eclipse.jetty | jetty-xml | 9.4.46.v20220331 |
org.eclipse.jetty.websocket | websocket-api | 9.4.46.v20220331 |
org.eclipse.jetty.websocket | عميل websocket | 9.4.46.v20220331 |
org.eclipse.jetty.websocket | websocket-common | 9.4.46.v20220331 |
org.eclipse.jetty.websocket | خادم websocket | 9.4.46.v20220331 |
org.eclipse.jetty.websocket | websocket-servlet | 9.4.46.v20220331 |
org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
org.glassfish.hk2 | hk2-api | 2.6.1 |
org.glassfish.hk2 | محدد موقع hk2 | 2.6.1 |
org.glassfish.hk2 | hk2-utils | 2.6.1 |
org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
org.glassfish.hk2.external | إعادة حزم الأوبالين | 2.6.1 |
org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
org.glassfish.jersey.containers | جيرسي حاوية-servlet | 2.36 |
org.glassfish.jersey.containers | جيرسي-حاوية-servlet-core | 2.36 |
org.glassfish.jersey.core | جيرسي-العميل | 2.36 |
org.glassfish.jersey.core | جيرسي المشتركة | 2.36 |
org.glassfish.jersey.core | خادم جيرسي | 2.36 |
org.glassfish.jersey.inject | جيرسي-hk2 | 2.36 |
org.hibernate.validator | مدقق الإسبات | 6.1.0.Final |
org.javassist | javassist | 3.25.0-GA |
org.jboss.logging | تسجيل jboss | 3.3.2.Final |
org.jdbi | jdbi | 2.63.1 |
org.jetbrains | التعليقات التوضيحية | 17.0.0 |
org.joda | joda-convert | 1.7 |
org.jodd | jodd-core | 3.5.2 |
org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
org.json4s | json4s-core_2.12 | 3.7.0-M11 |
org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | lz4-java | 1.8.0 |
org.mariadb.jdbc | mariadb-java-client | 2.7.4 |
org.mlflow | mlflow-spark | 1.27.0 |
org.objenesis | داء objenesis | 2.5.1 |
org.postgresql | postgresql | 42.3.3 |
org.roaringbitmap | هديرBitmap | 0.9.25 |
org.roaringbitmap | الحشوات | 0.9.25 |
org.rocksdb | rocksdbjni | 6.24.2 |
org.rosuda.REngine | REngine | 2.1.0 |
org.scala-lang | scala-compiler_2.12 | 2.12.14 |
org.scala-lang | scala-library_2.12 | 2.12.14 |
org.scala-lang | scala-reflect_2.12 | 2.12.14 |
org.scala-lang.modules | scala-collection-compat_2.12 | 2.4.3 |
org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
org.scala-sbt | واجهة الاختبار | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.0.8 |
org.scalanlp | macros_2.12 | 1.2 |
org.scalanlp | breeze_2.12 | 1.2 |
org.scalatest | scalatest_2.12 | 3.0.8 |
org.slf4j | jcl-over-slf4j | 1.7.36 |
org.slf4j | jul-to-slf4j | 1.7.36 |
org.slf4j | slf4j-api | 1.7.36 |
org.spark-project.spark | غير مستخدم | 1.0.0 |
org.threeten | ثلاثتين إضافية | 1.5.0 |
org.tukaani | xz | 1.8 |
مستوى org.typelevel | algebra_2.12 | 2.0.1 |
مستوى org.typelevel | cats-kernel_2.12 | 2.1.1 |
مستوى org.typelevel | ماكرو-compat_2.12 | 1.1.1 |
مستوى org.typelevel | spire-macros_2.12 | 0.17.0 |
مستوى org.typelevel | spire-platform_2.12 | 0.17.0 |
مستوى org.typelevel | spire-util_2.12 | 0.17.0 |
مستوى org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | wildfly-openssl | 1.0.7.Final |
org.xerial | sqlite-jdbc | 3.8.11.2 |
org.xerial.snappy | snappy-java | 1.1.8.4 |
org.yaml | ثعبان الثعبان | 1.24 |
oro | oro | 2.0.8 |
pl.edu.icm | JLargeArrays | 1.5 |
software.amazon.ion | ion-java | 1.0.2 |
stax | stax-api | 1.0.1 |