Databricks Runtime 14.3 LTS
توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 14.3 LTS، مدعوما ب Apache Spark 3.5.0.
أصدرت Databricks هذا الإصدار في فبراير 2024.
إشعار
LTS يعني أن هذا الإصدار تحت الدعم طويل الأجل. راجع دورة حياة إصدار Databricks Runtime LTS.
تلميح
للاطلاع على ملاحظات الإصدار لإصدارات Databricks Runtime التي وصلت إلى نهاية الدعم (EoS)، راجع ملاحظات إصدار وقت تشغيل Databricks لنهاية الدعم. تم إيقاف إصدارات وقت تشغيل EoS Databricks وقد لا يتم تحديثها.
ميزات وتحسينات جديدة
- دعم نظام ملفات مساحة العمل في وظائف PySpark المعرفة من قبل المستخدم (UDFs) على المجموعات المشتركة
- دعم تحسينات متجه
MERGE
الحذف بدون Photon - واجهات برمجة تطبيقات كتالوج Spark مدعومة بالكامل الآن في وضع الوصول المشترك
- يتوفر Delta UniForm الآن بشكل عام
- الدالة SQL الجديدة EXECUTE IMMEDIATE
- إعادة حساب البيانات التي تتخطى الإحصائيات لجداول دلتا
- معلومات حالة الاستعلام لاستعلامات الدفق ذات الحالة
- استخدام معرف Microsoft Entra لمصادقة Kafka على المجموعات المشتركة
- تمت إضافة دعم لاقتطاع الملفات والأقسام لتحسين أداء الاستعلام
- الإعلان عن المتغيرات المؤقتة في جلسة عمل SQL
- تحديثات Thriftserver لإزالة الميزات غير المستخدمة
- استخدام ملفات مخزن الثقة ومخزن المفاتيح في وحدات تخزين كتالوج Unity
- دعم تنسيق ملف XML الأصلي (معاينة عامة)
- دعم تخزين Cloudflare R2 (معاينة عامة)
- يدعم Spark وdbutils الوصول إلى ملفات مساحة العمل على مجموعات كتالوج Unity للوصول المشترك
- البرامج النصية Init ودعم مكتبة نظام المجموعة على مجموعات كتالوج Unity للوصول المشترك
دعم نظام ملفات مساحة العمل في وظائف PySpark المعرفة من قبل المستخدم (UDFs) على المجموعات المشتركة
يمكن الآن ل PySpark UDFs على المجموعات المشتركة استيراد وحدات Python النمطية من مجلدات Git أو ملفات مساحة العمل أو وحدات تخزين UC.
لمزيد من المعلومات حول العمل مع الوحدات النمطية في مجلدات Git أو ملفات مساحة العمل، راجع العمل مع وحدات Python وR.
دعم تحسينات متجه MERGE
الحذف بدون Photon
لم يعد الفوتون مطلوبا للعمليات MERGE
للاستفادة من تحسينات متجهات الحذف. راجع ما هي متجهات الحذف؟.
واجهات برمجة تطبيقات كتالوج Spark مدعومة بالكامل الآن في وضع الوصول المشترك
يمكنك الآن استخدام جميع الدالات في spark.catalog
واجهة برمجة التطبيقات في كل من Python وSc scala على الحساب الذي تم تكوينه باستخدام وضع الوصول المشترك.
يتوفر Delta UniForm الآن بشكل عام
يتوفر UniForm الآن بشكل عام ويستخدم IcebergCompatV2
ميزة الجدول. يمكنك الآن تمكين UniForm أو ترقيته على الجداول الموجودة. راجع استخدام UniForm لقراءة جداول Delta مع عملاء Iceberg.
الدالة SQL الجديدة EXECUTE IMMEDIATE
يمكنك الآن استخدام بناء جملة EXECUTE IMMEDIATE لدعم الاستعلامات ذات المعلمات في SQL. راجع تنفيذ فوري.
إعادة حساب البيانات التي تتخطى الإحصائيات لجداول دلتا
يمكنك الآن إعادة حساب الإحصائيات المخزنة في سجل Delta بعد تغيير الأعمدة المستخدمة لتخطي البيانات. راجع تحديد أعمدة إحصائيات دلتا.
معلومات حالة الاستعلام لاستعلامات الدفق ذات الحالة
يمكنك الآن الاستعلام عن بيانات حالة الدفق المنظم وبيانات التعريف. راجع قراءة معلومات حالة الدفق المنظم.
استخدام معرف Microsoft Entra لمصادقة Kafka على المجموعات المشتركة
يمكنك الآن مصادقة خدمات مراكز الأحداث عبر OAuth باستخدام معرف Microsoft Entra على الحساب الذي تم تكوينه باستخدام وضع الوصول المشترك. راجع مصادقة كيان الخدمة مع معرف Microsoft Entra ومراكز أحداث Azure.
تمت إضافة دعم لاقتطاع الملفات والأقسام لتحسين أداء الاستعلام
لتسريع بعض الاستعلامات التي تعتمد على المساواة المتسامحة مع القيم الخالية في شروط JOIN، ندعم الآن DynamicFilePruning
و DynamicPartitionPruning
للمشغل EqualNullSafe
في JOINs.
الإعلان عن المتغيرات المؤقتة في جلسة عمل SQL
يقدم هذا الإصدار القدرة على الإعلان عن المتغيرات المؤقتة في جلسة العمل التي يمكن تعيينها ثم الإشارة إليها من داخل الاستعلامات. راجع المتغيرات.
تحديثات Thriftserver لإزالة الميزات غير المستخدمة
تم تحديث التعليمات البرمجية ل Thriftserver لإزالة التعليمات البرمجية للميزات القديمة. وبسبب هذه التغييرات، لم تعد التكوينات التالية مدعومة:
- لم تعد خدمة JARs المساعدة ل Apache Hive، التي تم تكوينها باستخدام الخاصية
hive.aux.jars.path
، مدعومة للاتصالاتhive-thriftserver
. - لم يعد ملف Hive global init (
.hiverc
)، الذي تم تكوين موقعه باستخدام الخاصيةhive.server2.global.init.file.location
أوHIVE_CONF_DIR
متغير البيئة، مدعوما للاتصالاتhive-thriftserver
.
استخدام ملفات مخزن الثقة ومخزن المفاتيح في وحدات تخزين كتالوج Unity
يمكنك الآن استخدام ملفات مخزن الثقة ومخزن المفاتيح في وحدات تخزين كتالوج Unity للمصادقة على سجل مخطط Confluent لبيانات المخزن المؤقت avro أو البروتوكول. راجع وثائق avro أو المخازن المؤقتة للبروتوكول.
دعم تنسيق ملف XML الأصلي (معاينة عامة)
يتوفر الآن دعم تنسيق ملف XML الأصلي في المعاينة العامة. يتيح دعم تنسيق ملف XML استيعاب بيانات XML والاستعلام عنها وتحليلها لمعالجة الدفعات أو دفقها. يمكنه استنتاج وتطوير أنواع المخططات والبيانات تلقائيا، ويدعم تعبيرات SQL مثل from_xml
، ويمكنه إنشاء مستندات XML. لا يتطلب جرة خارجية ويعمل بسلاسة مع أداة التحميل التلقائي و read_files
COPY INTO
و جداول Delta Live. راجع قراءة ملفات XML وكتابتها.
دعم تخزين Cloudflare R2 (معاينة عامة)
يمكنك الآن استخدام Cloudflare R2 كمخزن سحابي للبيانات المسجلة في كتالوج Unity. تم تصميم Cloudflare R2 بشكل أساسي لحالات استخدام "مشاركة دلتا" التي تريد فيها تجنب رسوم خروج البيانات التي يفرضها موفرو السحابة عندما تعبر البيانات المناطق. يدعم تخزين R2 جميع بيانات Databricks والأصول الذكاء الاصطناعي المدعومة في AWS S3 وAzure Data Lake Storage Gen2 وGoogle Cloud Storage. راجع استخدام النسخ المتماثلة Cloudflare R2 أو ترحيل التخزين إلى R2 وإنشاء بيانات اعتماد تخزين للاتصال ب Cloudflare R2.
يدعم Spark وdbutils الوصول إلى ملفات مساحة العمل على مجموعات كتالوج Unity للوصول المشترك
يتم الآن دعم الوصول إلى Spark وقراءة dbutils
وكتابة ملفات مساحة العمل على مجموعات كتالوج Unity في وضع الوصول المشترك. راجع العمل مع ملفات مساحة العمل.
البرامج النصية Init ودعم مكتبة نظام المجموعة على مجموعات كتالوج Unity للوصول المشترك
يتوفر الآن بشكل عام تثبيت البرامج النصية init على نطاق المجموعة ومكتبات Python و JAR على مجموعات كتالوج Unity في وضع الوصول المشترك، بما في ذلك التثبيت باستخدام نهج نظام المجموعة. توصي Databricks بتثبيت البرامج النصية والمكتبات init من وحدات تخزين كتالوج Unity.
ترقيات المكتبة
- مكتبات Python التي تمت ترقيتها:
- fastjsonschema من 2.19.0 إلى 2.19.1
- filelock من 3.12.4 إلى 3.13.1
- googleapis-common-protos من 1.61.0 إلى 1.62.0
- التعبئة والتغليف من 22.0 إلى 23.2
- مكتبات R التي تمت ترقيتها:
- الأجنبية من 0.8-82 إلى 0.8-85
- nlme من 3.1-162 إلى 3.1-163
- rpart من 4.1.19 إلى 4.1.21
- مكتبات Java التي تمت ترقيتها:
- com.databricks.databricks-sdk-java من 0.7.0 إلى 0.13.0
- org.apache.orc.orc-core من 1.9.1-shaded-protobuf إلى 1.9.2-shaded-protobuf
- org.apache.orc.orc-mapreduce من 1.9.1-shaded-protobuf إلى 1.9.2-shaded-protobuf
- org.apache.orc.orc-shims من 1.9.1 إلى 1.9.2
- org.scala-lang.modules.scala-collection-compat_2.12 من 2.9.0 إلى 2.11.0
Apache Spark
يتضمن Databricks Runtime 14.3 Apache Spark 3.5.0. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 14.2 (EoS)، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:
- [SPARK-46541] [SC-153546][SQL][CONNECT] إصلاح مرجع العمود الغامض في الصلة الذاتية
- [SPARK-45433] إرجاع "[SC-145163][SQL] إصلاح استنتاج مخطط CSV/JSON...
- [SPARK-46723] [14.3][SASP-2792][SC-153425][CONNECT][SCALA] جعل addArtifact قابلا لإعادة المحاولة
- [SPARK-46660] [SC-153391][CONNECT] طلبات إعادة إرفاق التحديثات الحيوية ل SessionHolder
- [SPARK-46670] [SC-153273][PYTHON][SQL] جعل DataSourceManager الذاتي قادرا على الاستنساخ عن طريق فصل مصادر بيانات Python الثابتة ووقت التشغيل
- [SPARK-46720] [SC-153410][SQL][PYTHON] إعادة بناء التعليمات البرمجية لمصدر بيانات Python للتوافق مع مصادر البيانات المضمنة الأخرى في DSv2
- [SPARK-46684] [SC-153275][PYTHON][CONNECT] إصلاح CoGroup.applyInPandas/السهم لتمرير الوسيطات بشكل صحيح
- [SPARK-46667] [SC-153271][SC-153263][SQL] XML: طرح خطأ على مصدر بيانات XML متعدد
- [SPARK-46382] [SC-151881][SQL]XML: افتراضي يتجاهل مساحات الامتداد إلى صحيح
- [SPARK-46382] [SC-153178][SQL] XML: تحديث المستند ل
ignoreSurroundingSpaces
- [SPARK-45292] إرجاع "[SC-151609][SQL][HIVE] إزالة Guava من الفئات المشتركة من IsolatedClientLoader"
- [SPARK-45292] [SC-151609][SQL][HIVE] إزالة Guava من الفئات المشتركة من IsolatedClientLoader
- [SPARK-46311] [SC-150137][CORE] تسجيل الحالة النهائية لبرامج التشغيل أثناء
Master.removeDriver
- [SPARK-46413] [SC-151052][PYTHON] التحقق من صحة returnType من سهم Python UDF
- [SPARK-46633] [WARMFIX][SC-153092][SQL] إصلاح قارئ Avro للتعامل مع الكتل ذات الطول الصفري
- [SPARK-46537] [SC-151286][SQL] تحويل NPE والتأكيدات من الأوامر إلى الأخطاء الداخلية
- [SPARK-46179] [SC-151678][SQL] إضافة CrossDbmsQueryTestSuites، الذي يقوم بتشغيل DBMS الأخرى مقابل الملفات الذهبية مع DBMS الأخرى، بدءا من Postgres
- [SPARK-44001] [SC-151413][PROTOBUF] إضافة خيار للسماح بإلغاء تغليف أنواع برامج التضمين المعروفة جيدا
- [SPARK-40876] [SC-151786][SQL] توسيع ترقية النوع للفواصل العشرية ذات المقياس الأكبر في برامج قراءة Parquet
- [SPARK-46605] [SC-151769][CONNECT] إنشاء
lit/typedLit
دالة في دعم وحدة الاتصالs.c.immutable.ArraySeq
- [SPARK-46634] [SC-153005][SQL] يجب ألا يتم التنقل لأسفل للتحقق من صحة القيمة الحرفية إلى حقول فارغة
- [SPARK-37039] [SC-153094][PS] إصلاح
Series.astype
للعمل بشكل صحيح مع القيمة المفقودة - [SPARK-46312] [SC-150163][CORE] استخدام
lower_camel_case
فيstore_types.proto
- [SPARK-46630] [SC-153084][SQL] XML: التحقق من صحة اسم عنصر XML عند الكتابة
- [SPARK-46627] [SC-152981][SS][واجهة المستخدم] إصلاح محتوى تلميح أداة المخطط الزمني على واجهة مستخدم البث
- [SPARK-46248] [SC-151774][SQL] XML: دعم خيارات ignoreCorruptFiles و ignoreMissingFiles
- [SPARK-46386] [SC-150766][PYTHON] تحسين تأكيدات المراقبة (pyspark.sql.observation)
- [SPARK-46581] [SC-151789][CORE] تحديث التعليق على isZero في AccumulatorV2
- [SPARK-46601] [SC-151785] [CORE] إصلاح خطأ السجل في handleStatusMessage
- [SPARK-46568] [SC-151685][PYTHON] جعل خيارات مصدر بيانات Python قاموسا غير حساس لحالة الأحرف
- [SPARK-46611] [SC-151783][CORE] إزالة ThreadLocal عن طريق استبدال SimpleDateFormat ب DateTimeFormatter
- [SPARK-46604] [SC-151768][SQL] تقديم
Literal.apply
الدعمs.c.immuable.ArraySeq
- [SPARK-46324] [SC-150223][SQL][PYTHON] إصلاح اسم الإخراج pyspark.sql.functions.user و session_user
- [SPARK-46621] [SC-151794][PYTHON] العنوان خال من Exception.getMessage في استثناء Py4J الملتقط
- [SPARK-46598] [SC-151767][SQL] يجب أن يحترم OrcColumnarBatchReader وضع الذاكرة عند إنشاء متجهات الأعمدة للعمود المفقود
- [SPARK-46613] [SC-151778][SQL][PYTHON] تسجيل الاستثناء الكامل عند فشل البحث عن مصادر بيانات Python
- [SPARK-46559] [SC-151364][MLLIB]
export
التفاف في اسم الحزمة مع backticks - [SPARK-46522] [SC-151784][PYTHON] حظر تسجيل مصدر بيانات Python مع تعارضات الأسماء
- [SPARK-45580] [SC-149956][SQL] معالجة الحالة حيث يصبح الاستعلام الفرعي المتداخل صلة وجود
- [SPARK-46609] [SC-151714][SQL] تجنب الانفجار الأسي في PartitioningPreservingUnaryExecNode
- [SPARK-46535] [SC-151288][SQL] إصلاح NPE عند وصف عمود موسع بدون إحصائيات العمود
- [SPARK-46599] [SC-147661][SC-151770][SQL] XML: استخدام TypeCoercion.findTightestCommonType للتحقق من التوافق
- [SPARK-40876] [SC-151129][SQL] توسيع ترقيات النوع في برامج قراءة Parquet
- [SPARK-46179] [SC-151069][SQL] سحب التعليمات البرمجية إلى وظائف قابلة لإعادة الاستخدام في SQLQueryTestSuite
- [SPARK-46586] [SC-151679][SQL] الدعم
s.c.immutable.ArraySeq
كما فيcustomCollectionCls
MapObjects
- [SPARK-46585] [SC-151622][CORE] تم
metricPeaks
إنشاؤه مباشرة بدلاimmutable.ArraySeq
من استخدامهmutable.ArraySeq.toSeq
فيExecutor
- [SPARK-46488] [SC-151173][SQL] تخطي trimAll call أثناء تحليل الطابع الزمني
- [SPARK-46231] [SC-149724][PYTHON] ترحيل كافة ال &
TypeError
المتبقيةNotImplementedError
إلى إطار عمل خطأ PySpark - [SPARK-46348] [SC-150281][CORE] دعم
spark.deploy.recoveryTimeout
- [SPARK-46313] [SC-150164][CORE] مدة استرداد السجل
Spark HA
- [SPARK-46358] [SC-150307][CONNECT] تبسيط التحقق من الشرط في
ResponseValidator#verifyResponse
- [SPARK-46380] [SC-151078][SQL]استبدل الوقت/التاريخ الحالي قبل تقييم تعبيرات الجدول المضمنة.
- [SPARK-46563] [SC-151441][SQL] عرض simpleString not follow conf spark.sql.debug.maxToStringFields
- [SPARK-46101] [SC-149211][CORE][SQL][MLLIB][SS][R][CONNCT][GRAPHX] تقليل عمق المكدس عن طريق استبدال (string|array).size ب (string|array).length
- [SPARK-46539] [SC-151469][SQL] SELECT * EXCEPT (كافة الحقول من بنية) يؤدي إلى فشل التأكيد
- [SPARK-46565] [SC-151414][PYTHON] تحسين فئات الخطأ ورسائل الخطأ لمصادر بيانات Python
- [SPARK-46576] [SC-151614][SQL] تحسين رسائل الخطأ لوضع حفظ مصدر البيانات غير المعتمد
- [SPARK-46540] [SC-151355][PYTHON] احترام أسماء الأعمدة عندما يقرأ مصدر بيانات Python مخرجات دالة القراءة المسماة كائنات الصف
- [SPARK-46577] [SC-151448][SQL] HiveMetastoreLazyInitializationSuite تسرب حالة جلسة عمل الخلية
- [SPARK-44556] [SC-151562][SQL] إعادة الاستخدام
OrcTail
عند تمكين vectorizedReader - [SPARK-46587] [SC-151618][SQL] XML: إصلاح تحويل عدد صحيح كبير ل XSD
- [SPARK-46382] [SC-151297][SQL] XML: التقاط القيم المتداخلة بين العناصر
- [SPARK-46567] [SC-151447][CORE] إزالة ThreadLocal ل ReadAheadInputStream
- [SPARK-45917] [SC-151269][PYTHON][SQL] التسجيل التلقائي لمصدر بيانات Python عند بدء التشغيل
- [SPARK-28386] [SC-151014][SQL] يتعذر حل أعمدة ORDER BY باستخدام GROUP BY و HAVING
- [SPARK-46524] [SC-151446][SQL] تحسين رسائل الخطأ لوضع الحفظ غير الصالح
- [SPARK-46294] [SC-150672][SQL] تنظيف دلالات init مقابل القيمة الصفرية
- [SPARK-46301] [SC-150100][CORE] دعم
spark.worker.(initial|max)RegistrationRetries
- [SPARK-46542] [SC-151324][SQL] إزالة التحقق
c>=0
من حيثExternalCatalogUtils#needsEscaping
أنه صحيح دائما - [SPARK-46553] [SC-151360][PS]
FutureWarning
لinterpolate
مع نوع الكائن - [SPARK-45914] [SC-151312][PYTHON] دعم الالتزام وإجهاض واجهة برمجة التطبيقات لكتابة مصدر بيانات Python
- [SPARK-46543] [SC-151350][PYTHON][CONNECT] جعل
json_tuple
رمي PySparkValueError للحاويات الفارغة - [SPARK-46520] [SC-151227][PYTHON] دعم وضع الكتابة فوق لكتابة مصدر بيانات Python
- [SPARK-46502] [SC-151235][SQL] دعم أنواع الطوابع الزمنية في UnwrapCastInBinaryComparison
- [SPARK-46532] [SC-151279][CONNECT] تمرير معلمات الرسالة في بيانات التعريف الخاصة ب
ErrorInfo
- [SPARK-46397] إرجاع "[SC-151311][PYTHON][CONNECT] يجب أن ترفع الدالة
sha2
ل غير صالحnumBits
"PySparkValueError
- [SPARK-46170] [SC-149472][SQL] دعم إدخال قواعد استراتيجية مخطط نشر الاستعلام التكيفي في SparkSessionExtensions
- [SPARK-46444] [SC-151195][SQL] يجب ألا يقوم V2SessionCatalog#createTable بتحميل الجدول
- [SPARK-46397] [SC-151311][PYTHON][CONNECT] يجب رفع
PySparkValueError
الدالةsha2
إلى غير صالحnumBits
- [SPARK-46145] [SC-149471][SQL] spark.catalog.listTables لا تطرح استثناء عند عدم العثور على الجدول أو طريقة العرض
- [SPARK-46272] [SC-151012][SQL] دعم CTAS باستخدام مصادر DSv2
- [SPARK-46480] [SC-151127][CORE][SQL] إصلاح NPE عند محاولة مهمة ذاكرة التخزين المؤقت للجدول
- [SPARK-46100] [SC-149051][CORE][PYTHON] تقليل عمق المكدس عن طريق استبدال (string|array).size ب (string|array).length
- [SPARK-45795] [SC-150764][SQL] يدعم DS V2 وضع الدفع لأسفل
- [SPARK-46485] [SC-151133][SQL] يجب ألا يضيف V1Write فرزا عند عدم الحاجة
- [SPARK-46468] [SC-151121] [SQL] معالجة خطأ COUNT في الاستعلامات الفرعية EXISTS باستخدام التجميع بدون مفاتيح التجميع
- [SPARK-46246] [SC-150927][SQL] تنفيذ دعم SQL الفوري
- [SPARK-46498] [SC-151199][CORE] إزالة
shuffleServiceEnabled
منo.a.spark.util.Utils#getConfiguredLocalDirs
- [SPARK-46440] [SC-150807][SQL] تعيين تكوينات إعادة الأساسية إلى
CORRECTED
الوضع بشكل افتراضي - [SPARK-45525] [SC-151120][SQL][PYTHON] دعم كتابة مصدر بيانات Python باستخدام DSv2
- [SPARK-46505] [SC-151187][CONNECT] جعل عتبة وحدات البايت قابلة للتكوين في
ProtoUtils.abbreviate
- [SPARK-46447] [SC-151025][SQL] إزالة تكوينات SQL القديمة لإعادة بناء التاريخ والوقت
- [SPARK-46443] [SC-151123][SQL] يجب أن تحدد الدقة العشرية والمقياس حسب لهجة H2.
- [SPARK-46384] [SC-150694][SPARK-46404][SS][واجهة المستخدم] إصلاح مخطط مكدس مدة العملية على صفحة الدفق المنظم
- [SPARK-46207] [SC-151068][SQL] دعم MergeInto في DataFrameWriterV2
- [SPARK-46452] [SC-151018][SQL] إضافة واجهة برمجة تطبيقات جديدة في DataWriter لكتابة مكرر للسجلات
- [SPARK-46273] [SC-150313][SQL] دعم INSERT INTO/OVERWRITE باستخدام مصادر DSv2
- [SPARK-46344] [SC-150267][CORE] التحذير بشكل صحيح عند وجود برنامج تشغيل بنجاح ولكن الرئيسي غير متصل
- [SPARK-46284] [SC-149944][PYTHON][CONNECT] إضافة
session_user
دالة إلى Python - [SPARK-46043] [SC-149786][SQL] دعم إنشاء جدول باستخدام مصادر DSv2
- [SPARK-46323] [SC-150191][PYTHON] إصلاح اسم الإخراج pyspark.sql.functions.now
- [SPARK-46465] [SC-151059][PYTHON][CONNECT] إضافة
Column.isNaN
في PySpark - [SPARK-46456] [SC-151050][CORE] إضافة
spark.ui.jettyStopTimeout
لتعيين مهلة إيقاف خادم Jetty لإلغاء حظر إيقاف تشغيل SparkContext - [SPARK-43427] [SC-150356][PROTOBUF] spark protobuf: السماح ببث أنواع الأعداد الصحيحة غير الموقعة
- [SPARK-46399] [SC-151013][14.x][الذاكرة الأساسية] إضافة حالة الخروج إلى حدث Application End لاستخدام Spark Listener
- [SPARK-46423] [SC-150752][PYTHON][SQL] إنشاء مثيل مصدر بيانات Python في DataSource.lookupDataSourceV2
- [SPARK-46424] [SC-150765][PYTHON][SQL] دعم مقاييس Python في مصدر بيانات Python
- [SPARK-46330] [SC-151015] تحميل كتل واجهة مستخدم Spark لفترة طويلة عند تمكين HybridStore
- [SPARK-46378] [SC-150397][SQL] لا تزال إزالة الفرز بعد تحويل التجميع إلى مشروع
- [SPARK-45506] [SC-146959][CONNECT] إضافة دعم URI لبلاب إلى SparkConnect addArtifact
- [SPARK-45814] [SC-147871][CONNECT][SQL]قم بإغلاق مكالمة ArrowConverters.createEmptyArrowBatch() لتجنب تسرب الذاكرة
- [SPARK-46427] [SC-150759][PYTHON][SQL] تغيير وصف مصدر بيانات Python ليكون جميلا في الشرح
- [SPARK-45597] [SC-150730][PYTHON][SQL] دعم إنشاء جدول باستخدام مصدر بيانات Python في SQL (DSv2 exec)
- [SPARK-46402] [SC-150700][PYTHON] إضافة getMessageParameters ودعم getQueryContext
- [SPARK-46453] [SC-150897][CONNECT] طرح استثناء من
internalError()
فيSessionHolder
- [SPARK-45758] [SC-147454][SQL] تقديم معين لأجهزة ترميز ضغط hadoop
- [SPARK-46213] [PYTHON] تقديم
PySparkImportError
لإطار عمل الخطأ - [SPARK-46230] [SC-149960][PYTHON]
RetriesExceeded
الترحيل إلى خطأ PySpark - [SPARK-45035] [SC-145887][SQL] إصلاح ignoreCorruptFiles/ignoreMissingFiles مع CSV/JSON متعدد الأسطر سيبلغ عن الخطأ
- [SPARK-46289] [SC-150846][SQL] دعم طلب UDTs في الوضع المفسر
- [SPARK-46229] [SC-150798][PYTHON][CONNECT] إضافة applyInArrow إلى groupBy وتجميع المشاركة في Spark Connect
- [SPARK-46420] [SC-150847][SQL] إزالة النقل غير المستخدم في SparkSQLCLIDriver
- [SPARK-46226] [PYTHON] ترحيل الكل المتبقي
RuntimeError
إلى إطار عمل خطأ PySpark - [SPARK-45796] [SC-150613][SQL] وضع الدعم() ضمن GROUP (ORDER BY col)
- [SPARK-40559] [SC-149686][PYTHON][14.X] إضافة applyInArrow إلى groupBy و cogroup
- [SPARK-46069] [SC-149672][SQL] دعم نوع الطابع الزمني لإلغاء التفريع إلى نوع التاريخ
- [SPARK-46406] [SC-150770][SQL] تعيين اسم لفئة الخطأ _LEGACY_ERROR_TEMP_1023
- [SPARK-46431] [SC-150782][SS] التحويل
IllegalStateException
إلىinternalError
في مكررات الجلسة - [SPARK-45807] [SC-150751][SQL] تحسين واجهة برمجة تطبيقات ViewCatalog
- [SPARK-46009] [SC-149771][SQL][CONNECT] دمج قاعدة التحليل ل PercentileCont و PercentileDisc في functionCall
- [SPARK-46403] [SC-150756][SQL] فك ترميز parquet ثنائي باستخدام أسلوب getBytesUnsafe
- [SPARK-46389] [SC-150779][CORE] إغلاق المثيل
RocksDB/LevelDB
يدويا عندcheckVersion
طرح استثناء - [SPARK-46360] [SC-150376][PYTHON] تحسين تصحيح أخطاء رسالة الخطأ باستخدام واجهة برمجة تطبيقات جديدة
getMessage
- [SPARK-46233] [SC-149766][PYTHON] ترحيل الكل المتبقي
AttributeError
إلى إطار عمل خطأ PySpark - [SPARK-46394] [SC-150599][SQL] إصلاح مشكلات spark.catalog.listDatabases() على المخططات ذات الأحرف الخاصة عند
spark.sql.legacy.keepCommandOutputSchema
تعيينها إلى true - [SPARK-45964] [SC-148484][SQL] إزالة ملحق sql الخاص في حزمة XML وJSON ضمن حزمة المحفز
- [SPARK-45856] [SC-148691] نقل ArtifactManager من Spark Connect إلى SparkSession (sql/core)
- [SPARK-46409] [SC-150714][CONNECT] إصلاح البرنامج النصي لإطلاق spark-connect-scala-client
- [SPARK-46416] [SC-150699][CORE] إضافة
@tailrec
إلىHadoopFSUtils#shouldFilterOutPath
- [SPARK-46115] [SC-149154][SQL] تقييد مجموعات الأحرف في
encode()
- [SPARK-46253] [SC-150416][PYTHON] تخطيط قراءة مصدر بيانات Python باستخدام MapInArrow
- [SPARK-46339] [SC-150266][SS] يجب عدم التعامل مع الدليل الذي يحمل اسم رقم الدفعة كسجل بيانات تعريف
- [SPARK-46353] [SC-150396][CORE] إعادة بناء التعليمات البرمجية لتحسين
RegisterWorker
تغطية اختبار الوحدة - [SPARK-45826] [SC-149061][SQL] إضافة تكوين SQL لتتبعات المكدس في سياق استعلام DataFrame
- [SPARK-45649] [SC-150300][SQL] توحيد إطار عمل التحضير ل OffsetWindowFunctionFrame
- [SPARK-46346] [SC-150282][CORE] إصلاح الشكل الرئيسي لتحديث عامل من
UNKNOWN
إلىALIVE
علىRegisterWorker
msg - [SPARK-46388] [SC-150496][SQL] يفتقد HiveAnalysis حماية نمط
query.resolved
- [SPARK-46401] [SC-150609][CORE] استخدام
!isEmpty()
بدلاRoaringBitmap
منgetCardinality() > 0
فيRemoteBlockPushResolver
- [SPARK-46393] [SC-150603][SQL] تصنيف الاستثناءات في كتالوج جدول JDBC
- [SPARK-45798] [SC-150513][CONNECT] المتابعة: إضافة serverSessionId إلى SessionHolderInfo
- [SPARK-46153] [SC-146564][SC-150508][SQL] XML: إضافة دعم TimestampNTZType
- [SPARK-46075] [SC-150393][CONNECT] تحسينات على SparkConnectSessionManager
- [SPARK-46357] [SC-150596] استبدل استخدام الوثائق غير الصحيح ل setConf ب conf.set
- [SPARK-46202] [SC-150420][CONNECT] كشف واجهات برمجة تطبيقات ArtifactManager الجديدة لدعم الدلائل المستهدفة المخصصة
- [SPARK-45824] [SC-147648][SQL] فرض فئة الخطأ في
ParseException
- [SPARK-45845] [SC-148163][SS][واجهة المستخدم] إضافة عدد صفوف الحالة التي تم إخلاؤها إلى واجهة المستخدم المتدفقة
- [SPARK-46316] [SC-150181][CORE] تمكين
buf-lint-action
في الوحدة النمطيةcore
- [SPARK-45816] [SC-147656][SQL] إرجاع
NULL
عند تجاوز السعة أثناء التحويل من الطابع الزمني إلى الأعداد الصحيحة - [SPARK-46333] [SC-150263][SQL] استبدال
IllegalStateException
بSparkException.internalError
في محفز - [SPARK-45762] [SC-148486][CORE] دعم مديري التبديل العشوائي المحددين في جرات المستخدم عن طريق تغيير ترتيب بدء التشغيل
- [SPARK-46239] [SC-149752][CORE] إخفاء
Jetty
المعلومات - [SPARK-45886] [SC-148089][SQL] إخراج تتبع المكدس الكامل في
callSite
سياق DataFrame - [SPARK-46290] [SC-150059][PYTHON] تغيير saveMode إلى علامة منطقية ل DataSourceWriter
- [SPARK-45899] [SC-148097][CONNECT] تعيين errorClass في errorInfoToThrowable
- [SPARK-45841] [SC-147657][SQL] كشف تتبع المكدس بواسطة
DataFrameQueryContext
- [SPARK-45843] [SC-147721][CORE] الدعم
killall
في واجهة برمجة تطبيقات إرسال REST - [SPARK-46234] [SC-149711][PYTHON] تقديم
PySparkKeyError
إطار عمل خطأ PySpark - [SPARK-45606] [SC-147655][SQL] قيود الإصدار على عامل تصفية وقت التشغيل متعدد الطبقات
- [SPARK-45725] [SC-147006][SQL] إزالة عامل تصفية وقت تشغيل الاستعلام الفرعي IN غير الافتراضي
- [SPARK-45694] [SC-147314][SPARK-45695][SQL] تنظيف استخدام
View.force
واجهة برمجة التطبيقات المهملة وScalaNumberProxy.signum
- [SPARK-45805] [SC-147488][SQL] جعل
withOrigin
أكثر عمومية - [SPARK-46292] [SC-150086][CORE][واجهة المستخدم] إظهار ملخص العمال في MasterPage
- [SPARK-45685] [SC-146881][CORE][SQL] استخدم
LazyList
بدلا منStream
- [SPARK-45888] [SC-149945][SS] تطبيق إطار عمل فئة الخطأ على مصدر بيانات الحالة (بيانات التعريف)
- [SPARK-46261] [SC-150111][CONNECT]
DataFrame.withColumnsRenamed
يجب الاحتفاظ بترتيب الإملاء/الخريطة - [SPARK-46263] [SC-149933][SQL][SS][التعلم الآلي][MLLIB][واجهة المستخدم]
SeqOps.view
التنظيف والتحويلاتArrayOps.view
- [SPARK-46029] [SC-149255][SQL] الهروب من عرض الأسعار الفردي،
_
وللدفع%
لأسفل DS V2 - [SPARK-46275] [SC-150189] Protobuf: إرجاع القيمة الخالية في الوضع المتساهل عند فشل إلغاء التسلسل.
- [SPARK-46320] [SC-150187][CORE] دعم
spark.master.rest.host
- [SPARK-46092] [SC-149658][SQL] لا تدفع لأسفل عوامل تصفية مجموعة صفوف Parquet التي تتجاوز الحد الأقصى
- [SPARK-46300] [SC-150097][PYTHON][CONNECT] مطابقة السلوك الثانوي المطابق في العمود مع تغطية الاختبار الكاملة
- [SPARK-46298] [SC-150092][PYTHON][CONNECT] مطابقة تحذير الإهمال وحالة الاختبار وخطأ Catalog.createExternalTable
- [SPARK-45689] [SC-146898][SPARK-45690][SPARK-45691][CORE][SQL] تنظيف استخدام واجهة برمجة التطبيقات المهملة المتعلقة
StringContext/StringOps/RightProjection/LeftProjection/Either
باستخدام ونوعBufferedIterator/CanBuildFrom/Traversable
- [SPARK-33393] [SC-148407][SQL] دعم جدول SHOW الموسع في الإصدار 2
- [SPARK-45737] [SC-147011][SQL] إزالة غير ضروري
.toArray[InternalRow]
فيSparkPlan#executeTake
- [SPARK-46249] [SC-149797][SS] طلب تأمين المثيل للحصول على مقاييس RocksDB لمنع السباق مع عمليات الخلفية
- [SPARK-46260] [SC-149940][PYTHON][SQL]
DataFrame.withColumnsRenamed
يجب أن تحترم ترتيب الإملاء - [SPARK-46274] [SC-150043] [SQL] إصلاح حساب عامل تشغيل النطاقStats() للتحقق من الصلاحية الطويلة قبل التحويل
- [SPARK-46040] [SC-149767][SQL][Python] تحديث واجهة برمجة تطبيقات UDTF للأعمدة "لتحليل" التقسيم/الترتيب لدعم التعبيرات العامة
- [SPARK-46287] [SC-149949][PYTHON][CONNECT]
DataFrame.isEmpty
يجب أن تعمل مع جميع أنواع البيانات - [SPARK-45678] [SC-146825][CORE] Cover BufferReleasingInputStream.available/reset ضمن tryOrFetchFailedException
- [SPARK-45667] [SC-146716][CORE][SQL][CONNECT] قم بتنظيف استخدام واجهة برمجة التطبيقات المهملة المتعلقة ب
IterableOnceExtensionMethods
. - [SPARK-43980] [SC-148992][SQL] تقديم بناء الجملة
select * except
- [SPARK-46269] [SC-149816][PS] تمكين المزيد من اختبارات دالة توافق NumPy
- [SPARK-45807] [SC-149851][SQL] إضافة createOrReplaceView(..) / replaceView(..) إلى ViewCatalog
- [SPARK-45742] [SC-147212][CORE][CONNECT][MLLIB][PYTHON] قدم دالة ضمنية ل Scala Array لتضمينها في
immutable.ArraySeq
. - [SPARK-46205] [SC-149655][CORE] تحسين
PersistenceEngine
الأداء باستخدامKryoSerializer
- [SPARK-45746] [SC-149359][Python] إرجاع رسائل خطأ معينة إذا كان أسلوب UDTF 'analyze' أو 'eval' يقبل قيما خاطئة أو يرجعها
- [SPARK-46186] [SC-149707][CONNECT] إصلاح انتقال الحالة غير القانوني عند مقاطعة ExecuteThreadRunner قبل البدء
- [SPARK-46262] [SC-149803][PS] تمكين اختبار لكائن
np.left_shift
Pandas on-Spark. - [SPARK-45093] [SC-149679][CONNECT][PYTHON] دعم معالجة الأخطاء وتحويلها بشكل صحيح ل AddArtifactHandler
- [SPARK-46188] [SC-149571][المستند][3.5] إصلاح CSS للجداول التي تم إنشاؤها في مستند Spark
- [SPARK-45940] [SC-149549][PYTHON] إضافة InputPartition إلى واجهة DataSourceReader
- [SPARK-43393] [SC-148301][SQL] خطأ تجاوز تعبير تسلسل العنوان.
- [SPARK-46144] [SC-149466][SQL] فشل إدراج في ... عبارة REPLACE إذا كان الشرط يحتوي على استعلام فرعي
- [SPARK-46118] [SC-149096][SQL][SS][CONNECT] استخدم
SparkSession.sessionState.conf
بدلا منSQLContext.conf
وضع علامةSQLContext.conf
كمهمل - [SPARK-45760] [SC-147550][SQL] إضافة مع التعبير لتجنب تكرار التعبيرات
- [SPARK-43228] [SC-149670][SQL] تتطابق مفاتيح الانضمام أيضا مع PartitioningCollection في CoalesceBucketsInJoin
- [SPARK-46223] [SC-149691][PS] اختبار SparkPandasNotImplementedError مع تنظيف التعليمات البرمجية غير المستخدمة
- [SPARK-46119] [SC-149205][SQL] أسلوب التجاوز
toString
لUnresolvedAlias
- [SPARK-46206] [SC-149674][PS] استخدام استثناء نطاق أضيق لمعالج SQL
- [SPARK-46191] [SC-149565][CORE] تحسين
FileSystemPersistenceEngine.persist
خطأ msg في حالة الملف الموجود - [SPARK-46036] [SC-149356][SQL] إزالة فئة الخطأ من الدالة raise_error
- [SPARK-46055] [SC-149254][SQL] إعادة كتابة تطبيق واجهات برمجة تطبيقات قاعدة بيانات الكتالوج
- [SPARK-46152] [SC-149454][SQL] XML: إضافة دعم DecimalType في استنتاج مخطط XML
- [SPARK-45943] [SC-149452][SQL] نقل DetermineTableStats إلى قواعد الحل
- [SPARK-45887] [SC-148994][SQL] محاذاة التعليمات البرمجية وتنفيذ غير codegen
Encode
- [SPARK-45022] [SC-147158][SQL] توفير سياق لأخطاء واجهة برمجة تطبيقات مجموعة البيانات
- [SPARK-45469] [SC-145135][CORE][SQL][CONNECT][PYTHON] استبدل
toIterator
بiterator
لIterableOnce
- [SPARK-46141] [SC-149357][SQL] تغيير الإعداد الافتراضي ل spark.sql.legacy.ctePrecedencePolicy إلى CORRECTED
- [SPARK-45663] [SC-146617][CORE][MLLIB] استبدال
IterableOnceOps#aggregate
بIterableOnceOps#foldLeft
- [SPARK-45660] [SC-146493][SQL] إعادة استخدام الكائنات الحرفية في قاعدة ComputeCurrentTime
- [SPARK-45803] [SC-147489][CORE] إزالة الذي لم يعد مستخدما
RpcAbortException
- [SPARK-46148] [SC-149350][PS] إصلاح اختبار pyspark.pandas.mlflow.load_model (Python 3.12)
- [SPARK-46110] [SC-149090][PYTHON] استخدام فئات الخطأ في الكتالوج، التكوين، الاتصال، المراقبة، وحدات pandas
- [SPARK-45827] [SC-149203][SQL] إصلاحات المتغير مع تعطيل codegen والقارئ المتجه
- [SPARK-46080] Revert "[SC-149012][PYTHON] Upgrade Cloudpickle to 3.0.0"
- [SPARK-45460] [SC-144852][SQL] استبدال
scala.collection.convert.ImplicitConversions
بscala.jdk.CollectionConverters
- [SPARK-46073] [SC-149019][SQL] إزالة الدقة الخاصة لمساحة الاسم التي لم يتم حلها لأوامر معينة
- [SPARK-45600] [SC-148976][PYTHON] جعل مستوى جلسة تسجيل مصدر بيانات Python
- [SPARK-46074] [SC-149063][CONNECT][SCALA] تفاصيل غير كافية في رسالة الخطأ حول فشل UDF
- [SPARK-46114] [SC-149076][PYTHON] إضافة PySparkIndexError لإطار عمل الخطأ
- [SPARK-46120] [SC-149083][CONNECT][PYTHON] إزالة دالة المساعد
DataFrame.withPlan
- [SPARK-45927] [SC-148660][PYTHON] تحديث معالجة المسار لمصدر بيانات Python
- [SPARK-46062] [14.x][SC-148991][SQL] مزامنة علامة isStreaming بين تعريف CTE والمرجع
- [SPARK-45698] [SC-146736][CORE][SQL][SS] تنظيف استخدام واجهة برمجة التطبيقات المهملة المتعلقة
Buffer
- [SPARK-46064] [SC-148984][SQL][SS] الانتقال إلى EliminateEventTimeWatermark إلى المحلل وتغييره ليدخل حيز التنفيذ فقط على الطفل الذي تم حله
- [SPARK-45922] [SC-149038][CONNECT][العميل] إعادة بناء التعليمات البرمجية الثانوية (متابعة لنهج متعددة)
- [SPARK-45851] [SC-148419][CONNECT][SCALA] دعم نهج متعددة في عميل scala
- [SPARK-45974] [SC-149062][SQL] إضافة scan.filterAttributes حكم غير فارغ ل RowLevelOperationRuntimeGroupFiltering
- [SPARK-46085] [SC-149049][CONNECT] Dataset.groupingSets في عميل Scala Spark Connect
- [SPARK-45136] [SC-146607][CONNECT] تحسين ClosureCleaner مع دعم Ammonite
- [SPARK-46084] [SC-149020][PS] عملية تحويل نوع البيانات لإعادة بناء التعليمات البرمجية للنوع الفئوي.
- [SPARK-46083] [SC-149018][PYTHON] جعل SparkNoSuchElementException كواجهة برمجة تطبيقات خطأ متعارف عليه
- [SPARK-46048] [SC-148982][PYTHON][CONNECT] دعم DataFrame.groupingSets في Python Spark Connect
- [SPARK-46080] [SC-149012][PYTHON] ترقية Cloudpickle إلى 3.0.0
- [SPARK-46082] [SC-149015][PYTHON][CONNECT] إصلاح تمثيل سلسلة protobuf لواجهة برمجة تطبيقات وظائف Pandas باستخدام Spark Connect
- [SPARK-46065] [SC-148985][PS] إعادة بناء التعليمات البرمجية
(DataFrame|Series).factorize()
لاستخدامcreate_map
. - [SPARK-46070] [SC-148993][SQL] تحويل نمط regex برمجيا في SparkDateTimeUtils.getZoneId خارج الحلقة الساخنة
- [SPARK-46063] [SC-148981][PYTHON][CONNECT] تحسين رسائل الخطأ المتعلقة وأنواع الوسيطات في لطيف، والمجموعة، والمجموعة المحورية
- [SPARK-44442] [SC-144120][MESOS] إزالة دعم Mesos
- [SPARK-45555] [SC-147620][PYTHON] يتضمن كائنا قابلا لتصحيح الأخطاء للتأكيد الفاشل
- [SPARK-46048] [SC-148871][PYTHON][SQL] دعم DataFrame.groupingSets في PySpark
- [SPARK-45768] [SC-147304][SQL][PYTHON] جعل خطأ تكوين وقت التشغيل لتنفيذ Python في SQL
- [SPARK-45996] [SC-148586][PYTHON][CONNECT] إظهار رسائل متطلبات التبعية المناسبة ل Spark Connect
- [SPARK-45681] [SC-146893][واجهة المستخدم] استنساخ إصدار js من UIUtils.errorMessageCell لعرض خطأ متناسق على واجهة المستخدم
- [SPARK-45767] [SC-147225][CORE] حذف
TimeStampedHashMap
وUT الخاص به - [SPARK-45696] [SC-148864][CORE] أسلوب الإصلاح tryCompleteWith في السمة Promise مهمل
- [SPARK-45503] [SC-146338][SS] إضافة Conf لتعيين ضغط RocksDB
- [SPARK-45338] [SC-143934][CORE][SQL] استبدال
scala.collection.JavaConverters
بscala.jdk.CollectionConverters
- [SPARK-44973] [SC-148804][SQL] إصلاح
ArrayIndexOutOfBoundsException
فيconv()
- [SPARK-45912] [SC-144982][SC-148467][SQL] تحسين واجهة برمجة تطبيقات XSDToSchema: التغيير إلى واجهة برمجة تطبيقات HDFS لإمكانية وصول ذوي الاحتياجات الخاصة إلى التخزين السحابي
- [SPARK-45819] [SC-147570][CORE] الدعم
clear
في واجهة برمجة تطبيقات إرسال REST - [SPARK-45552] [14.x][SC-146874][PS] تقديم معلمات مرنة إلى
assertDataFrameEqual
- [SPARK-45815] [SC-147877][SQL][البث][14.x][CHERRY-PICK] توفير واجهة لمصادر البث الأخرى لإضافة
_metadata
أعمدة - [SPARK-45929] [SC-148692][SQL] دعم عملية groupingSets في واجهة برمجة تطبيقات إطار البيانات
- [SPARK-46012] [SC-148693][CORE] يجب ألا يقرأ EventLogFileReader السجلات المتداولة إذا كان ملف حالة التطبيق مفقودا
- [SPARK-45965] [SC-148575][SQL] نقل تعبيرات تقسيم DSv2 إلى functions.partitioning
- [SPARK-45971] [SC-148541][CORE][SQL] تصحيح اسم حزمة
SparkCollectionUtils
إلىorg.apache.spark.util
- [SPARK-45688] [SC-147356][SPARK-45693][CORE] تنظيف استخدام واجهة برمجة التطبيقات المهملة المتعلقة
MapOps
بالتصحيحmethod += in trait Growable is deprecated
- [SPARK-45962] [SC-144645][SC-148497][SQL] خيار الإزالة
treatEmptyValuesAsNulls
والاستخدامnullValue
بدلا من ذلك في XML - [SPARK-45988] [SC-148580][SPARK-45989][PYTHON] إصلاح typehints لمعالجة
list
GenericAlias في Python 3.11+ - [SPARK-45999] [SC-148595][PS] استخدام مخصص
PandasProduct
فيcumprod
- [SPARK-45986] [SC-148583][التعلم الآلي][PYTHON] إصلاح
pyspark.ml.torch.tests.test_distributor
في Python 3.11 - [SPARK-45994] [SC-148581][PYTHON] تغيير
description-file
إلىdescription_file
- [SPARK-45575] [SC-146713][SQL] دعم خيارات السفر عبر الوقت لواجهة برمجة تطبيقات قراءة df
- [SPARK-45747] [SC-148404][SS] استخدام معلومات مفتاح البادئة في بيانات تعريف الحالة لمعالجة حالة القراءة لتجميع نافذة الجلسة
- [SPARK-45898] [SC-148213][SQL] إعادة كتابة واجهات برمجة التطبيقات لجدول الكتالوج لاستخدام خطة منطقية لم يتم حلها
- [SPARK-45828] [SC-147663][SQL] إزالة الأسلوب المهمل في dsl
- [SPARK-45990] [SC-148576][SPARK-45987][PYTHON][CONNECT] الترقية
protobuf
إلى 4.25.1 للدعمPython 3.11
- [SPARK-45911] [SC-148226][CORE] جعل TLS1.3 الافتراضي ل RPC SSL
- [SPARK-45955] [SC-148429][واجهة المستخدم] طي دعم تفاصيل فلامجراف وتفريغ مؤشر الترابط
- [SPARK-45936] [SC-148392][PS] تحسين
Index.symmetric_difference
- [SPARK-45389] [SC-144834][SQL][3.5] تصحيح قاعدة مطابقة MetaException على الحصول على بيانات تعريف القسم
- [SPARK-45655] [SC-148085][SQL][SS] السماح بتعبيرات غير محددة داخل AggregateFunctions في CollectMetrics
- [SPARK-45946] [SC-148448][SS] إصلاح استخدام كتابة FileUtils المهملة لتمرير مجموعة الأحرف الافتراضية في RocksDBSuite
- [SPARK-45511] [SC-148285][SS] مصدر بيانات الحالة - القارئ
- [SPARK-45918] [SC-148293][PS] تحسين
MultiIndex.symmetric_difference
- [SPARK-45813] [SC-148288][CONNECT][PYTHON] إرجاع المقاييس التي تمت ملاحظتها من الأوامر
- [SPARK-45867] [SC-147916][CORE] دعم
spark.worker.idPattern
- [SPARK-45945] [SC-148418][CONNECT] إضافة دالة مساعد ل
parser
- [SPARK-45930] [SC-148399][SQL] دعم UDFs غير المحددة في MapInPandas/MapInArrow
- [SPARK-45810] [SC-148356][Python] إنشاء Python UDTF API لإيقاف استهلاك الصفوف من جدول الإدخال
- [SPARK-45731] [SC-147929][SQL] قم أيضا بتحديث إحصائيات القسم باستخدام
ANALYZE TABLE
الأمر - [SPARK-45868] [SC-148355][CONNECT] تأكد من
spark.table
استخدام نفس المحلل مع vanilla spark - [SPARK-45882] [SC-148161][SQL] يجب أن يحترم تقسيم نشر BroadcastHashJoinExec CoalescedHashPartitioning
- [SPARK-45710] [SC-147428][SQL] تعيين أسماء للخطأ _LEGACY_ERROR_TEMP_21[59,60,61,62]
- [SPARK-45915] [SC-148306][SQL] معاملة الرقم العشري (x، 0) مثل نوع التكامل في
PromoteStrings
- [SPARK-45786] [SC-147552][SQL] إصلاح نتائج الضرب العشري والقسمة غير الدقيقة
- [SPARK-45871] [SC-148084][CONNECT] تحويل مجموعة التحسينات المتعلقة
.toBuffer
ب في الوحدات النمطيةconnect
- [SPARK-45822] [SC-147546][CONNECT] قد يبحث SparkConnectSessionManager عن sparkcontext متوقف
- [SPARK-45913] [SC-148289][PYTHON] اجعل السمات الداخلية خاصة من أخطاء PySpark.
- [SPARK-45827] [SC-148201][SQL] إضافة نوع بيانات متغير في Spark.
- [SPARK-44886] [SC-147876][SQL] تقديم عبارة CLUSTER BY ل CREATE/REPLACE TABLE
- [SPARK-45756] [SC-147959][CORE] دعم
spark.master.useAppNameAsAppId.enabled
- [SPARK-45798] [SC-147956][CONNECT] تأكيد معرف جلسة العمل من جانب الخادم
- [SPARK-45896] [SC-148091][SQL] إنشاء
ValidateExternalType
بالنوع المتوقع الصحيح - [SPARK-45902] [SC-148123][SQL] إزالة الدالة
resolvePartitionColumns
غير المستخدمة منDataSource
- [SPARK-45909] [SC-148137][SQL] إزالة
NumericType
المدلى بها إذا كان يمكن أن تصل بأمان في المدلى بهاIsNotNull
- [SPARK-42821] [SC-147715][SQL] إزالة المعلمات غير المستخدمة في أساليب splitFiles
- [SPARK-45875] [SC-148088][CORE] إزالة
MissingStageTableRowData
منcore
الوحدة النمطية - [SPARK-45783] [SC-148120][PYTHON][CONNECT] تحسين رسائل الخطأ عند تمكين وضع Spark Connect ولكن لم يتم تعيين عنوان URL البعيد
- [SPARK-45804] [SC-147529][واجهة المستخدم] إضافة تكوين spark.ui.threadDump.flamegraphEnabled لتشغيل/إيقاف تشغيل الرسم البياني لهب
- [SPARK-45664] [SC-146878][SQL] تقديم معين لرمز ضغط orc
- [SPARK-45481] [SC-146715][SQL] تقديم معين لرمز ضغط باركيه
- [SPARK-45752] [SC-148005][SQL] تبسيط التعليمات البرمجية للتحقق من علاقات CTE غير المؤقتة
- [SPARK-44752] [SC-146262][SQL] XML: تحديث Spark Docs
- [SPARK-45752] [SC-147869][SQL] يجب التحقق من CTE غير المدقق بواسطة CheckAnalysis0
- [SPARK-45842] [SC-147853][SQL] إعادة بناء التعليمات البرمجية لواجهات برمجة تطبيقات دالة الكتالوج لاستخدام المحلل
- [SPARK-45639] [SC-147676][SQL][PYTHON] دعم تحميل مصادر بيانات Python في DataFrameReader
- [SPARK-45592] [SC-146977][SQL] مشكلة التصحيح في AQE مع InMemoryTableScanExec
- [SPARK-45794] [SC-147646][SS] تقديم مصدر بيانات تعريف الحالة للاستعلام عن معلومات بيانات تعريف حالة الدفق
- [SPARK-45739] [SC-147059][PYTHON] التقاط IOException بدلا من EOFException وحده لمخطأ
- [SPARK-45677] [SC-146700] تسجيل خطأ أفضل لواجهة برمجة تطبيقات المراقبة
- [SPARK-45544] [SC-146873][CORE] دمج دعم SSL في TransportContext
- [SPARK-45654] [SC-147152][PYTHON] إضافة واجهة برمجة تطبيقات كتابة مصدر بيانات Python
- [SPARK-45771] [SC-147270][CORE] تمكين
spark.eventLog.rolling.enabled
بشكل افتراضي - [SPARK-45713] [SC-146986][PYTHON] دعم تسجيل مصادر بيانات Python
- [SPARK-45656] [SC-146488][SQL] إصلاح الملاحظة عند الملاحظات المسماة بنفس الاسم على مجموعات بيانات مختلفة
- [SPARK-45808] [SC-147571][CONNECT][PYTHON] معالجة أفضل للأخطاء لاستثناءات SQL
- [SPARK-45774] [SC-147353][CORE][واجهة المستخدم] الدعم
spark.master.ui.historyServerUrl
فيApplicationPage
- [SPARK-45776] [SC-147327][CORE] إزالة التحقق
MapOutputTrackerMaster#unregisterShuffle
من القيم الخالية الدفاعية لإضافة في SPARK-39553 - [SPARK-45780] [SC-147410][CONNECT] نشر كافة مؤشرات ترابط عميل Spark Connect في InheritableThread
- [SPARK-45785] [SC-147419][CORE] دعم
spark.deploy.appNumberModulo
تدوير رقم التطبيق - [SPARK-45793] [SC-147456][CORE] تحسين برامج ترميز الضغط المضمنة
- [SPARK-45757] [SC-147282][ML] تجنب إعادة حساب NNZ في Binarizer
- [SPARK-45209] [SC-146490][CORE][واجهة المستخدم] دعم مخطط لهب لصفحة تفريغ مؤشر ترابط المنفذ
- [SPARK-45777] [SC-147319][CORE] الدعم
spark.test.appId
فيLocalSchedulerBackend
- [SPARK-45523] [SC-146331][PYTHON] إعادة بناء التعليمات البرمجية للتحقق من القيم الخالية للحصول على اختصارات
- [SPARK-45711] [SC-146854][SQL] تقديم معين لأجهزة ترميز ضغط avro
- [SPARK-45523] [SC-146077][Python] إرجاع رسالة خطأ مفيدة إذا كان UDTF يرجع بلا لأي عمود غير يقبل القيم الخالية
- [SPARK-45614] [SC-146729][SQL] تعيين أسماء للخطأ _LEGACY_ERROR_TEMP_215[6,7,8]
- [SPARK-45755] [SC-147164][SQL] التحسين
Dataset.isEmpty()
من خلال تطبيق الحد العالمي1
- [SPARK-45569] [SC-145915][SQL] تعيين اسم إلى _LEGACY_ERROR_TEMP_2153 الخطأ
- [SPARK-45749] [SC-147153][CORE][WEBUI] إصلاح
Spark History Server
لفرزDuration
العمود بشكل صحيح - [SPARK-45754] [SC-147169][CORE] دعم
spark.deploy.appIdPattern
- [SPARK-45707] [SC-146880][SQL] تبسيط
DataFrameStatFunctions.countMinSketch
باستخدامCountMinSketchAgg
- [SPARK-45753] [SC-147167][CORE] دعم
spark.deploy.driverIdPattern
- [SPARK-45763] [SC-147177][CORE][واجهة المستخدم] تحسين
MasterPage
لإظهارResource
العمود فقط عند وجوده - [SPARK-45112] [SC-143259][SQL] استخدام الدقة المستندة إلى تم حلها في وظائف مجموعة بيانات SQL
دعم برنامج تشغيل Databricks ODBC/JDBC
يدعم Databricks برامج تشغيل ODBC/JDBC التي تم إصدارها في العامين الماضيين. يرجى تنزيل برامج التشغيل التي تم إصدارها مؤخرا والترقية (تنزيل ODBC، تنزيل JDBC).
تحديثات الصيانة
راجع تحديثات صيانة Databricks Runtime 14.3.
بيئة النظام
- نظام التشغيل: Ubuntu 22.04.3 LTS
- Java: Zulu 8.74.0.17-CA-linux64
- Scala: 2.12.15
- Python: 3.10.12
- R: 4.3.1
- Delta Lake: 3.1.0
مكتبات Python المثبتة
مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
---|---|---|---|---|---|
anyio | 3.5.0 | argon2-cffi | 21.3.0 | روابط argon2-cffi | 21.2.0 |
الرموز المميزة | 2.0.5 | سلاسل السلاسل | 22.1.0 | تثبيت خلفي | 0.2.0 |
beautifulsoup4 | 4.11.1 | black | 22.6.0 | بيض | 4.1.0 |
وامض | 1.4 | boto3 | 1.24.28 | روبوت الدردشة | 1.27.96 |
شهادة | 2022.12.7 | cffi | 1.15.1 | تجزئة | 4.0.0 |
charset-normalizer | 2.0.4 | نقر | 8.0.4 | الاتصالات | 0.1.2 |
مخطط إحاطة | 1.0.5 | التشفير | 39.0.1 | دورة | 0.11.0 |
Cython | 0.29.32 | databricks-sdk | 0.1.6 | dbus-python | 1.2.18 |
تصحيح الأخطاء | 1.6.7 | ديكور | 5.1.1 | defusedxml | 0.7.1 |
استياء | 0.3.7 | docstring-to-markdown | 0.11 | نقاط الإدخال | 0.4 |
تنفيذ | 0.8.3 | نظرة عامة على الواجهات | 1.1.1 | fastjsonschema | 2.19.1 |
قفل الملف | 3.13.1 | أصوام الخطوط | 4.25.0 | googleapis-common-protos | 1.62.0 |
grpcio | 1.48.2 | حالة grpcio | 1.48.1 | httplib2 | 0.20.2 |
idna | 3.4 | بيانات تعريف importlib | 4.6.4 | ipykernel | 6.25.0 |
ipython | 8.14.0 | ipython-genutils | 0.2.0 | عناوين ipywidgets | 7.7.2 |
jedi | 0.18.1 | سيارة جيب | 0.7.1 | جينجا 2 | 3.1.2 |
مسار jmespath | 0.10.0 | joblib | 1.2.0 | jsonschema | 4.17.3 |
jupyter-client | 7.3.4 | jupyter-server | 1.23.4 | jupyter_core | 5.2.0 |
jupyterlab-pygments | 0.1.2 | jupyterlab-widgets | 1.0.0 | أداة إنشاء المفاتيح | 23.5.0 |
kiwisolver | 1.4.4 | launchpadlib | 1.10.16 | lazr.restfulclient | 0.14.4 |
lazr.uri | 1.0.6 | lxml | 4.9.1 | MarkupSafe | 2.1.1 |
matplotlib | 3.7.0 | matplotlib-inline | 0.1.6 | مكابي | 0.7.0 |
سوء الحظ | 0.8.4 | المزيد من التكرارات | 8.10.0 | mypy-extensions | 0.4.3 |
nbclassic | 0.5.2 | nbclient | 0.5.13 | nbconvert | 6.5.4 |
تنسيق nbformat | 5.7.0 | nest-asyncio | 1.5.6 | nodeenv | 1.8.0 |
notebook | 6.5.2 | notebook_shim | 0.2.2 | numpy | 1.23.5 |
أواتهليب | 3.2.0 | التغليف | 23.2 | pandas | 1.5.3 |
عوامل تصفية pandocfilter | 1.5.0 | parso | 0.8.3 | pathspec | 0.10.3 |
بتسي | 0.5.3 | pexpect | 4.8.0 | pickleshare | 0.7.5 |
مخدة | 9.4.0 | pip | 22.3.1 | المنصات | 2.5.2 |
بشكل مخطط | 5.9.0 | توصيل | 1.0.0 | prometheus-client | 0.14.1 |
مجموعة أدوات المطالبة | 3.0.36 | protobuf | 4.24.0 | psutil | 5.9.0 |
psycopg2 | 2.9.3 | عملية ptyprocess | 0.7.0 | تقييم خالص | 0.2.2 |
pyarrow | 8.0.0 | إصلاح pyarrow-hotfix | 0.5 | pycparser | 2.21 |
pydantic | 1.10.6 | pyflakes | 3.1.0 | Pygments | 2.11.2 |
PyGObject | 3.42.1 | PyJWT | 2.3.0 | pyodbc | 4.0.32 |
pyparsing | 3.0.9 | تمام | 1.1.294 | pyrsistent | 0.18.0 |
python-dateutil | 2.8.2 | python-lsp-jsonrpc | 1.1.1 | خادم python-lsp | 1.8.0 |
تكوين pytool | 1.2.5 | pytz | 2022.7 | pyzmq | 23.2.0 |
الطلبات | 2.28.1 | حبل | 1.7.0 | s3transfer | 0.6.2 |
scikit-learn | 1.1.1 | شفرة | 1.10.0 | بحر محمول | 0.12.2 |
مخزن البيانات السرية | 3.3.1 | Send2Trash | 1.8.0 | أدوات الإعداد | 65.6.3 |
ستة | 1.16.0 | شم | 1.2.0 | شوربة الحساء | 2.3.2.post1 |
ssh-import-id | 5.11 | بيانات المكدس | 0.2.0 | نماذج الإحصائيات | 0.13.5 |
مثابره | 8.1.0 | terminado | 0.17.1 | threadpoolctl | 2.2.0 |
tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 | tomli | 2.0.1 |
اعصار | 6.1 | سمات السمات | 5.7.1 | typing_extensions | 4.4.0 |
ujson | 5.4.0 | ترقيات غير مراقبة | 0.1 | urllib3 | 1.26.14 |
virtualenv | 20.16.7 | wadllib | 1.3.6 | wcwidth | 0.2.5 |
ترميزات الويب | 0.5.1 | عميل websocket | 0.58.0 | whatthepatch | 1.0.2 |
دولاب | 0.38.4 | عنصر واجهة المستخدم | 3.6.1 | yapf | 0.33.0 |
zipp | 1.0.0 |
مكتبات R المثبتة
يتم تثبيت مكتبات R من لقطة Posit مدير الحِزَم CRAN على 2023-02-10.
مكتبة | إصدار | مكتبة | إصدار | مكتبة | إصدار |
---|---|---|---|---|---|
سهم | 12.0.1 | askpass | 1.1 | assertthat | 0.2.1 |
backports | 1.4.1 | الأساس | 4.3.1 | base64enc | 0.1-3 |
بت | 4.0.5 | bit64 | 4.0.5 | كائن ثنائي كبير الحجم | 1.2.4 |
boot | 1.3-28 | المشروب | 1.0-8 | بريو | 1.1.3 |
broom | 1.0.5 | bslib | 0.5.0 | ذاكرة التخزين المؤقت | 1.0.8 |
callr | 3.7.3 | علامة إقحام | 6.0-94 | cellranger | 1.1.0 |
كرون | 2.3-61 | فئة | 7.3-22 | cli | 3.6.1 |
clipr | 0.8.0 | ساعة | 0.7.0 | نظام مجموعة | 2.1.4 |
codetools | 0.2-19 | colorspace | 2.1-0 | العلامة الشائعة | 1.9.0 |
compiler | 4.3.1 | config | 0.3.1 | تتعارض | 1.2.0 |
cpp11 | 0.4.4 | crayon | 1.5.2 | بيانات الاعتماد | 1.3.2 |
curl | 5.0.1 | data.table | 1.14.8 | مجموعات البيانات | 4.3.1 |
DBI | 1.1.3 | dbplyr | 2.3.3 | تنازلي | 1.4.2 |
devtools | 2.4.5 | الرسم التخطيطي | 1.6.5 | diffobj | 0.3.5 |
digest | 0.6.33 | إضاءة هابطة | 0.4.3 | dplyr | 1.1.2 |
dtplyr | 1.3.1 | e1071 | 1.7-13 | علامة الحذف | 0.3.2 |
التقييم | 0.21 | fansi | 1.0.4 | مسافة بعيدة | 2.1.1 |
خريطة سريعة | 1.1.1 | fontawesome | 0.5.1 | forcats | 1.0.0 |
Foreach | 1.5.2 | foreign | 0.8-85 | زور | 0.2.0 |
fs | 1.6.2 | future | 1.33.0 | future.apply | 1.11.0 |
تغرغر | 1.5.1 | generics | 0.1.3 | غيرت | 1.9.2 |
ggplot2 | 3.4.2 | غ | 1.4.0 | صور gitcred | 0.1.2 |
glmnet | 4.1-7 | عموميات | 0.16.2 | glue | 1.6.2 |
googledrive | 2.1.1 | googlesheets4 | 1.1.1 | gower | 1.0.1 |
graphics | 4.3.1 | grDevices | 4.3.1 | grid | 4.3.1 |
gridExtra | 2.3 | gsubfn | 0.7 | gtable | 0.3.3 |
هاردات | 1.3.0 | haven | 2.5.3 | highr | 0.10 |
hms | 1.1.3 | htmltools | 0.5.5 | htmlwidgets | 1.6.2 |
httpuv | 1.6.11 | httr | 1.4.6 | httr2 | 0.2.3 |
ids | 1.0.1 | ini | 0.3.1 | ipred | 0.9-14 |
isoband | 0.2.7 | iterators | 1.0.14 | jquerylib | 0.1.4 |
jsonlite | 1.8.7 | KernSmooth | 2.23-21 | knitr | 1.43 |
labeling | 0.4.2 | فيما بعد | 1.3.1 | lattice | 0.21-8 |
lava | 1.7.2.1 | دورة الحياة | 1.0.3 | listenv | 0.9.0 |
lubridate | 1.9.2 | magrittr | 2.0.3 | markdown | 1.7 |
MASS | 7.3-60 | مصفوفة | 1.5-4.1 | المذكرة | 2.0.1 |
الأساليب | 4.3.1 | mgcv | 1.8-42 | mime | 0.12 |
واجهة مستخدم مصغرة | 0.1.1.1 | ModelMetrics | 1.2.2.2 | modelr | 0.1.11 |
munsell | 0.5.0 | nlme | 3.1-163 | nnet | 7.3-19 |
numDeriv | 2016.8-1.1 | openssl | 2.0.6 | parallel | 4.3.1 |
بالتوازي | 1.36.0 | pillar | 1.9.0 | pkgbuild | 1.4.2 |
pkgconfig | 2.0.3 | pkgdown | 2.0.7 | pkgload | 1.3.2.1 |
plogr | 0.2.0 | plyr | 1.8.8 | مدح | 1.0.0 |
prettyunits | 1.1.1 | بروك | 1.18.4 | processx | 3.8.2 |
prodlim | 2023.03.31 | ملفات تعريفية | 0.3.8 | التقدم | 1.2.2 |
متدرج التقدم | 0.13.0 | الوعود | 1.2.0.1 | proto | 1.0.0 |
الوكيل | 0.4-27 | ps | 1.7.5 | purrr | 1.0.1 |
r2d3 | 0.2.6 | R6 | 2.5.1 | رعوج | 1.2.5 |
randomForest | 4.7-1.1 | طيور الراب | 0.3.3 | rcmdcheck | 1.4.0 |
RColorBrewer | 1.1-3 | Rcpp | 1.0.11 | RcppEigen | 0.3.3.9.3 |
readr | 2.1.4 | readxl | 1.4.3 | recipes | 1.0.6 |
rematch | 1.0.1 | إعادة المباراة2 | 2.1.2 | أجهزة التحكم عن بعد | 2.4.2 |
reprex | 2.0.2 | reshape2 | 1.4.4 | rlang | 1.1.1 |
rmarkdown | 2.23 | RODBC | 1.3-20 | roxygen2 | 7.2.3 |
rpart | 4.1.21 | rprojroot | 2.0.3 | Rserve | 1.8-11 |
RSQLite | 2.3.1 | rstudioapi | 0.15.0 | تحويلات | 2.1.2 |
rvest | 1.0.3 | ساس | 0.4.6 | scales | 1.2.1 |
selectr | 0.4-2 | معلومات الجلسة | 1.2.2 | شكل | 1.4.6 |
بَرَّاق | 1.7.4.1 | قوالب المصدر | 0.1.7-1 | sparklyr | 1.8.1 |
spatial | 7.3-15 | splines | 4.3.1 | sqldf | 0.4-11 |
SQUAREM | 2021.1 | stats | 4.3.1 | stats4 | 4.3.1 |
stringi | 1.7.12 | stringr | 1.5.0 | survival | 3.5-5 |
sys | 3.4.2 | الشبكات الأساسية للنظام | 1.0.4 | tcltk | 4.3.1 |
اختبار الذي | 3.1.10 | تشكيل النص | 0.3.6 | tibble | 3.2.1 |
tidyr | 1.3.0 | tidyselect | 1.2.0 | tidyverse | 2.0.0 |
تغيير الوقت | 0.2.0 | timeDate | 4022.108 | tinytex | 0.45 |
الأدوات | 4.3.1 | tzdb | 0.4.0 | محدد موقع المعلومات (urlchecker) | 1.0.1 |
استخدام هذا | 2.2.2 | utf8 | 1.2.3 | utils | 4.3.1 |
uuid | 1.1-0 | vctrs | 0.6.3 | viridisLite | 0.4.2 |
غرفة vroom | 1.6.3 | والدو | 0.5.1 | whisker | 0.4.1 |
withr | 2.5.0 | xfun | 0.39 | xml2 | 1.3.5 |
xopen | 1.0.0 | xtable | 1.8-4 | yaml | 2.3.7 |
zip | 2.3.0 |
مكتبات Java و Scala المثبتة (إصدار مجموعة Scala 2.12)
معرف مجموعة | معرف البيانات الاصطناعية | إصدار |
---|---|---|
antlr | antlr | 2.7.7 |
com.amazonaws | amazon-kinesis-client | 1.12.0 |
com.amazonaws | aws-java-sdk-autoscaling | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudformation | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudfront | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudhsm | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudsearch | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudtrail | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatch | 1.12.390 |
com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.390 |
com.amazonaws | aws-java-sdk-codedeploy | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.390 |
com.amazonaws | aws-java-sdk-cognitosync | 1.12.390 |
com.amazonaws | aws-java-sdk-config | 1.12.390 |
com.amazonaws | aws-java-sdk-core | 1.12.390 |
com.amazonaws | aws-java-sdk-datapipeline | 1.12.390 |
com.amazonaws | aws-java-sdk-directconnect | 1.12.390 |
com.amazonaws | aws-java-sdk-directory | 1.12.390 |
com.amazonaws | aws-java-sdk-dynamodb | 1.12.390 |
com.amazonaws | aws-java-sdk-ec2 | 1.12.390 |
com.amazonaws | aws-java-sdk-ecs | 1.12.390 |
com.amazonaws | aws-java-sdk-efs | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticache | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.390 |
com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.390 |
com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.390 |
com.amazonaws | aws-java-sdk-emr | 1.12.390 |
com.amazonaws | aws-java-sdk-glacier | 1.12.390 |
com.amazonaws | aws-java-sdk-glue | 1.12.390 |
com.amazonaws | aws-java-sdk-iam | 1.12.390 |
com.amazonaws | aws-java-sdk-importexport | 1.12.390 |
com.amazonaws | aws-java-sdk-kinesis | 1.12.390 |
com.amazonaws | aws-java-sdk-kms | 1.12.390 |
com.amazonaws | aws-java-sdk-lambda | 1.12.390 |
com.amazonaws | aws-java-sdk-logs | 1.12.390 |
com.amazonaws | aws-java-sdk-machinelearning | 1.12.390 |
com.amazonaws | aws-java-sdk-opsworks | 1.12.390 |
com.amazonaws | aws-java-sdk-rds | 1.12.390 |
com.amazonaws | aws-java-sdk-redshift | 1.12.390 |
com.amazonaws | aws-java-sdk-route53 | 1.12.390 |
com.amazonaws | aws-java-sdk-s3 | 1.12.390 |
com.amazonaws | aws-java-sdk-ses | 1.12.390 |
com.amazonaws | aws-java-sdk-simpledb | 1.12.390 |
com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.390 |
com.amazonaws | aws-java-sdk-sns | 1.12.390 |
com.amazonaws | aws-java-sdk-sqs | 1.12.390 |
com.amazonaws | aws-java-sdk-ssm | 1.12.390 |
com.amazonaws | aws-java-sdk-storagegateway | 1.12.390 |
com.amazonaws | aws-java-sdk-sts | 1.12.390 |
com.amazonaws | دعم aws-java-sdk | 1.12.390 |
com.amazonaws | مكتبات aws-java-sdk-swf | 1.11.22 |
com.amazonaws | مساحات عمل aws-java-sdk | 1.12.390 |
com.amazonaws | jmespath-java | 1.12.390 |
com.clearspring.analytics | استدر | 2.9.6 |
com.databricks | Rserve | 1.8-3 |
com.databricks | databricks-sdk-java | 0.13.0 |
com.databricks | jets3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
com.esotericsoftware | kryo مظلل | 4.0.2 |
com.esotericsoftware | سجل الحد الأدنى | 1.3.0 |
com.fasterxml | زميل | 1.3.4 |
com.fasterxml.jackson.core | التعليقات التوضيحية ل جاكسون | 2.15.2 |
com.fasterxml.jackson.core | جاكسون النواة | 2.15.2 |
com.fasterxml.jackson.core | جاكسون-databind | 2.15.2 |
com.fasterxml.jackson.dataformat | جاكسون-dataformat-cbor | 2.15.2 |
com.fasterxml.jackson.dataformat | جاكسون-dataformat-yaml | 2.15.2 |
com.fasterxml.jackson.datatype | جاكسون-datatype-joda | 2.15.2 |
com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.15.1 |
com.fasterxml.jackson.module | jackson-module-paranamer | 2.15.2 |
com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.15.2 |
com.github.ben-manes.كافيين | كافايين | 2.9.3 |
com.github.fommil | أداة تحميل jniloader | 1.1 |
com.github.fommil.netlib | native_ref-java | 1.1 |
com.github.fommil.netlib | native_ref-java | 1.1 من السكان الأصليين |
com.github.fommil.netlib | native_system-java | 1.1 |
com.github.fommil.netlib | native_system-java | 1.1 من السكان الأصليين |
com.github.fommil.netlib | netlib-native_ref-linux-x86_64 | 1.1 من السكان الأصليين |
com.github.fommil.netlib | netlib-native_system-linux-x86_64 | 1.1 من السكان الأصليين |
com.github.luben | zstd-jni | 1.5.5-4 |
com.github.wendykierp | JTransforms | 3.1 |
com.google.code.findbugs | jsr305 | 3.0.0 |
com.google.code.gson | gson | 2.10.1 |
com.google.crypto.tink | تينك | 1.9.0 |
com.google.errorprone | error_prone_annotations | 2.10.0 |
com.google.flatbuffers | flatbuffers-java | 1.12.0 |
com.google.guava | الجوافه | 15.0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.helger | profiler | 1.1.1 |
com.jcraft | jsch | 0.1.55 |
com.jolbox | cp عظمي | 0.8.0.RELEASE |
com.lihaoyi | sourcecode_2.12 | 0.1.9 |
com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
com.microsoft.sqlserver | mssql-jdbc | 11.2.2.jre8 |
com.ning | ضغط lzf | 1.1.2 |
com.sun.mail | javax.mail | 1.5.2 |
com.sun.xml.bind | jaxb-core | 2.2.11 |
com.sun.xml.bind | jaxb-impl | 2.2.11 |
com.tdunning | json | 1.8 |
com.thoughtworks.paranamer | paranamer | 2.8 |
com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
com.twitter | برد-java | 0.10.0 |
com.twitter | chill_2.12 | 0.10.0 |
com.twitter | util-app_2.12 | 7.1.0 |
com.twitter | util-core_2.12 | 7.1.0 |
com.twitter | util-function_2.12 | 7.1.0 |
com.twitter | util-jvm_2.12 | 7.1.0 |
com.twitter | util-lint_2.12 | 7.1.0 |
com.twitter | util-registry_2.12 | 7.1.0 |
com.twitter | util-stats_2.12 | 7.1.0 |
com.typesafe | config | 1.2.1 |
com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
com.uber | h3 | 3.7.3 |
com.univocity | محللات أحادية التكافؤ | 2.9.1 |
com.zaxxer | HikariCP | 4.0.3 |
commons-cli | commons-cli | 1.5.0 |
commons-codec | commons-codec | 1.16.0 |
المجموعات المشتركة | المجموعات المشتركة | 3.2.2 |
commons-dbcp | commons-dbcp | 1.4 |
commons-fileupload | commons-fileupload | 1.5 |
commons-httpclient | commons-httpclient | 3.1 |
commons-io | commons-io | 2.13.0 |
commons-lang | commons-lang | 2.6 |
تسجيل المشتركات | تسجيل المشتركات | 1.1.3 |
تجمع مشترك | تجمع مشترك | 1.5.4 |
dev.ludovic.netlib | arpack | 3.0.3 |
dev.ludovic.netlib | بلاس | 3.0.3 |
dev.ludovic.netlib | lapack | 3.0.3 |
info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
io.airlift | أداة ضغط الهواء | 0.25 |
io.delta | delta-sharing-client_2.12 | 1.0.3 |
io.dropwizard.metrics | التعليقات التوضيحية للمقاييس | 4.2.19 |
io.dropwizard.metrics | metrics-core | 4.2.19 |
io.dropwizard.metrics | metrics-graphite | 4.2.19 |
io.dropwizard.metrics | المقاييس-الفحوصات الصحية | 4.2.19 |
io.dropwizard.metrics | metrics-jetty9 | 4.2.19 |
io.dropwizard.metrics | metrics-jmx | 4.2.19 |
io.dropwizard.metrics | metrics-json | 4.2.19 |
io.dropwizard.metrics | metrics-jvm | 4.2.19 |
io.dropwizard.metrics | metrics-servlets | 4.2.19 |
io.netty | netty-all | 4.1.96.Final |
io.netty | netty-buffer | 4.1.96.Final |
io.netty | netty-codec | 4.1.96.Final |
io.netty | netty-codec-http | 4.1.96.Final |
io.netty | netty-codec-http2 | 4.1.96.Final |
io.netty | netty-codec-socks | 4.1.96.Final |
io.netty | netty-common | 4.1.96.Final |
io.netty | معالج netty | 4.1.96.Final |
io.netty | netty-handler-proxy | 4.1.96.Final |
io.netty | محلل netty | 4.1.96.Final |
io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-linux-aarch_64 |
io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-linux-x86_64 |
io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-osx-aarch_64 |
io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-osx-x86_64 |
io.netty | netty-tcnative-مملة-ثابت | 2.0.61.Final-windows-x86_64 |
io.netty | netty-tcnative-classes | 2.0.61.Final |
io.netty | netty-transport | 4.1.96.Final |
io.netty | netty-transport-classes-epoll | 4.1.96.Final |
io.netty | netty-transport-classes-kqueue | 4.1.96.Final |
io.netty | netty-transport-native-epoll | 4.1.96.Final |
io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-aarch_64 |
io.netty | netty-transport-native-epoll | 4.1.96.Final-linux-x86_64 |
io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-aarch_64 |
io.netty | netty-transport-native-kqueue | 4.1.96.Final-osx-x86_64 |
io.netty | netty-transport-native-unix-common | 4.1.96.Final |
io.prometheus | واجهة سطر الأوامر البسيطة | 0.7.0 |
io.prometheus | simpleclient_common | 0.7.0 |
io.prometheus | simpleclient_dropwizard | 0.7.0 |
io.prometheus | simpleclient_pushgateway | 0.7.0 |
io.prometheus | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | جامع | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet | jakarta.servlet-api | 4.0.3 |
jakarta.validation | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activation | التنشيط | 1.1.1 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1.1 |
javax.transaction | واجهة برمجة تطبيقات المعاملات | 1.1 |
javax.xml.bind | jaxb-api | 2.2.11 |
التفاف دائري | التفاف دائري | 5.5.1 |
jline | jline | 2.14.6 |
joda-time | joda-time | 2.12.1 |
net.java.dev.jna | jna | 5.8.0 |
net.razorvine | مخلل | 1.3 |
net.sf.jpam | jpam | 1.1 |
net.sf.opencsv | opencsv | 2.3 |
net.sf.supercsv | super-csv | 2.2.0 |
net.snowflake | snowflake-ingest-sdk | 0.9.6 |
net.sourceforge.f2j | arpack_combined_all | 0.1 |
org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
org.antlr | ST4 | 4.0.4 |
org.antlr | وقت تشغيل antlr | 3.5.2 |
org.antlr | وقت تشغيل antlr4 | 4.9.3 |
org.antlr | سلسلة قوالب | 3.2.1 |
org.apache.ant | نمل | 1.9.16 |
org.apache.ant | نملة-jsch | 1.9.16 |
org.apache.ant | ant-launcher | 1.9.16 |
org.apache.سهم | تنسيق السهم | 12.0.1 |
org.apache.سهم | ذاكرة أساسية للسهم | 12.0.1 |
org.apache.سهم | سهم-ذاكرة-netty | 12.0.1 |
org.apache.سهم | خط متجه للسهم | 12.0.1 |
org.apache.avro | avro | 1.11.2 |
org.apache.avro | avro-ipc | 1.11.2 |
org.apache.avro | avro-mapred | 1.11.2 |
org.apache.commons | commons-collections4 | 4.4 |
org.apache.commons | ضغط الشائعات | 1.23.0 |
org.apache.commons | commons-crypto | 1.1.0 |
org.apache.commons | commons-lang3 | 3.12.0 |
org.apache.commons | commons-math3 | 3.6.1 |
org.apache.commons | commons-text | 1.10.0 |
org.apache.curator | عميل أمين | 2.13.0 |
org.apache.curator | إطار عمل أمين | 2.13.0 |
org.apache.curator | وصفات أمين | 2.13.0 |
org.apache.datasketches | datasketches-java | 3.1.0 |
org.apache.datasketches | datasketches-memory | 2.0.0 |
org.apache.derby | الدربي | 10.14.2.0 |
org.apache.hadoop | وقت تشغيل عميل hadoop | 3.3.6 |
org.apache.hive | hive-beeline | 2.3.9 |
org.apache.hive | hive-cli | 2.3.9 |
org.apache.hive | hive-jdbc | 2.3.9 |
org.apache.hive | عميل hive-llap | 2.3.9 |
org.apache.hive | hive-llap-common | 2.3.9 |
org.apache.hive | hive-serde | 2.3.9 |
org.apache.hive | hive-shims | 2.3.9 |
org.apache.hive | hive-storage-api | 2.8.1 |
org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
org.apache.hive.shims | hive-shims-common | 2.3.9 |
org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
org.apache.httpcomponents | httpclient | 4.5.14 |
org.apache.httpcomponents | httpcore | 4.4.16 |
org.apache.ivy | لبلاب | 2.5.1 |
org.apache.logging.log4j | log4j-1.2-api | 2.20.0 |
org.apache.logging.log4j | log4j-api | 2.20.0 |
org.apache.logging.log4j | log4j-core | 2.20.0 |
org.apache.logging.log4j | log4j-slf4j2-impl | 2.20.0 |
org.apache.orc | orc-core | 1.9.2-shaded-protobuf |
org.apache.orc | orc-mapreduce | 1.9.2-shaded-protobuf |
org.apache.orc | orc-shims | 1.9.2 |
org.apache.thrift | libfb303 | 0.9.3 |
org.apache.thrift | libthrift | 0.12.0 |
org.apache.ws.xmlschema | xmlschema-core | 2.3.0 |
org.apache.xbean | xbean-asm9-shaded | 4.23 |
org.apache.yetus | التعليقات التوضيحية للجمهور | 0.13.0 |
org.apache.zookeeper | zookeeper | 3.6.3 |
org.apache.zookeeper | zookeeper-jute | 3.6.3 |
org.checkerframework | مدقق كهومي | 3.31.0 |
org.codehaus.jackson | jackson-core-asl | 1.9.13 |
org.codehaus.jackson | جاكسون-mapper-asl | 1.9.13 |
org.codehaus.janino | محول برمجي مشترك | 3.0.16 |
org.codehaus.janino | جانينو | 3.0.16 |
org.datanucleus | datanucleus-api-jdo | 4.2.4 |
org.datanucleus | datanucleus-core | 4.1.17 |
org.datanucleus | datanucleus-rdbms | 4.1.19 |
org.datanucleus | javax.jdo | 3.2.0-m3 |
org.eclipse.jetty | عميل jetty | 9.4.52.v20230823 |
org.eclipse.jetty | متابعة jetty | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-http | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-io | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-jndi | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-plus | 9.4.52.v20230823 |
org.eclipse.jetty | وكيل jetty | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-security | 9.4.52.v20230823 |
org.eclipse.jetty | خادم jetty | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-servlet | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-servlets | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-util | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-util-ajax | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-webapp | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-xml | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-api | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | عميل websocket | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-common | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | خادم websocket | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-servlet | 9.4.52.v20230823 |
org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
org.glassfish.hk2 | hk2-api | 2.6.1 |
org.glassfish.hk2 | محدد موقع hk2 | 2.6.1 |
org.glassfish.hk2 | hk2-utils | 2.6.1 |
org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
org.glassfish.hk2.external | إعادة حزم الأوبالين | 2.6.1 |
org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
org.glassfish.jersey.containers | جيرسي حاوية-servlet | 2.40 |
org.glassfish.jersey.containers | جيرسي-حاوية-servlet-core | 2.40 |
org.glassfish.jersey.core | جيرسي-العميل | 2.40 |
org.glassfish.jersey.core | جيرسي المشتركة | 2.40 |
org.glassfish.jersey.core | خادم جيرسي | 2.40 |
org.glassfish.jersey.inject | جيرسي-hk2 | 2.40 |
org.hibernate.validator | مدقق الإسبات | 6.1.7.Final |
org.ini4j | ini4j | 0.5.4 |
org.javassist | javassist | 3.29.2-GA |
org.jboss.logging | تسجيل jboss | 3.3.2.Final |
org.jdbi | jdbi | 2.63.1 |
org.jetbrains | التعليقات التوضيحية | 17.0.0 |
org.joda | joda-convert | 1.7 |
org.jodd | jodd-core | 3.5.2 |
org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
org.json4s | json4s-core_2.12 | 3.7.0-M11 |
org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | lz4-java | 1.8.0 |
org.mlflow | mlflow-spark_2.12 | 2.9.1 |
org.objenesis | داء objenesis | 2.5.1 |
org.postgresql | postgresql | 42.6.0 |
org.roaringbitmap | هديرBitmap | 0.9.45 |
org.roaringbitmap | الحشوات | 0.9.45 |
org.rocksdb | rocksdbjni | 8.3.2 |
org.rosuda.REngine | REngine | 2.1.0 |
org.scala-lang | scala-compiler_2.12 | 2.12.15 |
org.scala-lang | scala-library_2.12 | 2.12.15 |
org.scala-lang | scala-reflect_2.12 | 2.12.15 |
org.scala-lang.modules | scala-collection-compat_2.12 | 2.11.0 |
org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
org.scala-sbt | واجهة الاختبار | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.2.15 |
org.scalanlp | macros_2.12 | 2.1.0 |
org.scalanlp | breeze_2.12 | 2.1.0 |
org.scalatest | المتوافق مع التحجيم | 3.2.15 |
org.scalatest | scalatest-core_2.12 | 3.2.15 |
org.scalatest | scalatest-diagrams_2.12 | 3.2.15 |
org.scalatest | scalatest-featurespec_2.12 | 3.2.15 |
org.scalatest | scalatest-flatspec_2.12 | 3.2.15 |
org.scalatest | scalatest-freespec_2.12 | 3.2.15 |
org.scalatest | scalatest-funspec_2.12 | 3.2.15 |
org.scalatest | scalatest-funsuite_2.12 | 3.2.15 |
org.scalatest | scalatest-matchers-core_2.12 | 3.2.15 |
org.scalatest | scalatest-mustmatchers_2.12 | 3.2.15 |
org.scalatest | scalatest-propspec_2.12 | 3.2.15 |
org.scalatest | scalatest-refspec_2.12 | 3.2.15 |
org.scalatest | scalatest-shouldmatchers_2.12 | 3.2.15 |
org.scalatest | scalatest-wordspec_2.12 | 3.2.15 |
org.scalatest | scalatest_2.12 | 3.2.15 |
org.slf4j | jcl-over-slf4j | 2.0.7 |
org.slf4j | jul-to-slf4j | 2.0.7 |
org.slf4j | slf4j-api | 2.0.7 |
org.slf4j | slf4j-simple | 1.7.25 |
org.threeten | ثلاثتين إضافية | 1.7.1 |
org.tukaani | xz | 1.9 |
مستوى org.typelevel | algebra_2.12 | 2.0.1 |
مستوى org.typelevel | cats-kernel_2.12 | 2.1.1 |
مستوى org.typelevel | spire-macros_2.12 | 0.17.0 |
مستوى org.typelevel | spire-platform_2.12 | 0.17.0 |
مستوى org.typelevel | spire-util_2.12 | 0.17.0 |
مستوى org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | wildfly-openssl | 1.1.3.Final |
org.xerial | sqlite-jdbc | 3.42.0.0 |
org.xerial.snappy | snappy-java | 1.1.10.3 |
org.yaml | ثعبان الثعبان | 2.0 |
oro | oro | 2.0.8 |
pl.edu.icm | JLargeArrays | 1.5 |
software.amazon.cryptools | AmazonCorrettoCryptoProvider | 1.6.1-linux-x86_64 |
software.amazon.ion | ion-java | 1.0.2 |
stax | stax-api | 1.0.1 |