مشاركة عبر

Databricks Runtime 7.5 (EoS)

  • مقالة

إشعار

انتهى دعم إصدار وقت تشغيل Databricks هذا. للحصول على تاريخ انتهاء الدعم، راجع محفوظات انتهاء الدعم. لجميع إصدارات وقت تشغيل Databricks المدعومة، راجع إصدارات ملاحظات إصدار Databricks Runtime والتوافق.

أصدرت Databricks هذا الإصدار في ديسمبر 2020.

توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 7.5، مدعومة من Apache Spark 3.0.

الميزات الجديدة

ميزات وتحسينات Delta Lake

يوفر هذا الإصدار ميزات وتحسينات Delta Lake التالية:

تلغي نقاط التفتيش غير المتزامنة دفق طفرات مدة الدفعة الصغيرة

يقوم Delta Lake بتنفيذ نقاط التحقق كل 10 عمليات تثبيت بشكل افتراضي. في أحمال العمل المتدفقة، يمكن أن تسبب نقاط التفتيش طفرات طفيفة في مدة الدفعة الصغيرة كل 10 عمليات تثبيت. تلغي نقاط التفتيش غير المتزامنة هذه الارتفاعات.

يتم تمكين نقاط التحقق غير المتزامنة بشكل افتراضي لجميع أحمال عمل الدفق غير المشغلة مرة واحدة. مع نقاط التفتيش غير المتزامنة، يكتب كتاب الدفق أيضا نقاط تفتيش محسنة حتى لا تحتاج إلى الاشتراك صراحة في نقاط التحقق المحسنة.

لتعطيل نقاط التحقق غير المتزامنة، قم بتعيين تكوين spark.databricks.delta.checkpoint.async.enabled falseSQL .

تستمر أحمال العمل الدفعية في كتابة نقاط التحقق بشكل متزامن، ونوصي بعدم تمكين نقاط التحقق غير المتزامنة لأحمال العمل الدفعية.

يتم الآن نشر أحدث معلومات الجدول إلى الكتالوجات

تقوم Delta Lake الآن بنشر أحدث معلومات الجدول، مثل خصائص المخطط والجدول، إلى كتالوجات مثل Hive metastore، على أساس أفضل جهد. يمكن أن تساعدك هذه المعلومات في الاستفادة من أدوات الكتالوج لفهم مخطط جداول Delta.

لا تعتمد Delta Lake داخليا على هذه المعلومات، ولكنها تحاول إبقائها محدثة. بالإضافة إلى ذلك، يخزن Delta Lake خصائص delta.lastUpdateVersion الجدول وللإشارة delta.lastCommitTimestamp إلى إصدار وطابع زمني للتثبيت الذي دفع آخر تغيير إلى metastore. يتم تحديث metastore فقط عندما لا يتطابق مخطط الجدول أو الخصائص الموجودة في الجدول. لذلك، لا تعكس خصائص الجدول المذكورة أعلاه بالضرورة أحدث إصدار من الجدول.

إذا كانت معلومات الجدول ومعلومات metastore غير متزامنة، يمكنك تشغيل أمر مثل DESCRIBE <table> تحديث metastore.

إشعار

نظرا لأن Apache Hive لا تسمح بتغيير أعمدة الأقسام، ولكن يمكن لجداول Delta تغيير تقسيمها، فلا تظهر جداول Delta على أنها مقسمة في Apache Hive.

MERGE INTO تدعم العملية الآن تطور المخطط للأعمدة المتداخلة

يحتوي تطور المخطط للأعمدة المتداخلة الآن على نفس دلالات الأعمدة ذات المستوى الأعلى. على سبيل المثال، يمكن إضافة أعمدة متداخلة جديدة تلقائيا إلى StructType عمود. راجع تطور المخطط التلقائي في الدمج للحصول على التفاصيل.

MERGE INTO تستخدم العملية الآن تلقائيا عمليات الكتابة المحسنة

يمكن أن توفر عمليات الكتابة المحسنة أداء أفضل بكثير للجداول MERGE INTO الجاهزة، خاصة بالنسبة للجداول MERGE INTO المقسمة. لتعطيل عمليات الكتابة المحسنة، قم بتعيين تكوين spark.databricks.delta.optimizeWrite.enabled Spark إلى false.

MERGE INTO وتحل UPDATE العمليات الآن أعمدة البنية المتداخلة حسب الاسم

تقوم عمليات UPDATE التحديث والأوامر MERGE INTO الآن بحل أعمدة البنية المتداخلة حسب الاسم. أي عند مقارنة أعمدة من نوع StructType أو تعيينها، لا يهم ترتيب الأعمدة المتداخلة (تماما بنفس طريقة ترتيب أعمدة المستوى الأعلى). للعودة إلى الحل حسب الموضع، قم بتعيين تكوين spark.databricks.delta.resolveMergeUpdateStructsByName.enabled Spark إلى false.

CLONE هو GA ويمكنك الآن تجاوز خصائص الجدول

CLONE الأمر متاح الآن بشكل عام. راجع إنشاء نسخة جدول. بالإضافة إلى ذلك، يمكنك الآن تحديد تجاوزات خاصية الجدول عند استخدام CLONE. للحصول على أمثلة، راجع استنساخ جدول على Azure Databricks.

RESTORE هو GA

RESTORE الأمر متاح الآن بشكل عام. راجع استعادة.

تبسط الضمنيات Scala قراءة وكتابة واجهات برمجة التطبيقات Spark

يمكنك الاستيراد io.delta.implicits._ لاستخدام delta الأسلوب مع واجهات برمجة تطبيقات Spark للقراءة والكتابة.

import io.delta.implicits._

spark.read.delta("/my/table/path")
df.write.delta("/my/table/path")
spark.readStream.delta("/my/table/path")
df.writeStream.delta("/my/table/path")

تحسين معدل نقل الدفق باستخدام fetchParallelism خيار الموصل

يدعم موصل AQS الآن خيارا fetchParallelism جديدا لتحديد التوازي لجلب الرسائل من خدمة قائمة الانتظار.

تعقب تقدم الدفق باستخدام مقاييس أداة التحميل التلقائي الجديدة

يبلغ "المحمل التلقائي" الآن عن عدد الملفات الموجودة في التراكم ومقدار التراكم بعد كل دفعة. يمكنك استخدام هذه المقاييس لتعقب تقدم الدفق. للحصول على تفاصيل حول كيفية عرض المقاييس، راجع ما هو المحمل التلقائي؟.

التحسينات

دعم أوسع للمكتبات ذات نطاق دفتر الملاحظات باستخدام %pip الأوامر السحرية %conda

يمكنك الآن تثبيت المكتبات ذات نطاق دفتر الملاحظات باستخدام %pip والأوامر %conda السحرية على مجموعات التزامن العالي مع تمكين قوائم التحكم بالوصول في الجدول أو تمرير بيانات الاعتماد.

عرض Spark SQL DECIMAL دقيق

يتم الآن عرض نوع بيانات Spark SQL DECIMAL في الجداول دون فقدان الدقة والمقياس.

موصل تخزين ADLS Gen 2 استنادا إلى Hadoop 3.3 ل ABFS

يستند الإصدار الذي تمت ترقيته من موصل تخزين ADLS Gen 2 إلى Hadoop 3.3 ل ABFS. يحتوي الموصل الذي تمت ترقيته على العديد من تحسينات الاستقرار (راجع استقرار Hadoop) ويتضمن دعما لمصادقة رمز SAS المميز.

إصلاحات أخرى

تمت إزالة موصل Databricks Kafka ل Spark Streaming. استخدم موصل Apache Spark.

ترقيات المكتبة

  • مكتبات Python التي تمت ترقيتها:
    • تمت ترقية koalas من 1.3.0 إلى 1.4.0.
  • ترقية العديد من مكتبات R المثبتة. راجع مكتبات R المثبتة.
  • تمت ترقية إصدار OpenJDK 8 إلى Zulu 8.50.0.51-CA-linux64 (النسخة 1.8.0_275-b01).

Apache Spark

يتضمن Databricks Runtime 7.5 Apache Spark 3.0.1. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 7.4 (EoS)، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:

  • [SPARK-33611] [واجهة المستخدم] تجنب الترميز مرتين على معلمة الاستعلام عن عنوان URL للوكيل المعاد كتابته
  • [SPARK-33587] [CORE] قتل المنفذ على أخطاء فادحة متداخلة (7.x)
  • [SPARK-33140] [SQL] إرجاع التعليمات البرمجية التي لا تستخدم SparkSession التي تم تمريرها للحصول على SQLConf.
  • [SPARK-33472] [SQL] ضبط ترتيب قاعدة RemoveRedundantSorts
  • [SPARK-33422] [DOC] إصلاح العرض الصحيح لعنصر القائمة الأيسر
  • [SPARK-27421] [SQL] إصلاح عامل التصفية لعمود int وفئة القيمة java.lang.String عند تقليم عمود القسم
  • [SPARK-33483] [INFRA][الاختبارات] إصلاح أنماط استبعاد الفئران وإضافة LICENSE
  • [SPARK-33464] [INFRA] إضافة/إزالة (un)ذاكرة التخزين المؤقت الضرورية وإعادة هيكلة GitHub Actions yaml
  • [SPARK-33407] [PYTHON][7.X] تبسيط رسالة الاستثناء من Python UDFs (معطل بشكل افتراضي)
  • [SPARK-33435] [SQL] DSv2: يجب أن يبطل تحديث الجدول ذاكرة التخزين المؤقت التي تشير إلى الجدول
  • [SPARK-33358] [SQL] إرجاع التعليمات البرمجية عند فشل عملية الأمر
  • [SPARK-33183] [DBCONNECT] إضافة RemoveRedundantSorts.scala إلى ALLOW_LIST.txt
  • [SPARK-33290] [SQL] يجب أن يبطل تحديث الجدول ذاكرة التخزين المؤقت على الرغم من أن الجدول نفسه قد لا يكون مخزنا مؤقتا
  • [SPARK-33140] [SQL] إصلاح التحويل البرمجي دلتا
  • [SPARK-33316] [SQL] إضافة اختبارات الوحدة from_avro to_avro مع سجل المخطط وقدم المستخدم مخطط Avro يقبل القيم الخالية
  • [SPARK-33404] [SQL] إصلاح النتائج غير الصحيحة في date_trunc التعبير
  • [SPARK-33339] [PYTHON] سيتم تعليق تطبيق Pyspark بسبب خطأ غير استثناء
  • [SPARK-33412] [SQL] يجب أن يحل OverwriteByExpression شرط الحذف الخاص به استنادا إلى علاقة الجدول وليس استعلام الإدخال
  • [SPARK-33391] [SQL] element_at مع CreateArray لا يحترم فهرسا يستند إلى واحد.
  • [SPARK-33316] [SQL] قدم المستخدم الدعم مخطط Avro يقبل القيم الخالية لمخطط محفز غير يقبل القيم الخالية في كتابة Avro
  • [SPARK-33372] [SQL] إصلاح تقليم مستودع InSet
  • [SPARK-33371] [PYTHON] تحديث setup.py والاختبارات ل Python 3.9
  • [SPARK-33140] [SQL] إزالة SQLConf وSparkSession في جميع الفئة الفرعية من القاعدة[QueryPlan]
  • [SPARK-33338] [SQL] يجب ألا تفشل GROUP BY باستخدام الخريطة الحرفية
  • [SPARK-33306] [SQL]المنطقة الزمنية مطلوبة عند تحويل التاريخ إلى سلسلة
  • [SPARK-33284] [واجهة مستخدم الويب] في صفحة واجهة مستخدم التخزين، سيؤدي النقر فوق أي حقل لفرز الجدول إلى فقدان محتوى الرأس
  • [SPARK-33362] [SQL] يجب أن لا يزال skipSchemaResolution يتطلب حل الاستعلام
  • [SPARK-32257] [SQL] الإبلاغ عن أخطاء صريحة للاستخدام غير الصالح للأمر SET/RESET
  • [SPARK-32406] [SQL] جعل إعادة تعيين بناء الجملة تدعم إعادة تعيين التكوين الفردي
  • [SPARK-32376] [SQL] جعل سلوك التعبئة الخالية unionByName يعمل مع أعمدة البنية
  • [SPARK-32308] [SQL] نقل منطق تحليل حسب الاسم من unionByName من التعليمات البرمجية لواجهة برمجة التطبيقات إلى مرحلة التحليل
  • [SPARK-20044] [واجهة المستخدم] دعم واجهة مستخدم Spark خلف الوكيل العكسي للواجهة الأمامية باستخدام بادئة مسار Revert proxy url
  • [SPARK-33268] [SQL][PYTHON] إصلاح الأخطاء الخاصة بصب البيانات من/إلى PythonUserDefinedType
  • [SPARK-33292] [SQL] جعل تمثيل سلسلة Literal ArrayBasedMapData غير ملتبس
  • [SPARK-33183] [SQL] إصلاح قاعدة المحسن RemoveSorts وإضافة قاعدة فعلية لإزالة الفرز المتكرر
  • [SPARK-33272] [SQL] اقتطاع تعيين السمات في QueryPlan.transformUpWithNewOutput
  • [SPARK-32090] [SQL] تحسين UserDefinedType.equal() لجعله متماثلا
  • [SPARK-33267] [SQL] إصلاح مشكلة NPE على عامل التصفية "In" عندما تحتوي إحدى القيم على قيمة خالية
  • [SPARK-33208] [SQL] تحديث مستند SparkSession#sql
  • [SPARK-33260] [SQL] إصلاح نتائج غير صحيحة من SortExec عندما يكون sortOrder هو Stream
  • [SPARK-33230] [SQL] متعهدو Hadoop للحصول على معرف وظيفة فريد في "spark.sql.sources.writeJobUUID"
  • [SPARK-33197] [SQL] إجراء تغييرات على spark.sql.analyzer.maxIterations حيز التنفيذ في وقت التشغيل
  • [SPARK-33228] [SQL] عدم نطق البيانات عند استبدال طريقة عرض لها نفس الخطة المنطقية
  • [SPARK-32557] [CORE] تسجيل الاستثناء وابتلاعه لكل إدخال في خادم History
  • [SPARK-32436] [CORE] تهيئة numNonEmptyBlocks في HighlyCompressedMapStatus.readExternal
  • [SPARK-33131] [SQL] إصلاح مجموعات التجميع مع وجود عبارة لا يمكن حل اسم العمود المؤهل
  • [SPARK-32761] [SQL] السماح بتجميع تعبيرات مميزة متعددة قابلة للطي
  • [SPARK-33094] [SQL] جعل تنسيق ORC ينشر تكوين Hadoop من خيارات DS إلى نظام ملفات HDFS الأساسي

تحديثات الصيانة

راجع تحديثات صيانة Databricks Runtime 7.5.

بيئة النظام

  • نظام التشغيل: Ubuntu 18.04.5 LTS
  • Java: Zulu 8.50.0.51-CA-linux64 (النسخة 1.8.0_275-b01)
  • Scala: 2.12.10
  • Python: 3.7.5
  • R: R الإصدار 3.6.3 (2020-02-29)
  • Delta Lake 0.7.0

مكتبات Python المثبتة

مكتبة إصدار مكتبة إصدار مكتبة إصدار
asn1crypto 1.3.0 تثبيت خلفي 0.1.0 boto3 1.12.0
روبوت الدردشة 1.15.0 شهادة 2020.6.20 cffi 1.14.0
تجزئة 3.0.4 التشفير 2.8 دورة 0.10.0
Cython 0.29.15 ديكور 4.4.1 docutils 0.15.2
نقاط الإدخال 0.3 idna 2.8 ipykernel 5.1.4
ipython 7.12.0 ipython-genutils 0.2.0 jedi 0.17.2
مسار jmespath 0.10.0 joblib 0.14.1 jupyter-client 5.3.4
jupyter-core 4.6.1 kiwisolver 1.1.0 الكوالا 1.4.0
matplotlib 3.1.3 numpy 1.18.1 pandas 1.0.1
parso 0.7.0 بتسي 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 pip 20.0.2 مجموعة أدوات المطالبة 3.0.3
psycopg2 2.8.4 عملية ptyprocess 0.6.0 pyarrow 1.0.1
pycparser 2.19 Pygments 2.5.2 PyGObject 3.26.1
pyOpenSSL 19.1.0 pyparsing 2.4.6 PySocks 1.7.1
python-apt 1.6.5+ubuntu0.3 python-dateutil 2.8.1 pytz 2019.3
pyzmq 18.1.1 الطلبات 2.22.0 s3transfer 0.3.3
scikit-learn 0.22.1 شفرة 1.4.1 بحر محمول 0.10.0
أدوات الإعداد 45.2.0 ستة 1.14.0 ssh-import-id 5.7
نماذج الإحصائيات 0.11.0 اعصار 6.0.3 سمات السمات 4.3.3
ترقيات غير مراقبة 0.1 urllib3 1.25.8 virtualenv 16.7.10
wcwidth 0.1.8 دولاب 0.34.2

مكتبات R المثبتة

يتم تثبيت مكتبات R من لقطة Microsoft CRAN في 2020-11-02.

مكتبة إصدار مكتبة إصدار مكتبة إصدار
askpass 1.1 assertthat 0.2.1 backports 1.1.10
الأساس 3.6.3 base64enc 0.1-3 BH 1.72.0-3
بت 4.0.4 bit64 4.0.5 كائن ثنائي كبير الحجم 1.2.1
boot 1.3-25 المشروب 1.0-6 بريو 1.1.0
broom 0.7.2 callr 3.5.1 علامة إقحام 6.0-86
cellranger 1.1.0 كرون 2.3-56 فئة 7.3-17
cli 2.1.0 clipr 0.7.1 نظام مجموعة 2.1.0
codetools 0.2-18 colorspace 1.4-1 العلامة الشائعة 1.7
compiler 3.6.3 config 0.3 covr 3.5.1
cpp11 0.2.3 crayon 1.3.4 خط متقاطع 1.1.0.1
curl 4.3 data.table 1.13.2 مجموعات البيانات 3.6.3
DBI 1.1.0 dbplyr 1.4.4 تنازلي 1.2.0
devtools 2.3.2 diffobj 0.3.2 digest 0.6.27
dplyr 0.8.5 DT 0.16 علامة الحذف 0.3.1
التقييم 0.14 fansi 0.4.1 مسافة بعيدة 2.0.3
خريطة سريعة 1.0.1 forcats 0.5.0 Foreach 1.5.1
foreign 0.8-76 زور 0.2.0 fs 1.5.0
generics 0.1.0 ggplot2 3.3.2 غ 1.1.0
git2r 0.27.1 glmnet 3.0-2 عموميات 0.13.1
glue 1.4.2 gower 0.2.2 graphics 3.6.3
grDevices 3.6.3 grid 3.6.3 gridExtra 2.3
gsubfn 0.7 gtable 0.3.0 haven 2.3.1
highr 0.8 hms 0.5.3 htmltools 0.5.0
htmlwidgets 1.5.2 httpuv 1.5.4 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 ini 0.3.1
ipred 0.9-9 isoband 0.2.2 iterators 1.0.13
jsonlite 1.7.1 KernSmooth 2.23-18 knitr 1.30
labeling 0.4.2 فيما بعد 1.1.0.1 lattice 0.20-41
lava 1.6.8 lazyeval 0.2.2 دورة الحياة 0.2.0
lubridate 1.7.9 magrittr 1.5 markdown 1.1
MASS 7.3-53 مصفوفة 1.2-18 المذكرة 1.1.0
الأساليب 3.6.3 mgcv 1.8-33 mime 0.9
ModelMetrics 1.2.2.2 modelr 0.1.8 munsell 0.5.0
nlme 3.1-150 nnet 7.3-14 numDeriv 2016.8-1.1
openssl 1.4.3 parallel 3.6.3 pillar 1.4.6
pkgbuild 1.1.0 pkgconfig 2.0.3 pkgload 1.1.0
plogr 0.2.0 plyr 1.8.6 مدح 1.0.0
prettyunits 1.1.1 بروك 1.16.2 processx 3.4.4
prodlim 2019.11.13 التقدم 1.2.2 الوعود 1.1.1
proto 1.0.0 ps 1.4.0 purrr 0.3.4
r2d3 0.2.3 R6 2.5.0 randomForest 4.6-14
طيور الراب 0.3.1 rcmdcheck 1.3.3 RColorBrewer 1.1-2
Rcpp 1.0.5 readr 1.4.0 readxl ⁦⁩⁦⁩1.3.1
recipes 0.1.14 rematch 1.0.1 إعادة المباراة2 2.1.2
أجهزة التحكم عن بعد 2.2.0 reprex 0.3.0 reshape2 1.4.4
ريكس 1.2.0 rjson 0.2.20 rlang 0.4.8
rmarkdown 2.5 RODBC 1.3-16 roxygen2 7.1.1
rpart 4.1-15 rprojroot 1.3-2 Rserve 1.8-7
RSQLite 2.2.1 rstudioapi 0.11 تحويلات 2.0.2
rvest 0.3.6 scales 1.1.1 selectr 0.4-2
معلومات الجلسة 1.1.1 شكل 1.4.4 بَرَّاق 1.5.0
قوالب المصدر 0.1.7 sparklyr 1.4.0 سبارك 3.0.0
spatial 7.3-11 splines 3.6.3 sqldf 0.4-11
SQUAREM 2020.5 stats 3.6.3 stats4 3.6.3
stringi 1.5.3 stringr 1.4.0 survival 3.2-7
sys 3.4 tcltk 3.6.3 TeachingDemos 2.10
اختبار الذي 3.0.0 tibble 3.0.4 tidyr 1.1.2
tidyselect 1.1.0 tidyverse 1.3.0 timeDate 3043.102
tinytex 0.27 الأدوات 3.6.3 استخدام هذا 1.6.3
utf8 1.1.4 utils 3.6.3 uuid 0.1-4
vctrs 0.3.4 viridisLite 0.3.0 والدو 0.2.2
whisker 0.4 withr 2.3.0 xfun 0.19
xml2 1.3.2 xopen 1.0.0 xtable 1.8-4
yaml 2.2.1

مكتبات Java و Scala المثبتة (إصدار مجموعة Scala 2.12)

معرف مجموعة معرف البيانات الاصطناعية إصدار
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws دعم aws-java-sdk 1.11.655
com.amazonaws مكتبات aws-java-sdk-swf 1.11.22
com.amazonaws مساحات عمل aws-java-sdk 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics استدر 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo مظلل 4.0.2
com.esotericsoftware سجل الحد الأدنى 1.3.0
com.fasterxml زميل 1.3.4
com.fasterxml.jackson.core التعليقات التوضيحية ل جاكسون 2.10.0
com.fasterxml.jackson.core جاكسون النواة 2.10.0
com.fasterxml.jackson.core جاكسون-databind 2.10.0
com.fasterxml.jackson.dataformat جاكسون-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype جاكسون-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-module-paranamer 2.10.0
com.fasterxml.jackson.module jackson-module-scala_2.12 2.10.0
com.github.ben-manes.كافيين كافايين 2.3.4
com.github.fommil أداة تحميل jniloader 1.1
com.github.fommil.netlib الذاكرة الأساسية 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.4-3
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava الجوافه 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox cp عظمي 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.sqlserver mssql-jdbc 8.2.1.jre8
com.microsoft.azure azure-data-lake-store-sdk 2.3.8
com.ning ضغط lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter برد-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity محللات أحادية التكافؤ 2.9.0
com.zaxxer HikariCP 3.1.0
شائعات-beanutils شائعات-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
المجموعات المشتركة المجموعات المشتركة 3.2.2
تكوين المشتركات تكوين المشتركات 1.6
commons-dbcp commons-dbcp 1.4
أداة تجزئة الشائعات أداة تجزئة الشائعات 1.8
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2.6
تسجيل المشتركات تسجيل المشتركات 1.1.3
commons-net commons-net 3.1
تجمع مشترك تجمع مشترك 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift أداة ضغط الهواء 0.10
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics المقاييس-الفحوصات الصحية 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.47.Final
io.prometheus واجهة سطر الأوامر البسيطة 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx جامع 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation التنشيط 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.transaction واجهة برمجة تطبيقات المعاملات 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
التفاف دائري التفاف دائري 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.razorvine pyrolite 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.12.8
net.snowflake spark-snowflake_2.12 2.8.1-spark_3.0
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr وقت تشغيل antlr 3.5.2
org.antlr وقت تشغيل antlr4 4.7.1
org.antlr سلسلة قوالب 3.2.1
org.apache.ant نمل 1.9.2
org.apache.ant نملة-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.سهم تنسيق السهم 0.15.1
org.apache.سهم ذاكرة الأسهم 0.15.1
org.apache.سهم خط متجه للسهم 0.15.1
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons ضغط الشائعات 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.9
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator عميل أمين 2.7.1
org.apache.curator إطار عمل أمين 2.7.1
org.apache.curator وصفات أمين 2.7.1
org.apache.derby الدربي 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop تعليقات توضيحية ل hadoop 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop عميل hadoop 2.7.4
org.apache.hadoop hadoop-common 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop hadoop-mapreduce-client-app 2.7.4
org.apache.hadoop hadoop-mapreduce-client-common 2.7.4
org.apache.hadoop hadoop-mapreduce-client-core 2.7.4
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.4
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-client 2.7.4
org.apache.hadoop hadoop-yarn-common 2.7.4
org.apache.hadoop hadoop-yarn-server-common 2.7.4
org.apache.hive hive-beeline 2.3.7
org.apache.hive hive-cli 2.3.7
org.apache.hive hive-common 2.3.7
org.apache.hive hive-exec-core 2.3.7
org.apache.hive hive-jdbc 2.3.7
org.apache.hive عميل hive-llap 2.3.7
org.apache.hive hive-llap-common 2.3.7
org.apache.hive hive-metastore 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive hive-shims 2.3.7
org.apache.hive hive-storage-api 2.7.1
org.apache.hive hive-vector-code-gen 2.3.7
org.apache.hive.shims hive-shims-0.23 2.3.7
org.apache.hive.shims hive-shims-common 2.3.7
org.apache.hive.shims hive-shims-scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0 حاضنة
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy لبلاب 2.4.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.5.10
org.apache.orc orc-mapreduce 1.5.10
org.apache.orc orc-shims 1.5.10
org.apache.parquet عمود باركيه 1.10.1-databricks6
org.apache.parquet parquet-common 1.10.1-databricks6
org.apache.parquet ترميز باركيه 1.10.1-databricks6
org.apache.parquet تنسيق باركيه 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks6
org.apache.parquet باركيه جاكسون 1.10.1-databricks6
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.velocity السرعة 1.5
org.apache.xbean xbean-asm7 مظلل 4.15
org.apache.yetus التعليقات التوضيحية للجمهور 0.5.0
org.apache.zookeeper zookeeper 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson جاكسون جاكرس 1.9.13
org.codehaus.jackson جاكسون-mapper-asl 1.9.13
org.codehaus.jackson جاكسون-xc 1.9.13
org.codehaus.janino محول برمجي مشترك 3.0.16
org.codehaus.janino جانينو 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty عميل jetty 9.4.18.v20190429
org.eclipse.jetty متابعة jetty 9.4.18.v20190429
org.eclipse.jetty jetty-http 9.4.18.v20190429
org.eclipse.jetty jetty-io 9.4.18.v20190429
org.eclipse.jetty jetty-jndi 9.4.18.v20190429
org.eclipse.jetty jetty-plus 9.4.18.v20190429
org.eclipse.jetty وكيل jetty 9.4.18.v20190429
org.eclipse.jetty jetty-security 9.4.18.v20190429
org.eclipse.jetty خادم jetty 9.4.18.v20190429
org.eclipse.jetty jetty-servlet 9.4.18.v20190429
org.eclipse.jetty jetty-servlets 9.4.18.v20190429
org.eclipse.jetty jetty-util 9.4.18.v20190429
org.eclipse.jetty jetty-webapp 9.4.18.v20190429
org.eclipse.jetty jetty-xml 9.4.18.v20190429
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 محدد موقع hk2 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external إعادة حزم الأوبالين 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers جيرسي حاوية-servlet 2.30
org.glassfish.jersey.containers جيرسي-حاوية-servlet-core 2.30
org.glassfish.jersey.core جيرسي-العميل 2.30
org.glassfish.jersey.core جيرسي المشتركة 2.30
org.glassfish.jersey.core خادم جيرسي 2.30
org.glassfish.jersey.inject جيرسي-hk2 2.30
org.glassfish.jersey.media جيرسي-وسائل الإعلام-جاكسب 2.30
org.hibernate.validator مدقق الإسبات 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging تسجيل jboss 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.6.6
org.json4s json4s-core_2.12 3.6.6
org.json4s json4s-jackson_2.12 3.6.6
org.json4s json4s-scalap_2.12 3.6.6
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.1.2
org.objenesis داء objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap هديرBitmap 0.7.45
org.roaringbitmap الحشوات 0.7.45
org.rocksdb rocksdbjni 6.2.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
org.scala-lang.modules scala-collection-compat_2.12 2.1.1
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt واجهة الاختبار 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark غير مستخدم 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten ثلاثتين إضافية 1.5.0
org.tukaani xz 1.5
مستوى org.typelevel algebra_2.12 2.0.0-M2
مستوى org.typelevel cats-kernel_2.12 2.0.0-M4
مستوى org.typelevel machinist_2.12 0.6.8
مستوى org.typelevel ماكرو-compat_2.12 1.1.1
مستوى org.typelevel spire-macros_2.12 0.17.0-M1
مستوى org.typelevel spire-platform_2.12 0.17.0-M1
مستوى org.typelevel spire-util_2.12 0.17.0-M1
مستوى org.typelevel spire_2.12 0.17.0-M1
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.5
org.yaml ثعبان الثعبان 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenc xmlenc 0.52