مشاركة عبر

Databricks Runtime 5.5 LTS (EoS)

  • مقالة

إشعار

انتهى دعم إصدار وقت تشغيل Databricks هذا. للحصول على تاريخ انتهاء الدعم، راجع محفوظات انتهاء الدعم. لجميع إصدارات وقت تشغيل Databricks المدعومة، راجع إصدارات ملاحظات إصدار Databricks Runtime والتوافق.

أصدرت Databricks هذا الإصدار في يوليو 2019. تم الإعلان عن الدعم طويل الأجل (LTS) في أغسطس 2019. انتهى الدعم في 27 يوليو 2021. تم إصدار Databricks Runtime 5.5 Extended Support (EoS) في 8 يوليو 2021 ويوسع الدعم 5.5 حتى ديسمبر 2021. يستخدم Ubuntu 18.04.5 LTS بدلا من توزيع Ubuntu 16.04.6 LTS المهمل المستخدم في Databricks Runtime 5.5 LTS الأصلي. توقف دعم Ubuntu 16.04.6 LTS في 1 أبريل 2021.

توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 5.5، مدعومة من Apache Spark.

الميزات الجديدة

Delta Lake على Azure Databricks Auto Optimize

اليوم، عند كتابة البيانات في التخزين السحابي، تحتاج إلى ضغط الملفات للحصول على أداء الإدخال/إخراج الأمثل. يجب أن تقلق بشأن حجم الملف الصحيح، ومدى تكرار ضغط الملفات، ومدى حجم المجموعة المراد استخدامها، وما إلى ذلك. لمعالجة هذه الفئة من المشاكل، يسعدنا الإعلان عن التوفر العام لتحسين تلقائي باستخدام Delta Lake على Azure Databricks. أثناء كل كتابة لجداول Delta، نكتشف تلقائيا أحجام الملفات الصحيحة والملفات المضغوطة بحيث لا داعي للقلق بشأن تحسين تخطيط التخزين. أثناء عمليات الكتابة، إذا كان auto-optimize الخيار هو true، فإن Azure Databricks يحدد تلقائيا ما إذا كان التحسين مطلوبا ويحسن الملفات الصغيرة. للحصول على التفاصيل، راجع تكوين Delta Lake للتحكم في حجم ملف البيانات.

تحسين Delta Lake على Azure Databricks الحد الأدنى والحد الأقصى وعدد أداء استعلام التجميع

تم تحسين أداء استعلامات التجميع الحد الأدنى والحد الأقصى والعد ل Delta Lake على Azure Databricks بشكل كبير عن طريق تقليل كمية البيانات التي تتم قراءتها. يتم الآن تشغيل هذه الاستعلامات باستخدام الإحصائيات وقيم القسم في بيانات التعريف، بدلا من مسح البيانات ضوئيا.

مسارات استدلال نموذج أسرع مع مصدر بيانات ملف ثنائي محسن ومكرر عددي Pandas UDF (معاينة عامة)

غالبا ما يتعين على مهام التعلم الآلي، خاصة في مجال الصور والفيديو، العمل على عدد كبير من الملفات. في Databricks Runtime 5.4، قمنا بالفعل بتوفير مصدر بيانات الملف الثنائي لمساعدة الملفات العشوائية ETL مثل الصور، في جداول Spark. في Databricks Runtime 5.5، أضفنا خيارا، recursiveFileLookupلتحميل الملفات بشكل متكرر من دلائل الإدخال المتداخلة. راجع الملف الثنائي.

يتيح لك مصدر بيانات الملف الثنائي تشغيل مهام استدلال النموذج بالتوازي من جداول Spark باستخدام Pandas UDF عددي. ومع ذلك، قد تضطر إلى تهيئة النموذج لكل دفعة سجل، ما يقدم النفقات العامة. في Databricks Runtime 5.5، قمنا بنسخ نوع Pandas UDF جديد يسمى "مكرر عددي" من Apache Spark master. مع ذلك يمكنك تهيئة نموذج مرة واحدة فقط وتطبيق النموذج على العديد من دفعات الإدخال، والتي يمكن أن تؤدي إلى تسريع 2-3x لنماذج مثل ResNet50. راجع Series to scalar UDF.

واجهة برمجة تطبيقات الأسرار في دفاتر ملاحظات R

تتيح لك واجهة برمجة تطبيقات الأسرار إدخال البيانات السرية في دفاتر الملاحظات دون ترميزها. تتوفر واجهة برمجة التطبيقات هذه الآن في دفاتر ملاحظات R بالإضافة إلى الدعم الحالي لدفاتر ملاحظات Python وSc scala. يمكنك استخدام الدالة dbutils.secrets.get للحصول على البيانات السرية. يتم تنقيح البيانات السرية قبل الطباعة إلى خلية دفتر ملاحظات.

التحسينات

  • دعم تشغيل عمليات Delta Lake SQL في Python foreachBatch: لقد أصلحنا القيد المعروف المتمثل في عدم القدرة على الكتابة إلى جداول Delta من داخل foreachBatch استعلام Structured Streaming المحدد في Python. وهذا مفيد في أحمال عمل تدفق Python الشائعة؛ على سبيل المثال، كتابة تجميعات الدفق في وضع التحديث باستخدام MERGE و foreachBatch.
  • أداء جداول دلتا المخزنة في Azure Data Lake Gen2: التحقق من أحدث إصدار من جدول Delta على ADLS Gen2 يتحقق الآن فقط من نهاية سجل المعاملات، بدلا من سرد جميع الإصدارات المتوفرة. يعمل UPDATE هذا التحسين على إجراء عملية زمنية ثابتة، مما يحسن زمن الانتقال بشكل كبير.
  • قابلية التوسع لتحسين ZORDER BY: Z-Ordering على جداول دلتا كبيرة جدا الآن يستخدم وحدات أصغر من العمل التي يحكمها التحكم المتقدم في القبول. تعمل هذه الميزة على تحسين استقرار هذه العملية دون التضحية باستخدام نظام المجموعة.
  • تحسين أداء أوامر DML على الجداول التي تحتوي على عدد كبير من الأعمدة: نقوم الآن بإجراء أفضل لتقليم الأعمدة عند المسح بحثا عن مطابقة البيانات في UPDATEDELETEالأوامر و وMERGE.
  • دعم إعداد نقاط نهاية VNet + الخدمة في موصل Spark - Synapse Analytics: أضفنا مسارات ADL Gen2 إلى قائمة السماح كمواقع بيانات مؤقتة (.option("tempDir", "abfss://...")) وأضفنا خيارا جديدا يسمى useAzureMSI، لاستخدامه بدلا من forward_spark_azure_storage_credentials في حالة تكوين Synapse Analytics للمصادقة عبر الهويات المدارة إلى حساب تخزين V2 الخاص بك.
  • الإبطال التلقائي للتخزين المؤقت للقرص: يكشف التخزين المؤقت للقرص الآن تلقائيا عن الملفات التي تم تعديلها أو الكتابة فوقها بعد تخزينها مؤقتا. يتم إبطال أي إدخالات قديمة تلقائيا وإخلاؤها من ذاكرة التخزين المؤقت. راجع تحسين الأداء باستخدام التخزين المؤقت على Azure Databricks.
  • تمت ترقية عجلة مكتبة Python من 0.33.3 إلى 0.33.4.
  • ترقية مكتبة R nlme من 3.1-139 إلى 3.1-140.

إصلاح الأخطاء

  • تم إصلاح الإلغاء لأوامر R التي لا تقوم بتشغيل مهام Spark. في السابق، كان يمكن إلغاء أوامر R التي لا تشغل مهام Spark، ولكن سيتم فقدان حالة دفاتر الملاحظات؛ يمكن الآن إلغاء الأوامر دون فقدان حالة دفتر الملاحظات.
  • يؤدي إسقاط جدول مدار أو نقله الآن إلى إبطال سجل Delta Lake المخزن مؤقتا.
  • تم إصلاح خطأ أن كتابة نقطة التحقق Delta Lake قد تفشل بسبب FileAlreadyExistsException.
  • يقوم Scala REPL الآن بتعيين العلامة المناسبة -target:jvm-1.8 لدعم استدعاء أساليب Java التي تستخدم ميزات Java 8.

Apache Spark

يتضمن Databricks Runtime 5.5 Apache Spark 2.4.3. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 5.4 (EoS)، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:

  • [SPARK-24695] السماح ل UDFs بإرجاع CalendarInterval
  • [SPARK-28056] إضافة docstring/doctest SCALAR_ITER pandas UDF
  • [SPARK-28185] إغلاق المولد عند توقف Python UDFs مبكرا
  • [SPARK-24703] دعم ضرب الفاصل الزمني
  • [SPARK-27018][CORE] إصلاح الإزالة غير الصحيحة للملف الذي تم فحصه في PeriodicCheckpointer
  • [SPARK-28127][SQL] التحسين الدقيق على أسلوب MapChildren في TreeNode
  • [SPARK-26038] عشري إلىScalaBigInt/toJavaBigInteger للأعداد العشرية التي لا تناسبها طويلا
  • [SPARK-26555][SQL] جعل ScalaReflection subtype checking thread safe
  • [SPARK-28081][ML] معالجة عدد الفوكاب الكبير في word2vec
  • [SPARK-21882][CORE] لا تحسب OutputMetrics وحدات البايت المكتوبة بشكل صحيح في الدالة saveAsHadoopDataset
  • [SPARK-28030] تحويل filePath إلى URI في مصدر بيانات الملف الثنائي
  • [SPARK-27803][SQL][PYTHON] إصلاح تشذيب العمود ل Python UDF
  • [SPARK-27917][SQL] شكل متعارف عليه لكائن CaseWhen غير صحيح
  • [SPARK-27798][SQL] لا يجب أن ينتج from_avro نفس القيمة عند تحويلها إلى علاقة محلية
  • [SPARK-27873][SQL] يجب عدم التحقق من columnNameOfCorruptRecord بأسماء الأعمدة في رأس CSV عند تعطيل enforceSchema
  • [SPARK-27907][SQL] يجب أن ترجع HiveUDAF NULL في حالة وجود 0 صفوف
  • [SPARK-27699][SQL] دفع دالة التقييم المفككة جزئيا في Parquet/ORC
  • [SPARK-27868][CORE] قيمة افتراضية أفضل ووثائق لتراكم خادم مأخذ التوصيل.
  • [SPARK-27869][CORE] تنقيح المعلومات الحساسة في خصائص النظام من واجهة المستخدم
  • [SPARK-27863][SQL][BACKPORT-2.4] يجب عدم حساب ملفات بيانات التعريف والملفات المؤقتة كملفات بيانات
  • [SPARK-27657][ML] إصلاح تنسيق السجل ل ml.util.Instrumentation.logFai...
  • [SPARK-27858][SQL] إصلاح إلغاء تسلسل Avro على أنواع الاتحاد مع أنواع متعددة غير خالية
  • [SPARK-27711][CORE] إلغاء تعيين InputFileBlockHolder في نهاية المهام
  • [SPARK-27351][SQL] تقدير outputRows غير صحيح بعد AggregateEstimation مع عمود قيمة خالية فقط
  • [SPARK-27539][SQL] إصلاح تقدير outputRows التجميعي غير الدقيق مع عمود يحتوي على قيم خالية"
  • [SPARK-27800][SQL] إصلاح الإجابة الخاطئة على حالات اختبار BitwiseXor
  • [SPARK-27639][SQL] InMemoryTableScan يعرض اسم الجدول على واجهة المستخدم إذا أمكن
  • [SPARK-27726][CORE] إصلاح أداء حذف ElementTrackingStore عند استخدام InMemoryStore تحت الأحمال العالية
  • [SPARK-27771][SQL] إضافة وصف SQL لدالات التجميع (مكعب، مجموعة، تجميع، grouping_id)
  • [SPARK-27735][SS] يجب أن تكون سلسلة الفاصل الزمني لتحليلها غير حساسة لحالة الأحرف في SS
  • [SPARK-26856][PYSPARK] دعم Python لواجهات برمجة التطبيقات from_avro to_avro
  • [SPARK-26870][SQL] نقل to_avro/from_avro إلى كائن الوظائف بسبب توافق Java
  • [SPARK-26812][SQL] الإبلاغ عن قابلية القيم الخالية الصحيحة لنماذج البيانات المعقدة في Union
  • [SPARK-27671][SQL] إصلاح الخطأ عند التحويل من قيمة خالية متداخلة في بنية
  • [SPARK-27673][SQL] إضافة since معلومات إلى تعبيرات عشوائية و regex وخالية
  • [SPARK-27672][SQL] إضافة since معلومات إلى تعبيرات السلسلة
  • [SPARK-25139][SPARK-18406][CORE] تجنب NonFatals لقتل المنفذ في PythonRunner
  • [SPARK-27624][CORE] إصلاح CalenderInterval لإظهار فاصل زمني فارغ بشكل صحيح
  • [SPARK-27577][MLLIB] الحدود الصحيحة المعطلة في BinaryClassificationMetrics
  • [SPARK-27621][ML] الانحدار الخطي - التحقق من صحة المعلمات المتعلقة بالتدريب مثل الخسارة فقط أثناء مرحلة التركيب
  • [SPARK-26048][SPARK-24530] Cherrypick جميع التثبيتات المفقودة إلى برنامج نصي للإصدار 2.4
  • [SPARK-24935][SQL] دعم INIT -> UPDATE -> MERGE -> FINISH في محول Hive UDAF

تحديثات الصيانة

راجع تحديثات صيانة Databricks Runtime 5.5.

بيئة النظام

  • نظام التشغيل: Ubuntu 16.04.6 LTS
  • Java: 1.8.0_252
  • Scala: 2.11.12
  • Python: 2.7.12 لمجموعات Python 2 و3.5.2 لمجموعات Python 3.
  • R: R الإصدار 3.6.0 (2019-04-26)
  • مجموعات GPU: يتم تثبيت مكتبات NVIDIA GPU التالية:
    • Tesla driver 375.66
    • CUDA 9.0
    • cuDNN 7.0

إشعار

على الرغم من أن Scala 2.12 مدعوم في Apache Spark 2.4، إلا أنه غير مدعوم في Databricks Runtime 5.5.

في هذا القسم:

مكتبات Python المثبتة

مكتبة إصدار مكتبة إصدار مكتبة إصدار
ansi2html 1.1.1 argparse 1.2.1 backports-abc 0.5
boto 2.42.0 boto3 1.4.1 روبوت الدردشة 1.4.70
brewer2mpl 1.4.1 شهادة 2016.2.28 cffi 1.7.0
تجزئة 2.3.0 سمة ملونة 0.3.7 configobj 5.0.6
التشفير 1.5 دورة 0.10.0 Cython 0.24.1
ديكور 4.0.10 docutils 0.14 قائمة تعداد 34 1.1.6
et-xmlfile 1.0.1 freetype-py 1.0.2 funcsigs 1.0.2
صمام مدمج 2.0.4 العقود الاجله 3.2.0 ggplot 0.6.8
html5lib 0.999 idna 2.1 عنوان ipaddress 1.0.16
ipython 2.2.0 ipython-genutils 0.1.0 jdcal 1.2
جينجا 2 2.8 مسار jmespath 0.9.0 llvmlite 0.13.0
lxml 3.6.4 MarkupSafe 0.23 matplotlib 1.5.3
mpld3 0.2 msgpack-python 0.4.7 ndg-httpsclient 0.3.3
numba 0.28.1 numpy 1.11.1 openpyxl 2.3.2
pandas 0.19.2 pathlib2 2.1.0 بتسي 0.4.1
pexpect 4.0.1 pickleshare 0.7.4 مخدة 3.3.1
pip 19.1.1 رقائق 3.9 مجموعة أدوات المطالبة 1.0.7
psycopg2 2.6.2 عملية ptyprocess 0.5.1 py4j 0.10.3
pyarrow 0.8.0 pyasn1 0.1.9 pycparser 2.14
Pygments 2.1.3 PyGObject 3.20.0 pyOpenSSL 16.0.0
pyparsing 2.2.0 pypng 0.0.18 Python 2.7.12
python-dateutil 2.5.3 python-geohash 0.8.5 pytz 2016.6.1
الطلبات 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
شفرة 0.18.1 نظف 0.32 بحر محمول 0.7.1
أدوات الإعداد 41.0.1 simplejson 3.8.2 بسيط3 1.0
أحادي الموضع 3.4.0.3 ستة 1.10.0 نماذج الإحصائيات 0.6.1
اعصار 5.1.1 سمات السمات 4.3.0 urllib3 1.19.1
virtualenv 16.1.0 wcwidth 0.1.7 دولاب 0.33.4
wsgiref 0.1.2

مكتبات R المثبتة

مكتبة إصدار مكتبة إصدار مكتبة إصدار
abind 1.4-5 askpass 1.1 assertthat 0.2.1
backports 1.1.3 الأساس 3.6.0 base64enc 0.1-3
BH 1.69.0-1 بت 1.1-14 bit64 0.9-7
bitops 1.0-6 كائن ثنائي كبير الحجم 1.1.1 boot 1.3-20
المشروب 1.0-6 callr 3.2.0 car 3.0-2
carData 3.0-2 علامة إقحام 6.0-82 cellranger 1.1.0
كرون 2.3-53 فئة 7.3-15 cli 1.1.0
clipr 0.5.0 clisymbols 1.2.0 نظام مجموعة 2.0.8
codetools 0.2-16 colorspace 1.4-1 العلامة الشائعة 1.7
compiler 3.6.0 config 0.3 crayon 1.3.4
curl 3.3 data.table 1.12.0 مجموعات البيانات 3.6.0
DBI 1.0.0 dbplyr 1.3.0 تنازلي 1.2.0
devtools 2.0.1 digest 0.6.18 doMC 1.3.5
dplyr 0.8.0.1 علامة الحذف 0.1.0 fansi 0.4.0
forcats 0.4.0 Foreach 1.4.4 foreign 0.8-71
زور 0.2.0 fs 1.2.7 غيغابايت 2.1.5
generics 0.0.2 ggplot2 3.1.0 غ 1.0.1
git2r 0.25.2 glmnet 2.0-16 glue ⁦⁩⁦⁩1.3.1
gower 0.2.0 graphics 3.6.0 grDevices 3.6.0
grid 3.6.0 gridExtra 2.3 gsubfn 0.7
gtable 0.3.0 h2o 3.22.1.1 haven 2.1.0
hms 0.4.2 htmltools 0.3.6 htmlwidgets 1.3
httr 1.4.0 hwriter 1.3.2 hwriterPlus 1.0-3
ini 0.3.1 ipred 0.9-8 iterators 1.0.10
jsonlite 1.6 KernSmooth 2.23-15 labeling 0.3
lattice 0.20-38 lava 1.6.5 lazyeval 0.2.2
أكثر طفاية 0.3.7 lme4 1.1-21 lubridate 1.7.4
magrittr 1.5 مشروع الخريطة 1.2.6 الخرائط 3.3.0
أصنام الخرائط 0.9-5 MASS 7.3-51.1 مصفوفة 1.2-17
نماذج المصفوفة 0.4-1 المذكرة 1.1.0 الأساليب 3.6.0
mgcv 1.8-28 mime 0.6 مينقا 1.2.4
ModelMetrics 1.2.2 munsell 0.5.0 mvtnorm 1.0-10
nlme 3.1-140 nloptr 1.2.1 nnet 7.3-12
numDeriv 2016.8-1 openssl 1.3 openxlsx 4.1.0
parallel 3.6.0 pbkrtest 0.4-7 pillar ⁦⁩⁦⁩1.3.1
pkgbuild 1.0.3 pkgconfig 2.0.2 pkgKitten 0.1.4
pkgload 1.0.2 plogr 0.2.0 plyr 1.8.4
مدح 1.0.0 prettyunits 1.0.2 بروك 1.14.0
processx 3.3.0 prodlim 2018.04.18 التقدم 1.2.0
proto 1.0.0 ps 1.3.0 purrr 0.3.2
quantreg 5.38 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.8.0 r2d3 0.2.3 R6 2.4.0
randomForest 4.6-14 طيور الراب 0.3.1 rcmdcheck 1.3.2
RColorBrewer 1.1-2 Rcpp 1.0.1 RcppEigen 0.3.3.5.0
RcppRoll 0.3.0 RCurl 1.95-4.12 readr ⁦⁩⁦⁩1.3.1
readxl ⁦⁩⁦⁩1.3.1 recipes 0.1.5 rematch 1.0.1
أجهزة التحكم عن بعد 2.0.2 reshape2 1.4.3 ريو 0.5.16
rlang 0.3.3 RODBC 1.3-15 roxygen2 6.1.1
rpart 4.1-15 rprojroot 1.3-2 Rserve 1.8-6
RSQLite 2.1.1 rstudioapi 0.10 scales 1.0.0
معلومات الجلسة 1.1.1 sp 1.3-1 sparklyr 1.0.0
سبارك 2.4.4 SparseM 1.77 spatial 7.3-11
splines 3.6.0 sqldf 0.4-11 SQUAREM 2017.10-1
statmod 1.4.30 stats 3.6.0 stats4 3.6.0
stringi 1.4.3 stringr 1.4.0 survival 2.43-3
sys 3.1 tcltk 3.6.0 TeachingDemos 2.10
اختبار الذي 2.0.1 tibble 2.1.1 tidyr 0.8.3
tidyselect 0.2.5 timeDate 3043.102 الأدوات 3.6.0
استخدام هذا 1.4.0 utf8 1.1.4 utils 3.6.0
viridisLite 0.3.0 whisker 0.3-2 withr 2.1.2
xml2 1.2.0 xopen 1.0.0 yaml 2.2.0
zip 2.0.1

مكتبات Java و Scala المثبتة (إصدار نظام مجموعة Scala 2.11)

معرف مجموعة معرف البيانات الاصطناعية إصدار
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.8.10
com.amazonaws aws-java-sdk-autoscaling 1.11.313
com.amazonaws aws-java-sdk-cloudformation 1.11.313
com.amazonaws aws-java-sdk-cloudfront 1.11.313
com.amazonaws aws-java-sdk-cloudhsm 1.11.313
com.amazonaws aws-java-sdk-cloudsearch 1.11.313
com.amazonaws aws-java-sdk-cloudtrail 1.11.313
com.amazonaws aws-java-sdk-cloudwatch 1.11.313
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.313
com.amazonaws aws-java-sdk-codedeploy 1.11.313
com.amazonaws aws-java-sdk-cognitoidentity 1.11.313
com.amazonaws aws-java-sdk-cognitosync 1.11.313
com.amazonaws aws-java-sdk-config 1.11.313
com.amazonaws aws-java-sdk-core 1.11.313
com.amazonaws aws-java-sdk-datapipeline 1.11.313
com.amazonaws aws-java-sdk-directconnect 1.11.313
com.amazonaws aws-java-sdk-directory 1.11.313
com.amazonaws aws-java-sdk-dynamodb 1.11.313
com.amazonaws aws-java-sdk-ec2 1.11.313
com.amazonaws aws-java-sdk-ecs 1.11.313
com.amazonaws aws-java-sdk-efs 1.11.313
com.amazonaws aws-java-sdk-elasticache 1.11.313
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.313
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.313
com.amazonaws aws-java-sdk-elastictranscoder 1.11.313
com.amazonaws aws-java-sdk-emr 1.11.313
com.amazonaws aws-java-sdk-glacier 1.11.313
com.amazonaws aws-java-sdk-glue 1.11.313
com.amazonaws aws-java-sdk-iam 1.11.313
com.amazonaws aws-java-sdk-importexport 1.11.313
com.amazonaws aws-java-sdk-kinesis 1.11.313
com.amazonaws aws-java-sdk-kms 1.11.313
com.amazonaws aws-java-sdk-lambda 1.11.313
com.amazonaws aws-java-sdk-logs 1.11.313
com.amazonaws aws-java-sdk-machinelearning 1.11.313
com.amazonaws aws-java-sdk-opsworks 1.11.313
com.amazonaws aws-java-sdk-rds 1.11.313
com.amazonaws aws-java-sdk-redshift 1.11.313
com.amazonaws aws-java-sdk-route53 1.11.313
com.amazonaws aws-java-sdk-s3 1.11.313
com.amazonaws aws-java-sdk-ses 1.11.313
com.amazonaws aws-java-sdk-simpledb 1.11.313
com.amazonaws aws-java-sdk-simpleworkflow 1.11.313
com.amazonaws aws-java-sdk-sns 1.11.313
com.amazonaws aws-java-sdk-sqs 1.11.313
com.amazonaws aws-java-sdk-ssm 1.11.313
com.amazonaws aws-java-sdk-storagegateway 1.11.313
com.amazonaws aws-java-sdk-sts 1.11.313
com.amazonaws دعم aws-java-sdk 1.11.313
com.amazonaws مكتبات aws-java-sdk-swf 1.11.22
com.amazonaws مساحات عمل aws-java-sdk 1.11.313
com.amazonaws jmespath-java 1.11.313
البحث في com.جزر hppc 0.7.2
com.chuusai shapeless_2.11 2.3.2
com.clearspring.analytics استدر 2.7.0
com.databricks Rserve 1.8-3
com.databricks dbml-local_2.11 0.5.0-db8-spark2.4
com.databricks اختبارات dbml-local_2.11 0.5.0-db8-spark2.4
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.11 0.4.15-9
com.databricks.scalapb scalapb-runtime_2.11 0.4.15-9
com.esotericsoftware kryo مظلل 4.0.2
com.esotericsoftware سجل الحد الأدنى 1.3.0
com.fasterxml زميل 1.0.0
com.fasterxml.jackson.core التعليقات التوضيحية ل جاكسون 2.6.7
com.fasterxml.jackson.core جاكسون النواة 2.6.7
com.fasterxml.jackson.core جاكسون-databind 2.6.7.1
com.fasterxml.jackson.dataformat جاكسون-dataformat-cbor 2.6.7
com.fasterxml.jackson.datatype جاكسون-datatype-joda 2.6.7
com.fasterxml.jackson.module jackson-module-paranamer 2.6.7
com.fasterxml.jackson.module jackson-module-scala_2.11 2.6.7.1
com.github.fommil أداة تحميل jniloader 1.1
com.github.fommil.netlib الذاكرة الأساسية 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.3.2-2
com.github.rwl jtransforms 2.4.0
com.google.code.findbugs jsr305 2.0.1
com.google.code.gson gson 2.2.4
com.google.guava الجوافه 15.0
com.google.protobuf protobuf-java 2.6.1
com.googlecode.javaewah JavaEWAH 0.3.2
com.h2database h2 1.3.174
com.jcraft jsch 0.1.50
com.jolbox cp عظمي 0.8.0.RELEASE
com.microsoft.azure azure-data-lake-store-sdk 2.2.8
com.microsoft.azure azure-storage 5.2.0
com.microsoft.sqlserver mssql-jdbc 6.2.2.jre8
com.ning ضغط lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.11 0.3
com.twitter برد-java 0.9.3
com.twitter chill_2.11 0.9.3
com.twitter مجموعة parquet-hadoop 1.6.0
com.twitter util-app_2.11 6.23.0
com.twitter util-core_2.11 6.23.0
com.twitter util-jvm_2.11 6.23.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging-api_2.11 2.1.2
com.typesafe.scala-logging scala-logging-slf4j_2.11 2.1.2
com.univocity محللات أحادية التكافؤ 2.7.3
com.vlkan خزائن مسطحة 1.2.0-3f79e055
com.zaxxer HikariCP 3.1.0
شائعات-beanutils شائعات-beanutils 1.9.3
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
المجموعات المشتركة المجموعات المشتركة 3.2.2
تكوين المشتركات تكوين المشتركات 1.6
commons-dbcp commons-dbcp 1.4
أداة تجزئة الشائعات أداة تجزئة الشائعات 1.8
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2.6
تسجيل المشتركات تسجيل المشتركات 1.1.3
commons-net commons-net 3.1
تجمع مشترك تجمع مشترك 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.7
io.airlift أداة ضغط الهواء 0.10
io.dropwizard.metrics metrics-core 3.1.5
io.dropwizard.metrics metrics-ganglia 3.1.5
io.dropwizard.metrics metrics-graphite 3.1.5
io.dropwizard.metrics المقاييس-الفحوصات الصحية 3.1.5
io.dropwizard.metrics metrics-jetty9 3.1.5
io.dropwizard.metrics metrics-json 3.1.5
io.dropwizard.metrics metrics-jvm 3.1.5
io.dropwizard.metrics metrics-log4j 3.1.5
io.dropwizard.metrics metrics-servlets 3.1.5
io.netty netty 3.9.9.Final
io.netty netty-all 4.1.17.Final
javax.activation التنشيط 1.1.1
javax.annotation javax.annotation-api 1.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.validation واجهة برمجة تطبيقات التحقق من الصحة 1.1.0.Final
javax.ws.rs javax.ws.rs-api 2.0.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
التفاف دائري التفاف دائري 5.5.1
jline jline 2.14.6
joda-time joda-time 2.9.3
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
أشجار maven hive-exec-with-glue hive-12679-patch_deploy
أشجار maven hive-exec-with-glue exec_shaded الخلية
net.hydromatic خصائص eigenbase 1.1.5
net.razorvine pyrolite 4.13
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.5
net.snowflake snowflake-jdbc 3.6.15
net.snowflake spark-snowflake_2.11 2.4.10-spark_2.4
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt oncrpc 1.0.7
org.antlr ST4 4.0.4
org.antlr وقت تشغيل antlr 3.4
org.antlr وقت تشغيل antlr4 4.7
org.antlr سلسلة قوالب 3.2.1
org.apache.ant نمل 1.9.2
org.apache.ant نملة-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.سهم تنسيق السهم 0.10.0
org.apache.سهم ذاكرة الأسهم 0.10.0
org.apache.سهم خط متجه للسهم 0.10.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.calcite الكالسيت-أفاتيكا 1.2.0 حاضنة
org.apache.calcite نواة الكالسيت 1.2.0 حاضنة
org.apache.calcite الكالسيت-linq4j 1.2.0 حاضنة
org.apache.commons ضغط الشائعات 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.5
org.apache.commons commons-math3 3.4.1
org.apache.curator عميل أمين 2.7.1
org.apache.curator إطار عمل أمين 2.7.1
org.apache.curator وصفات أمين 2.7.1
org.apache.derby الدربي 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop تعليقات توضيحية ل hadoop 2.7.3
org.apache.hadoop hadoop-auth 2.7.3
org.apache.hadoop عميل hadoop 2.7.3
org.apache.hadoop hadoop-common 2.7.3
org.apache.hadoop hadoop-hdfs 2.7.3
org.apache.hadoop hadoop-mapreduce-client-app 2.7.3
org.apache.hadoop hadoop-mapreduce-client-common 2.7.3
org.apache.hadoop hadoop-mapreduce-client-core 2.7.3
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.3
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.3
org.apache.hadoop hadoop-yarn-api 2.7.3
org.apache.hadoop hadoop-yarn-client 2.7.3
org.apache.hadoop hadoop-yarn-common 2.7.3
org.apache.hadoop hadoop-yarn-server-common 2.7.3
org.apache.htrace htrace-core 3.1.0 حاضنة
org.apache.httpcomponents httpclient 4.5.4
org.apache.httpcomponents httpcore 4.4.8
org.apache.ivy لبلاب 2.4.0
org.apache.orc orc-core-nohive 1.5.2
org.apache.orc orc-mapreduce-nohive 1.5.2
org.apache.orc orc-shims 1.5.2
org.apache.parquet عمود باركيه 1.10.1.1-databricks3
org.apache.parquet parquet-common 1.10.1.1-databricks3
org.apache.parquet ترميز باركيه 1.10.1.1-databricks3
org.apache.parquet تنسيق باركيه 2.4.0
org.apache.parquet parquet-hadoop 1.10.1.1-databricks3
org.apache.parquet باركيه جاكسون 1.10.1.1-databricks3
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.9.3
org.apache.xbean xbean-asm6-shaded 4.8
org.apache.zookeeper zookeeper 3.4.6
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson جاكسون جاكرس 1.9.13
org.codehaus.jackson جاكسون-mapper-asl 1.9.13
org.codehaus.jackson جاكسون-xc 1.9.13
org.codehaus.janino محول برمجي مشترك 3.0.10
org.codehaus.janino جانينو 3.0.10
org.datanucleus datanucleus-api-jdo 3.2.6
org.datanucleus datanucleus-core 3.2.10
org.datanucleus datanucleus-rdbms 3.2.9
org.eclipse.jetty عميل jetty 9.3.20.v20170531
org.eclipse.jetty متابعة jetty 9.3.20.v20170531
org.eclipse.jetty jetty-http 9.3.20.v20170531
org.eclipse.jetty jetty-io 9.3.20.v20170531
org.eclipse.jetty jetty-jndi 9.3.20.v20170531
org.eclipse.jetty jetty-plus 9.3.20.v20170531
org.eclipse.jetty وكيل jetty 9.3.20.v20170531
org.eclipse.jetty jetty-security 9.3.20.v20170531
org.eclipse.jetty خادم jetty 9.3.20.v20170531
org.eclipse.jetty jetty-servlet 9.3.20.v20170531
org.eclipse.jetty jetty-servlets 9.3.20.v20170531
org.eclipse.jetty jetty-util 9.3.20.v20170531
org.eclipse.jetty jetty-webapp 9.3.20.v20170531
org.eclipse.jetty jetty-xml 9.3.20.v20170531
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.4.0-b34
org.glassfish.hk2 محدد موقع hk2 2.4.0-b34
org.glassfish.hk2 hk2-utils 2.4.0-b34
org.glassfish.hk2 osgi-resource-locator 1.0.1
org.glassfish.hk2.external إعادة حزم الأوبالين 2.4.0-b34
org.glassfish.hk2.external javax.inject 2.4.0-b34
org.glassfish.jersey.bundles.repackaged جيرسي جوافا 2.22.2
org.glassfish.jersey.containers جيرسي حاوية-servlet 2.22.2
org.glassfish.jersey.containers جيرسي-حاوية-servlet-core 2.22.2
org.glassfish.jersey.core جيرسي-العميل 2.22.2
org.glassfish.jersey.core جيرسي المشتركة 2.22.2
org.glassfish.jersey.core خادم جيرسي 2.22.2
org.glassfish.jersey.media جيرسي-وسائل الإعلام-جاكسب 2.22.2
org.hibernate مدقق الإسبات 5.1.1.Final
org.iq80.snappy لاذع 0.2
org.javassist javassist 3.18.1-GA
org.jboss.logging تسجيل jboss 3.1.3.GA
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org.lz4 lz4-java 1.4.0
org.mariadb.jdbc mariadb-java-client 2.1.2
org.mockito mockito-all 1.9.5
org.objenesis داء objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap هديرBitmap 0.7.45
org.roaringbitmap الحشوات 0.7.45
org.rocksdb rocksdbjni 5.2.1
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.11 2.11.12
org.scala-lang scala-library_2.11 2.11.12
org.scala-lang scala-reflect_2.11 2.11.12
org.scala-lang.modules scala-parser-combinators_2.11 1.1.0
org.scala-lang.modules scala-xml_2.11 1.0.5
org.scala-sbt واجهة الاختبار 1.0
org.scalacheck scalacheck_2.11 1.12.5
org.scalactic scalactic_2.11 3.0.3
org.scalanlp نسيم macros_2.11 0.13.2
org.scalanlp breeze_2.11 0.13.2
org.scalatest scalatest_2.11 3.0.3
org.slf4j jcl-over-slf4j 1.7.16
org.slf4j jul-to-slf4j 1.7.16
org.slf4j slf4j-api 1.7.16
org.slf4j slf4j-log4j12 1.7.16
org.spark-project.hive hive-beeline 1.2.1.spark2
org.spark-project.hive hive-cli 1.2.1.spark2
org.spark-project.hive hive-jdbc 1.2.1.spark2
org.spark-project.hive hive-metastore 1.2.1.spark2
org.spark-project.spark غير مستخدم 1.0.0
org.spire-math spire-macros_2.11 0.13.0
org.spire-math spire_2.11 0.13.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.tukaani xz 1.5
مستوى org.typelevel machinist_2.11 0.6.1
مستوى org.typelevel ماكرو-compat_2.11 1.1.1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.3
org.yaml ثعبان الثعبان 1.16
oro oro 2.0.8
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenc xmlenc 0.52