مشاركة عبر

Databricks Runtime 5.3 (EoS)

  • مقالة

إشعار

انتهى دعم إصدار وقت تشغيل Databricks هذا. للحصول على تاريخ انتهاء الدعم، راجع محفوظات انتهاء الدعم. لجميع إصدارات وقت تشغيل Databricks المدعومة، راجع إصدارات ملاحظات إصدار Databricks Runtime والتوافق.

أصدرت Databricks هذا الإصدار في أبريل 2019.

توفر ملاحظات الإصدار التالية معلومات حول Databricks Runtime 5.3، مدعومة من Apache Spark.

ميزات جديدة

Databricks Delta

التوفر العام للسفر عبر الزمن

انتقل السفر عبر الزمن في دلتا إلى التوفر العام. يضيف القدرة على الاستعلام عن لقطة لجدول باستخدام سلسلة طابع زمني أو إصدار، باستخدام بناء جملة SQL بالإضافة DataFrameReader إلى خيارات تعبيرات الطابع الزمني.

SELECT count(*) FROM events TIMESTAMP AS OF timestamp_expression
SELECT count(*) FROM events VERSION AS OF version

السفر عبر الزمن له العديد من حالات الاستخدام، بما في ذلك:

  • إعادة إنشاء التحليلات أو التقارير أو المخرجات (على سبيل المثال، ناتج نموذج التعلم الآلي)، وهو أمر مفيد لتصحيح الأخطاء أو التدقيق، خاصة في الصناعات الخاضعة للتنظيم.
  • كتابة الاستعلامات المؤقتة المعقدة.
  • إصلاح الأخطاء في بياناتك.
  • توفير عزل اللقطات لمجموعة من الاستعلامات للجداول سريعة التغير.

السفر عبر الزمن في دلتا

راجع العمل مع محفوظات جدول Delta Lake.

النسخ المتماثل لجدول MySQL إلى Delta Public Preview

دفق البيانات من جدول MySQL مباشرة إلى Delta لاستهلاك انتقال البيانات من الخادم في تحليلات Spark أو مهام سير عمل علوم البيانات. الاستفادة من نفس الاستراتيجية التي يستخدمها MySQL للنسخ المتماثل إلى مثيلات أخرى، binlog يتم استخدام لتحديد التحديثات التي تتم معالجتها ثم دفقها إلى Databricks كما يلي:

  • يقرأ أحداث التغيير من سجل قاعدة البيانات.
  • دفق الأحداث إلى Databricks.
  • يكتب بنفس الترتيب إلى جدول Delta.
  • يحافظ على الحالة في حالة قطع الاتصال من المصدر.

ميزات المعاينة الخاصة

يحتوي هذا الإصدار على ميزات المعاينة الخاصة التالية ل Delta Lake:

  • تمت إضافة أمر تجريبي يسمح ل Presto بالاستعلام مباشرة عن جداول Delta.
  • يحسن التحسين التلقائي تخطيط الملف أثناء عمليات الكتابة الفردية إلى جدول Delta ويمنع الملفات الصغيرة من التراكم في جداول Delta للحفاظ على أداء الاستعلام بسرعة البرق. بالإضافة إلى ذلك، قد تتمتع عمليات الكتابة والتصنيف في جداول دلتا المقسمة بسرعات كبيرة بفضل التبديل العشوائي التكيفي الذي تم تقديمه في عمليات الكتابة.

إذا كنت ترغب في المشاركة في أي من المعاينة، فاتصل بفريق حساب Databricks.

مجلد DBFS FUSE المحسن لأحمال عمل التعلم العميق

يوفر Azure Databricks الآن تركيب FUSE محسنا. يمكن أن يكون لديك وصول عالي الأداء إلى البيانات أثناء التدريب والاستدلال دون تطبيق البرامج النصية init. يتم الآن دعم البيانات المخزنة تحت dbfs:/ml ويمكن الوصول إليها محليا في file:/dbfs/ml بواسطة هذا التحميل FUSE المحسن. راجع تحميل البيانات للتعلم الآلي والتعلم العميق.

التحسينات

  • المكتبات ذات نطاق دفتر الملاحظات:

    • دعم الإضافات في dbutils.library.installPyPI.
    • دعم تثبيت المكتبة ذات نطاق دفتر الملاحظات للمكتبات في نظام ملفات Azure، بما في ذلك wasbsو adlsو.abfss
    • رسائل خطأ محسنة للمكتبات ذات نطاق دفتر الملاحظات على أهداف غير مدعومة. على سبيل المثال: "أدوات المكتبة المساعدة غير متوفرة في وقت تشغيل Databricks التعلم الآلي."

  • الاتصال ب Azure Data Lake Storage Gen2 (ADLS Gen2) دون الحاجة إلى منح دور RBAC "Storage Blob Data Contributor" على مستوى الحساب إلى كيان الخدمة.

  • لدى Databricks Advisor تلميحات إضافية لتحسين أداء الاستعلامات:

    • عندما يكون هناك العديد من الملفات الصغيرة لكل قسم -> قم بتحويل الجدول إلى Delta وتشغيل OPTIMIZE.
    • عندما يكون هناك عامل تصفية انتقائي للغاية -> قم بالتحويل إلى Delta واستخدم ZORDER BY.
    • عندما تصبح بيانات التعريف التي تجلب من Hive ازدحاما -> قم بتحويل الجدول إلى Delta.

  • تمت ترقية Ubuntu من 16.04.5 LTS إلى 16.04.6 LTS.

  • ترقية Scala 2.11 من 2.11.8 إلى 2.11.12.

  • ترقية بعض مكتبات Python المثبتة:

    • pip: 18.1 إلى 19.0.3.
    • setuptools: 40.6.3 إلى 40.8.0
    • العجلة: 0.32.3 إلى 0.33.1

  • تمت ترقية R من 3.4.4 إلى 3.5.2.

  • ترقية العديد من مكتبات R المثبتة. راجع مكتبات R المثبتة.

الإهمال

  • لم يعد موصل Apache Kafka 0.8 للبث المنظم مدعوما. يتم تضمينه في Databricks Runtime 5.3 ولكن ستتم إزالته من إصدار وقت تشغيل Databricks المستقبلي.
  • تم إهمال تصدير نموذج Databricks ML وسيتم إزالته في Databricks Runtime 6.0. استخدم MLeap لاستيراد النماذج وتصديرها بدلا من ذلك.
  • تمت spark.databricks.pyspark.enableExecutorFsPerms إزالته كخيار تكوين.

إصلاح الأخطاء

  • تثبيت مكتبة Python Egg الثابتة على مستوى المجموعة للمجموعات الممكنة لقوائم التحكم بالوصول للجداول.
  • تحسين إلغاء أمر Python عن طريق إصلاح الحالة التي يتم فيها استدعاء الإلغاء قبل تنفيذ الأمر.
  • تم إصلاح خطأ في قوائم التحكم بالوصول في الجدول: الآن عند سرد العناصر في قاعدة بيانات أو كتالوج، يمكنك رؤية الكائنات التي لديك الإذن لرؤيتها فقط.

Apache Spark

يتضمن Databricks Runtime 5.3 Apache Spark 2.4.0. يتضمن هذا الإصدار جميع إصلاحات Spark وتحسيناته المضمنة في Databricks Runtime 5.2 (EoS)، بالإضافة إلى إصلاحات الأخطاء الإضافية والتحسينات التالية التي تم إجراؤها على Spark:

  • [SPARK-27134][SQL] لا تعمل الدالة array_distinct بشكل صحيح مع الأعمدة التي تحتوي على صفيف من الصفيف
  • [SPARK-24669][SQL] إبطال الجداول في حالة DROP DATABASE CASCADE
  • [SPARK-26572][SQL] إصلاح تقييم نتائج codegen التجميعية
  • [SPARK-27046][DSTREAMS] إزالة المراجع ذات الصلة ب SPARK-19185 من الوثائق
  • [SPARK-26449][PYTHON] إضافة أسلوب تحويل إلى واجهة برمجة تطبيقات DataFrame
  • [SPARK-26740][SQL] قراءة إحصائيات عمود الطابع الزمني/التاريخ المكتوبة بواسطة Spark 3.0
  • [SPARK-26909][SQL] استخدام unsafeRow.hashCode() كقيمة تجزئة في HashAggregate
  • [SPARK-26990][SQL] FileIndex: استخدم أسماء الحقول المحددة للمستخدم إن أمكن
  • [SPARK-26851][SQL] إصلاح التأمين المدقق المزدوج في CachedRDDBuilder
  • [SPARK-26864][SQL] قد يرجع الاستعلام نتيجة غير صحيحة عند استخدام Python UDF كشرط شبه صلة يسرى
  • [SPARK-26887][SQL][PYTHON] إنشاء datetime.date مباشرة بدلا من إنشاء datetime64 كبيانات وسيطة.
  • [SPARK-26859][SQL] إصلاح خطأ فهرس كاتب الحقل في إلغاء تسلسل ORC غير المتجه
  • [SPARK-26864][SQL] قد يرجع الاستعلام نتيجة غير صحيحة عند استخدام Python UDF كشرط صلة ويستخدم udf سمات من كلا ساقي الصلة شبه اليسرى
  • [SPARK-24360][SPARK-26091][BACKPORT][SQL] دعم Hive 3.1 metastore
  • [SPARK-26873][SQL] استخدم طابعا زمنيا متناسقا لإنشاء معرفات مهمة Hadoop.
  • [SPARK-26734][البث] إصلاح StackOverflowError مع قائمة انتظار كتلة كبيرة
  • [SPARK-26758][CORE] لا يتم قتل المنفذين الخمول بعد قيمة spark.dynamiAllocation.executorIdleTimeout
  • [SPARK-26751][SQL] إصلاح تسرب الذاكرة عند تشغيل عبارة في الخلفية وطرح استثناء وهو ليس HiveSQLException
  • [SPARK-26806][SS] يجب أن يتعامل EventTimeStats.merge مع الأصفار بشكل صحيح
  • [SPARK-26745][SPARK-24959][SQL] إرجاع تحسين العد في مصدر بيانات JSON بواسطة
  • [SPARK-26757][GRAPHX] إرجاع 0 للعد على مجموعات بيانات موزعة مرنة فارغة من Edge/Vertex
  • [SPARK-26726] مزامنة مقدار الذاكرة المستخدمة بواسطة متغير البث إلى عرض واجهة المستخدم
  • [SPARK-26718][SS] تجاوز عدد صحيح ثابت في حساب معدل Kafka SS
  • [SPARK-26708][SQL] نتيجة غير صحيحة ناتجة عن عدم التناسق بين مجموعة البيانات الموزعة المرنة المخزنة مؤقتا في ذاكرة التخزين المؤقت ل SQL وخطتها الفعلية
  • [SPARK-26735][SQL] التحقق من تكامل الخطة للتعبيرات الخاصة
  • [SPARK-26619][SQL] قم بتقليم المسلسلات غير المستخدمة من SerializeFromObject
  • [SPARK-26379][SS] استخدام TimeZoneId الوهمي لتجنب UnresolvedException في CurrentBatchTimestamp
  • [SPARK-26495][SQL] تبسيط مستخرج SelectedField
  • [SPARK-26379][SS] إصلاح مشكلة إضافة current_timestamp/current_date إلى تدفق الاستعلام
  • [SPARK-26709][SQL] لا يعالج OptimizeMetadataOnlyQuery السجلات الفارغة بشكل صحيح
  • [SPARK-26680][SQL] إنشاء inputVars بشغف بينما تكون الشروط مناسبة
  • [SPARK-26682][SQL] استخدم taskAttemptID بدلا من attemptNumber ل Hadoop.
  • [SPARK-26706][SQL] إصلاح NumericPrecedence غير القانوني ل ByteType
  • [SPARK-26228][MLLIB] تمت مواجهة مشكلة OOM عند حوسبة مصفوفة Gramian
  • [SPARK-26665][CORE] إصلاح خطأ قد يتعطل BlockTransferService.fetchBlockSync إلى الأبد
  • [SPARK-26549][PYSPARK] إصلاح إعادة استخدام عامل python لا يؤثر على موازاة النطاق البطيء القابل لل تكرار
  • [SPARK-26351][MLLIB] تحديث المستند والتصحيح الثانوي في مقاييس تقييم mllib
  • [SPARK-26450]تجنب إعادة إنشاء خريطة المخطط لكل عمود في الإسقاط
  • [SPARK-26638][PYSPARK][ML] ترجع فئات متجهات Pyspark دائما خطأ للنفي الأحادي
  • [SPARK-26633][REPL] إضافة ExecutorClassLoader.getResourceAsStream
  • [SPARK-26629][SS] تم إصلاح الخطأ مع دفق ملفات متعددة في استعلام + إعادة تشغيل على دفعة لا تحتوي على بيانات لدفق ملف واحد
  • [SPARK-25992][PYTHON] لا يمكن مشاركة مستند SparkContext للمعالجة المتعددة
  • [SPARK-26615][CORE] إصلاح تسرب موارد خادم النقل/العميل في الوحدات الأساسية
  • [SPARK-26350][SS] السماح بتجاوز معرف المجموعة لمستهلك Kafka
  • [SPARK-26538][SQL] تعيين الدقة الافتراضية والمقياس لعناصر الصفيف الرقمي postgres
  • [SPARK-26586][SS] إصلاح حالة السباق التي تتسبب في تشغيل التدفقات مع تكوينات غير متوقعة
  • [SPARK-26551][SQL] إصلاح خطأ تنقيح المخطط عند تحديد حقل معقد واحد وعدم وجود دالة تقييم فارغة على حقل آخر
  • [SPARK-26576][SQL] لم يتم تطبيق تلميح البث على الجدول المقسم
  • [SPARK-26571][SQL] تحديث تعيين Hive Serde باسم متعارف عليه ل Parquet وOrc FileFormat
  • [SPARK-26267][SS] إعادة المحاولة عند الكشف عن إزاحات غير صحيحة من Kafka (2.4)
  • [SPARK-26559][التعلم الآلي][PYSPARK] لا يمكن لصورة التعلم الآلي العمل مع إصدارات numpy قبل 1.9
  • [SPARK-26078][SQL] سمات الانضمام الذاتي ل Dedup في الاستعلامات الفرعية IN

تحديثات الصيانة

راجع تحديثات صيانة Databricks Runtime 5.3.

بيئة النظام

  • نظام التشغيل: Ubuntu 16.04.6 LTS
  • Java: 1.8.0_191
  • Scala: 2.11.12
  • Python: 2.7.12 لمجموعات Python 2 و3.5.2 لمجموعات Python 3.
  • R: R الإصدار 3.5.2 (2018-12-20)
  • مجموعات GPU: يتم تثبيت مكتبات NVIDIA GPU التالية:
    • Tesla driver 375.66
    • CUDA 9.0
    • cuDNN 7.0

إشعار

على الرغم من أن Scala 2.12 مدعوم في Apache Spark 2.4، إلا أنه غير مدعوم في Databricks Runtime 5.3.

مكتبات Python المثبتة

مكتبة إصدار مكتبة إصدار مكتبة إصدار
ansi2html 1.1.1 argparse 1.2.1 backports-abc 0.5
boto 2.42.0 boto3 1.4.1 روبوت الدردشة 1.4.70
brewer2mpl 1.4.1 شهادة 2016.2.28 cffi 1.7.0
تجزئة 2.3.0 سمة ملونة 0.3.7 configobj 5.0.6
التشفير 1.5 دورة 0.10.0 Cython 0.24.1
ديكور 4.0.10 docutils 0.14 قائمة تعداد 34 1.1.6
et-xmlfile 1.0.1 freetype-py 1.0.2 funcsigs 1.0.2
صمام مدمج 2.0.4 العقود الاجله 3.2.0 ggplot 0.6.8
html5lib 0.999 idna 2.1 عنوان ipaddress 1.0.16
ipython 2.2.0 ipython-genutils 0.1.0 jdcal 1.2
جينجا 2 2.8 مسار jmespath 0.9.0 llvmlite 0.13.0
lxml 3.6.4 MarkupSafe 0.23 matplotlib 1.5.3
mpld3 0.2 msgpack-python 0.4.7 ndg-httpsclient 0.3.3
numba 0.28.1 numpy 1.11.1 openpyxl 2.3.2
pandas 0.19.2 pathlib2 2.1.0 بتسي 0.4.1
pexpect 4.0.1 pickleshare 0.7.4 مخدة 3.3.1
pip 19.0.3 رقائق 3.9 مجموعة أدوات المطالبة 1.0.7
psycopg2 2.6.2 عملية ptyprocess 0.5.1 py4j 0.10.3
pyarrow 0.8.0 pyasn1 0.1.9 pycparser 2.14
Pygments 2.1.3 PyGObject 3.20.0 pyOpenSSL 16.0.0
pyparsing 2.2.0 pypng 0.0.18 Python 2.7.12
python-dateutil 2.5.3 python-geohash 0.8.5 pytz 2016.6.1
الطلبات 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
شفرة 0.18.1 نظف 0.32 بحر محمول 0.7.1
أدوات الإعداد 40.8.0 simplejson 3.8.2 بسيط3 1.0
أحادي الموضع 3.4.0.3 ستة 1.10.0 نماذج الإحصائيات 0.6.1
اعصار 5.1.1 سمات السمات 4.3.0 urllib3 1.19.1
virtualenv 16.1.0 wcwidth 0.1.7 دولاب 0.33.1
wsgiref 0.1.2

مكتبات R المثبتة

مكتبة إصدار مكتبة إصدار مكتبة إصدار
abind 1.4-5 askpass 1.1 assertthat 0.2.0
backports 1.1.3 الأساس 3.5.2 base64enc 0.1-3
BH 1.69.0-1 بت 1.1-14 bit64 0.9-7
bitops 1.0-6 كائن ثنائي كبير الحجم 1.1.1 boot 1.3-20
المشروب 1.0-6 callr 3.1.1 car 3.0-2
carData 3.0-2 علامة إقحام 6.0-81 cellranger 1.1.0
كرون 2.3-53 فئة 7.3-15 cli 1.0.1
clipr 0.5.0 clisymbols 1.2.0 نظام مجموعة 2.0.7-1
codetools 0.2-16 colorspace 1.4-0 العلامة الشائعة 1.7
compiler 3.5.2 config 0.3 crayon 1.3.4
curl 3.3 data.table 1.12.0 مجموعات البيانات 3.5.2
DBI 1.0.0 dbplyr 1.3.0 تنازلي 1.2.0
devtools 2.0.1 digest 0.6.18 doMC 1.3.5
dplyr 0.8.0.1 علامة الحذف 0.1.0 fansi 0.4.0
forcats 0.4.0 Foreach 1.4.4 foreign 0.8-71
زور 0.2.0 fs 1.2.6 غيغابايت 2.1.5
generics 0.0.2 ggplot2 3.1.0 غ 1.0.1
git2r 0.24.0 glmnet 2.0-16 glue 1.3.0
gower 0.1.2 graphics 3.5.2 grDevices 3.5.2
grid 3.5.2 gridExtra 2.3 gsubfn 0.7
gtable 0.2.0 h2o 3.22.1.1 haven 2.1.0
hms 0.4.2 htmltools 0.3.6 htmlwidgets 1.3
httr 1.4.0 hwriter 1.3.2 hwriterPlus 1.0-3
ini 0.3.1 ipred 0.9-8 iterators 1.0.10
jsonlite 1.6 KernSmooth 2.23-15 labeling 0.3
lattice 0.20-38 lava 1.6.5 lazyeval 0.2.1
أكثر طفاية 0.3.6 lme4 1.1-20 lubridate 1.7.4
magrittr 1.5 مشروع الخريطة 1.2.6 الخرائط 3.3.0
أصنام الخرائط 0.9-5 MASS 7.3-51.1 مصفوفة 1.2-15
نماذج المصفوفة 0.4-1 المذكرة 1.1.0 الأساليب 3.5.2
mgcv 1.8-27 mime 0.6 مينقا 1.2.4
ModelMetrics 1.2.2 munsell 0.5.0 mvtnorm 1.0-9
nlme 3.1-137 nloptr 1.2.1 nnet 7.3-12
numDeriv 2016.8-1 openssl 1.2.2 openxlsx 4.1.0
parallel 3.5.2 pbkrtest 0.4-7 pillar ⁦⁩⁦⁩1.3.1
pkgbuild 1.0.2 pkgconfig 2.0.2 pkgKitten 0.1.4
pkgload 1.0.2 plogr 0.2.0 plyr 1.8.4
مدح 1.0.0 prettyunits 1.0.2 بروك 1.13.0
processx 3.2.1 prodlim 2018.04.18 التقدم 1.2.0
proto 1.0.0 ps 1.3.0 purrr 0.3.0
quantreg 5.38 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.8.0 r2d3 0.2.3 R6 2.4.0
randomForest 4.6-14 طيور الراب 0.3.1 rcmdcheck 1.3.2
RColorBrewer 1.1-2 Rcpp 1.0.0 RcppEigen 0.3.3.5.0
RcppRoll 0.3.0 RCurl 1.95-4.11 readr ⁦⁩⁦⁩1.3.1
readxl 1.3.0 recipes 0.1.4 rematch 1.0.1
أجهزة التحكم عن بعد 2.0.2 reshape2 1.4.3 ريو 0.5.16
rlang 0.3.1 RODBC 1.3-15 roxygen2 6.1.1
rpart 4.1-13 rprojroot 1.3-2 Rserve 1.8-6
RSQLite 2.1.1 rstudioapi 0.9.0 scales 1.0.0
معلومات الجلسة 1.1.1 sp 1.3-1 sparklyr 1.0.0
سبارك 2.4.2 SparseM 1.77 spatial 7.3-11
splines 3.5.2 sqldf 0.4-11 SQUAREM 2017.10-1
statmod 1.4.30 stats 3.5.2 stats4 3.5.2
stringi ⁦⁩⁦⁩1.3.1 stringr 1.4.0 survival 2.43-3
sys 3.0 tcltk 3.5.2 TeachingDemos 2.10
اختبار الذي 2.0.1 tibble 2.0.1 tidyr 0.8.3
tidyselect 0.2.5 timeDate 3043.102 الأدوات 3.5.2
استخدام هذا 1.4.0 utf8 1.1.4 utils 3.5.2
viridisLite 0.3.0 whisker 0.3-2 withr 2.1.2
xml2 1.2.0 xopen 1.0.0 yaml 2.2.0
zip 2.0.0

مكتبات Java و Scala المثبتة (إصدار نظام مجموعة Scala 2.11)

معرف مجموعة معرف البيانات الاصطناعية إصدار
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.8.10
com.amazonaws aws-java-sdk-autoscaling 1.11.313
com.amazonaws aws-java-sdk-cloudformation 1.11.313
com.amazonaws aws-java-sdk-cloudfront 1.11.313
com.amazonaws aws-java-sdk-cloudhsm 1.11.313
com.amazonaws aws-java-sdk-cloudsearch 1.11.313
com.amazonaws aws-java-sdk-cloudtrail 1.11.313
com.amazonaws aws-java-sdk-cloudwatch 1.11.313
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.313
com.amazonaws aws-java-sdk-codedeploy 1.11.313
com.amazonaws aws-java-sdk-cognitoidentity 1.11.313
com.amazonaws aws-java-sdk-cognitosync 1.11.313
com.amazonaws aws-java-sdk-config 1.11.313
com.amazonaws aws-java-sdk-core 1.11.313
com.amazonaws aws-java-sdk-datapipeline 1.11.313
com.amazonaws aws-java-sdk-directconnect 1.11.313
com.amazonaws aws-java-sdk-directory 1.11.313
com.amazonaws aws-java-sdk-dynamodb 1.11.313
com.amazonaws aws-java-sdk-ec2 1.11.313
com.amazonaws aws-java-sdk-ecs 1.11.313
com.amazonaws aws-java-sdk-efs 1.11.313
com.amazonaws aws-java-sdk-elasticache 1.11.313
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.313
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.313
com.amazonaws aws-java-sdk-elastictranscoder 1.11.313
com.amazonaws aws-java-sdk-emr 1.11.313
com.amazonaws aws-java-sdk-glacier 1.11.313
com.amazonaws aws-java-sdk-iam 1.11.313
com.amazonaws aws-java-sdk-importexport 1.11.313
com.amazonaws aws-java-sdk-kinesis 1.11.313
com.amazonaws aws-java-sdk-kms 1.11.313
com.amazonaws aws-java-sdk-lambda 1.11.313
com.amazonaws aws-java-sdk-logs 1.11.313
com.amazonaws aws-java-sdk-machinelearning 1.11.313
com.amazonaws aws-java-sdk-opsworks 1.11.313
com.amazonaws aws-java-sdk-rds 1.11.313
com.amazonaws aws-java-sdk-redshift 1.11.313
com.amazonaws aws-java-sdk-route53 1.11.313
com.amazonaws aws-java-sdk-s3 1.11.313
com.amazonaws aws-java-sdk-ses 1.11.313
com.amazonaws aws-java-sdk-simpledb 1.11.313
com.amazonaws aws-java-sdk-simpleworkflow 1.11.313
com.amazonaws aws-java-sdk-sns 1.11.313
com.amazonaws aws-java-sdk-sqs 1.11.313
com.amazonaws aws-java-sdk-ssm 1.11.313
com.amazonaws aws-java-sdk-storagegateway 1.11.313
com.amazonaws aws-java-sdk-sts 1.11.313
com.amazonaws دعم aws-java-sdk 1.11.313
com.amazonaws مكتبات aws-java-sdk-swf 1.11.22
com.amazonaws مساحات عمل aws-java-sdk 1.11.313
com.amazonaws jmespath-java 1.11.313
البحث في com.جزر hppc 0.7.2
com.chuusai shapeless_2.11 2.3.2
com.clearspring.analytics استدر 2.7.0
com.databricks Rserve 1.8-3
com.databricks dbml-local_2.11 0.5.0-db8-spark2.4
com.databricks اختبارات dbml-local_2.11 0.5.0-db8-spark2.4
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.11 0.4.15-9
com.databricks.scalapb scalapb-runtime_2.11 0.4.15-9
com.esotericsoftware kryo مظلل 4.0.2
com.esotericsoftware سجل الحد الأدنى 1.3.0
com.fasterxml زميل 1.0.0
com.fasterxml.jackson.core التعليقات التوضيحية ل جاكسون 2.6.7
com.fasterxml.jackson.core جاكسون النواة 2.6.7
com.fasterxml.jackson.core جاكسون-databind 2.6.7.1
com.fasterxml.jackson.dataformat جاكسون-dataformat-cbor 2.6.7
com.fasterxml.jackson.datatype جاكسون-datatype-joda 2.6.7
com.fasterxml.jackson.module jackson-module-paranamer 2.6.7
com.fasterxml.jackson.module jackson-module-scala_2.11 2.6.7.1
com.github.fommil أداة تحميل jniloader 1.1
com.github.fommil.netlib الذاكرة الأساسية 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.3.2-2
com.github.rwl jtransforms 2.4.0
com.google.code.findbugs jsr305 2.0.1
com.google.code.gson gson 2.2.4
com.google.guava الجوافه 15.0
com.google.protobuf protobuf-java 2.6.1
com.googlecode.javaewah JavaEWAH 0.3.2
com.h2database h2 1.3.174
com.jcraft jsch 0.1.50
com.jolbox cp عظمي 0.8.0.RELEASE
com.microsoft.azure azure-data-lake-store-sdk 2.2.8
com.microsoft.azure azure-storage 5.2.0
com.microsoft.sqlserver mssql-jdbc 6.2.2.jre8
com.ning ضغط lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.11 0.3
com.twitter برد-java 0.9.3
com.twitter chill_2.11 0.9.3
com.twitter مجموعة parquet-hadoop 1.6.0
com.twitter util-app_2.11 6.23.0
com.twitter util-core_2.11 6.23.0
com.twitter util-jvm_2.11 6.23.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging-api_2.11 2.1.2
com.typesafe.scala-logging scala-logging-slf4j_2.11 2.1.2
com.univocity محللات أحادية التكافؤ 2.7.3
com.vlkan خزائن مسطحة 1.2.0-3f79e055
com.zaxxer HikariCP 3.1.0
شائعات-beanutils شائعات-beanutils 1.7.0
شائعات-beanutils commons-beanutils-core 1.8.0
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
المجموعات المشتركة المجموعات المشتركة 3.2.2
تكوين المشتركات تكوين المشتركات 1.6
commons-dbcp commons-dbcp 1.4
أداة تجزئة الشائعات أداة تجزئة الشائعات 1.8
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2.6
تسجيل المشتركات تسجيل المشتركات 1.1.3
commons-net commons-net 3.1
تجمع مشترك تجمع مشترك 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.7
io.airlift أداة ضغط الهواء 0.10
io.dropwizard.metrics metrics-core 3.1.5
io.dropwizard.metrics metrics-ganglia 3.1.5
io.dropwizard.metrics metrics-graphite 3.1.5
io.dropwizard.metrics المقاييس-الفحوصات الصحية 3.1.5
io.dropwizard.metrics metrics-jetty9 3.1.5
io.dropwizard.metrics metrics-json 3.1.5
io.dropwizard.metrics metrics-jvm 3.1.5
io.dropwizard.metrics metrics-log4j 3.1.5
io.dropwizard.metrics metrics-servlets 3.1.5
io.netty netty 3.9.9.Final
io.netty netty-all 4.1.17.Final
io.prometheus واجهة سطر الأوامر البسيطة 0.0.16
io.prometheus simpleclient_common 0.0.16
io.prometheus simpleclient_dropwizard 0.0.16
io.prometheus simpleclient_servlet 0.0.16
io.prometheus.jmx جامع 0.7
javax.activation التنشيط 1.1.1
javax.annotation javax.annotation-api 1.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1.1
javax.validation واجهة برمجة تطبيقات التحقق من الصحة 1.1.0.Final
javax.ws.rs javax.ws.rs-api 2.0.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
التفاف دائري التفاف دائري 5.5.1
jline jline 2.14.6
joda-time joda-time 2.9.3
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.hydromatic خصائص eigenbase 1.1.5
net.razorvine pyrolite 4.13
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.5
net.snowflake snowflake-jdbc 3.6.15
net.snowflake spark-snowflake_2.11 2.4.10-spark_2.4
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt oncrpc 1.0.7
org.antlr ST4 4.0.4
org.antlr وقت تشغيل antlr 3.4
org.antlr وقت تشغيل antlr4 4.7
org.antlr سلسلة قوالب 3.2.1
org.apache.ant نمل 1.9.2
org.apache.ant نملة-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.سهم تنسيق السهم 0.10.0
org.apache.سهم ذاكرة الأسهم 0.10.0
org.apache.سهم خط متجه للسهم 0.10.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.calcite الكالسيت-أفاتيكا 1.2.0 حاضنة
org.apache.calcite نواة الكالسيت 1.2.0 حاضنة
org.apache.calcite الكالسيت-linq4j 1.2.0 حاضنة
org.apache.commons ضغط الشائعات 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.5
org.apache.commons commons-math3 3.4.1
org.apache.curator عميل أمين 2.7.1
org.apache.curator إطار عمل أمين 2.7.1
org.apache.curator وصفات أمين 2.7.1
org.apache.derby الدربي 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop تعليقات توضيحية ل hadoop 2.7.3
org.apache.hadoop hadoop-auth 2.7.3
org.apache.hadoop عميل hadoop 2.7.3
org.apache.hadoop hadoop-common 2.7.3
org.apache.hadoop hadoop-hdfs 2.7.3
org.apache.hadoop hadoop-mapreduce-client-app 2.7.3
org.apache.hadoop hadoop-mapreduce-client-common 2.7.3
org.apache.hadoop hadoop-mapreduce-client-core 2.7.3
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.3
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.3
org.apache.hadoop hadoop-yarn-api 2.7.3
org.apache.hadoop hadoop-yarn-client 2.7.3
org.apache.hadoop hadoop-yarn-common 2.7.3
org.apache.hadoop hadoop-yarn-server-common 2.7.3
org.apache.htrace htrace-core 3.1.0 حاضنة
org.apache.httpcomponents httpclient 4.5.4
org.apache.httpcomponents httpcore 4.4.8
org.apache.ivy لبلاب 2.4.0
org.apache.orc orc-core-nohive 1.5.2
org.apache.orc orc-mapreduce-nohive 1.5.2
org.apache.orc orc-shims 1.5.2
org.apache.parquet عمود باركيه 1.10.1.1-databricks3
org.apache.parquet parquet-common 1.10.1.1-databricks3
org.apache.parquet ترميز باركيه 1.10.1.1-databricks3
org.apache.parquet تنسيق باركيه 2.4.0
org.apache.parquet parquet-hadoop 1.10.1.1-databricks3
org.apache.parquet باركيه جاكسون 1.10.1.1-databricks3
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.9.3
org.apache.xbean xbean-asm6-shaded 4.8
org.apache.zookeeper zookeeper 3.4.6
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson جاكسون جاكرس 1.9.13
org.codehaus.jackson جاكسون-mapper-asl 1.9.13
org.codehaus.jackson جاكسون-xc 1.9.13
org.codehaus.janino محول برمجي مشترك 3.0.10
org.codehaus.janino جانينو 3.0.10
org.datanucleus datanucleus-api-jdo 3.2.6
org.datanucleus datanucleus-core 3.2.10
org.datanucleus datanucleus-rdbms 3.2.9
org.eclipse.jetty عميل jetty 9.3.20.v20170531
org.eclipse.jetty متابعة jetty 9.3.20.v20170531
org.eclipse.jetty jetty-http 9.3.20.v20170531
org.eclipse.jetty jetty-io 9.3.20.v20170531
org.eclipse.jetty jetty-jndi 9.3.20.v20170531
org.eclipse.jetty jetty-plus 9.3.20.v20170531
org.eclipse.jetty وكيل jetty 9.3.20.v20170531
org.eclipse.jetty jetty-security 9.3.20.v20170531
org.eclipse.jetty خادم jetty 9.3.20.v20170531
org.eclipse.jetty jetty-servlet 9.3.20.v20170531
org.eclipse.jetty jetty-servlets 9.3.20.v20170531
org.eclipse.jetty jetty-util 9.3.20.v20170531
org.eclipse.jetty jetty-webapp 9.3.20.v20170531
org.eclipse.jetty jetty-xml 9.3.20.v20170531
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.4.0-b34
org.glassfish.hk2 محدد موقع hk2 2.4.0-b34
org.glassfish.hk2 hk2-utils 2.4.0-b34
org.glassfish.hk2 osgi-resource-locator 1.0.1
org.glassfish.hk2.external إعادة حزم الأوبالين 2.4.0-b34
org.glassfish.hk2.external javax.inject 2.4.0-b34
org.glassfish.jersey.bundles.repackaged جيرسي جوافا 2.22.2
org.glassfish.jersey.containers جيرسي حاوية-servlet 2.22.2
org.glassfish.jersey.containers جيرسي-حاوية-servlet-core 2.22.2
org.glassfish.jersey.core جيرسي-العميل 2.22.2
org.glassfish.jersey.core جيرسي المشتركة 2.22.2
org.glassfish.jersey.core خادم جيرسي 2.22.2
org.glassfish.jersey.media جيرسي-وسائل الإعلام-جاكسب 2.22.2
org.hibernate مدقق الإسبات 5.1.1.Final
org.iq80.snappy لاذع 0.2
org.javassist javassist 3.18.1-GA
org.jboss.logging تسجيل jboss 3.1.3.GA
org.jdbi jdbi 2.63.1
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org.lz4 lz4-java 1.4.0
org.mariadb.jdbc mariadb-java-client 2.1.2
org.mockito mockito-all 1.9.5
org.objenesis داء objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap هديرBitmap 0.5.11
org.rocksdb rocksdbjni 5.2.1
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.11 2.11.12
org.scala-lang scala-library_2.11 2.11.12
org.scala-lang scala-reflect_2.11 2.11.12
org.scala-lang.modules scala-parser-combinators_2.11 1.1.0
org.scala-lang.modules scala-xml_2.11 1.0.5
org.scala-sbt واجهة الاختبار 1.0
org.scalacheck scalacheck_2.11 1.12.5
org.scalactic scalactic_2.11 3.0.3
org.scalanlp نسيم macros_2.11 0.13.2
org.scalanlp breeze_2.11 0.13.2
org.scalatest scalatest_2.11 3.0.3
org.slf4j jcl-over-slf4j 1.7.16
org.slf4j jul-to-slf4j 1.7.16
org.slf4j slf4j-api 1.7.16
org.slf4j slf4j-log4j12 1.7.16
org.spark-project.hive hive-beeline 1.2.1.spark2
org.spark-project.hive hive-cli 1.2.1.spark2
org.spark-project.hive hive-exec 1.2.1.spark2
org.spark-project.hive hive-jdbc 1.2.1.spark2
org.spark-project.hive hive-metastore 1.2.1.spark2
org.spark-project.spark غير مستخدم 1.0.0
org.spire-math spire-macros_2.11 0.13.0
org.spire-math spire_2.11 0.13.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.tukaani xz 1.5
مستوى org.typelevel machinist_2.11 0.6.1
مستوى org.typelevel ماكرو-compat_2.11 1.1.1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.1
org.yaml ثعبان الثعبان 1.16
oro oro 2.0.8
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenc xmlenc 0.52