مشاركة عبر

Databricks Runtime 16.0 ل التعلم الآلي

  • مقالة

يوفر Databricks Runtime 16.0 for التعلم الآلي بيئة جاهزة للاستخدام للتعلم الآلي وعلوم البيانات استنادا إلى Databricks Runtime 16.0. يحتوي التعلم الآلي من Databricks Runtime على العديد من مكتبات التعلم الآلي الشائعة، بما في ذلك TensorFlow وPyTorch وXGBoost. يتضمن التعلم الآلي من Databricks Runtime AutoML، وهي أداة لتدريب مسارات التعلم الآلي تلقائيا. يدعم التعلم الآلي من Databricks Runtime أيضا التدريب على التعلم العميق الموزع باستخدام TorchDistributor و DeepSpeed و Ray.

تلميح

للاطلاع على ملاحظات الإصدار لإصدارات Databricks Runtime التي وصلت إلى نهاية الدعم (EoS)، راجع ملاحظات إصدار وقت تشغيل Databricks لنهاية الدعم. تم إيقاف إصدارات وقت تشغيل EoS Databricks وقد لا يتم تحديثها.

ميزات وتحسينات جديدة

تم إنشاء Databricks Runtime 16.0 ML أعلى Databricks Runtime 16.0. للحصول على معلومات حول الجديد في Databricks Runtime 16.0، بما في ذلك Apache Spark MLlib وSparkR، راجع ملاحظات إصدار Databricks Runtime 16.0 .

حزم Python الجديدة

تمت إضافة حزم Python التالية إلى Databricks Runtime ML:

  • composer 0.24.1
  • optuna 3.6.1

أوزان عينة AutoML للتنبؤ

يدعم AutoML الآن نماذج الأوزان للتنبؤ، مما يتيح لك ضبط أهمية كل سلسلة زمنية لتدريب نماذج التنبؤ متعددة السلاسل الزمنية. لمزيد من المعلومات، راجع معلمات التنبؤ لواجهة برمجة تطبيقات AutoML Python.

استخدام طريقة عرض في كتالوج Unity كجدول ميزات

يمكنك الآن استخدام طريقة عرض في كتالوج Unity كجدول ميزات. راجع استخدام طريقة عرض موجودة في كتالوج Unity كجدول ميزات.

تغييرات أخرى

Horovod, HorovodRunner, Petastorm, spark-tensorflow-distributor removed

الحزم التالية التي تم تضمينها في الإصدارات السابقة من Databricks Runtime ML غير مضمنة في Databricks Runtime 16.0 ML:

  • Horovod
  • HorovodRunner
  • Petastorm
  • spark-tensorflow-distributor

توصي Databricks بالاستبدالات التالية:

  • للتعلم العميق الموزع، توصي Databricks باستخدام TorchDistributor للتدريب الموزع مع PyTorch أو tf.distribute.Strategy واجهة برمجة التطبيقات للتدريب الموزع باستخدام TensorFlow.
  • لتحميل مجموعات البيانات الكبيرة من التخزين السحابي، توصي Databricks باستخدام تدفق الفسيفساء.
  • للتدريب الموزع لنموذج TensorFlow أو Keras، توصي Databricks باستخدام Ray. راجع Ray على Databricks ووثائق Ray.

بيئة النظام

تختلف بيئة النظام في Databricks Runtime 16.0 ML عن Databricks Runtime 16.0 كما يلي:

  • بالنسبة إلى مجموعات GPU، يتضمن التعلم الآلي من Databricks Runtime مكتبات NVIDIA GPU التالية:
    • CUDA 12.6
    • cublas 12.6.0.22-1
    • cusolver 11.6.4.38-1
    • cupti 12.6.37-1
    • cusparse 12.5.2.23-1
    • cuDNN 9.3.0.75-1
    • NCCL 2.22.3
    • TensorRT 10.2.0.19-1

المكتبات

تسرد الأقسام التالية المكتبات المضمنة في Databricks Runtime 16.0 ML التي تختلف عن تلك المضمنة في Databricks Runtime 16.0.

في هذا القسم:

مكتبات من المستوى الأعلى

يتضمن Databricks Runtime 16.0 ML مكتبات المستوى الأعلى التالية:

مكتبات Python

يستخدم virtualenv Databricks Runtime 16.0 ML لإدارة حزمة Python ويتضمن العديد من حزم التعلم الآلي الشائعة.

بالإضافة إلى الحزم المحددة في الأقسام التالية، يتضمن Databricks Runtime 16.0 ML أيضا الحزم التالية:

  • hyperopt 0.2.7+db5
  • automl 1.29.0

لإعادة إنتاج بيئة Databricks Runtime ML Python في بيئة Python الظاهرية المحلية، قم بتنزيل ملف requirements-16.0.txt وتشغيل pip install -r requirements-16.0.txt. يقوم هذا الأمر بتثبيت جميع مكتبات مصدر مفتوح التي يستخدمها Databricks Runtime ML، ولكنه لا يقوم بتثبيت المكتبات التي تم تطويرها بواسطة Databricks، مثل databricks-automlأو databricks-feature-engineeringأو نسخة Databricks الخاصة ب hyperopt.

مكتبات Python على مجموعات وحدة المعالجة المركزية

مكتبة إصدار مكتبة إصدار مكتبة إصدار
absl-py 1.0.0 تسريع 0.33.0 aiohttp 3.9.5
aiohttp-cors 0.7.0 aiosignal 1.2.0 إنبيق 1.13.3
الأنواع ذات التعليقات التوضيحية 0.7.0 anyio 4.2.0 argcomplete 3.5.0
argon2-cffi 21.3.0 روابط argon2-cffi 21.2.0 سهم 1.2.3
استور 0.8.1 الرموز المميزة 2.0.5 astunparse 1.6.3
async-lru 2.0.4 سلاسل السلاسل 23.1.0 قراءة صوتية 3.0.1
الأوامر التلقائية 2.2.2 azure-core 1.31.0 azure-cosmos 4.3.1
هوية azure 1.18.0 azure-storage-blob 12.23.1 azure-storage-file-datalake 12.17.0
بابل 2.11.0 التراجع 2.2.1 backports.tarfile 1.2.0
bcrypt 3.2.0 beautifulsoup4 4.12.3 black 24.4.2
بيض 4.1.0 وامض 1.7.0 نعيم 0.7.11
boto3 1.34.69 روبوت الدردشة 1.34.69 Brotli 1.0.9
قوالب ذاكرة التخزين المؤقت 5.3.3 فهرس 2.0.10 ترميز الفئات 2.6.3
شهادة 2024.6.2 cffi 1.16.0 تجزئة 4.0.0
charset-normalizer 2.0.4 مكسر الدائرة 2.0.0 نقر 8.1.7
cloudpathlib 0.19.0 cloudpickle 2.2.1 cmdstanpy 1.2.4
colorful 0.5.6 سجل الألوان 6.8.2 الاتصالات 0.2.1
ملحن 0.24.1 الحلوي 0.1.5 configparser 5.2.0
مخطط إحاطة 1.2.0 اسم بارد 2.2.0 التشفير 42.0.5
دورة 0.11.0 cymem 2.0.8 Cython 3.0.11
dacite 1.8.1 وقت تشغيل databricks-automl 0.2.21 هندسة ميزة databricks 0.7.0
databricks-sdk 0.30.0 مجموعات البيانات 2.20.0 dbl-tempo 0.1.26
dbus-python 1.3.2 تصحيح الأخطاء 1.6.7 ديكور 5.1.1
deepspeed 0.14.4 defusedxml 0.7.1 مهملة 1.2.14
شبت 0.3.8 استياء 0.3.8 شجرة dm 0.1.8
docstring-to-markdown 0.11 نقاط الإدخال 0.4 التقييم 0.4.2
تنفيذ 0.8.3 نظرة عامة على الواجهات 1.1.1 Farama-Notifications 0.0.4
fastjsonschema 2.20.0 عجلة نص سريع 0.9.2 قفل الملف 3.13.1
Flask 2.2.5 خزائن مسطحة 24.3.25 أصوام الخطوط 4.51.0
fqdn 1.5.1 قائمة مجمدة 1.4.0 fsspec 2023.5.0
future 0.18.3 غاست 0.4.0 gitdb 4.0.11
GitPython 3.1.37 google-api-core 2.20.0 google-auth 2.21.0
google-auth-oauthlib 1.0.0 google-cloud-core 2.4.1 google-cloud-storage 2.10.0
google-crc32c 1.6.0 google-pasta 0.2.0 google-resumable-media 2.7.2
googleapis-common-protos 1.65.0 gql 3.5.0 graphql-core 3.2.4
أخضر 3.0.1 grpcio 1.60.0 حالة grpcio 1.60.0
gunicorn 20.1.0 gviz-api 1.10.0 صالة رياضية 0.28.1
h11 0.14.0 h5py 3.11.0 hjson 3.1.0
العطلات 0.54 htmlmin 0.1.12 httpcore 1.0.5
httplib2 0.20.4 httpx 0.27.2 huggingface-hub 0.24.5
idna 3.7 ImageHash 4.3.1 صورة 2.33.1
التعلم غير المتوازن 0.12.3 بيانات تعريف importlib 6.0.0 importlib_resources 6.4.5
تحديد 7.3.1 ipyflow-core 0.0.201 ipykernel 6.28.0
ipython 8.25.0 ipython-genutils 0.2.0 عناوين ipywidgets 7.7.2
isodate 0.6.1 isoduration 20.11.0 غير متزامن 2.2.0
jaraco.context 5.3.0 jaraco.functools 4.0.1 jaraco.text 3.12.1
jax-jumpy 1.0.0 jedi 0.19.1 جينجا 2 3.1.4
هزة 0.5.0 مسار jmespath 1.0.1 joblib 1.4.2
joblibspark 0.5.1 json5 0.9.6 jsonpatch 1.33
jsonpointer 3.0.0 jsonschema 4.19.2 jsonschema-specifications 2023.7.1
أحداث jupyter 0.10.0 jupyter-lsp 2.2.0 jupyter_client 8.6.0
jupyter_core 5.7.2 jupyter_server 2.14.1 jupyter_server_terminals 0.4.4
jupyterlab 4.0.11 jupyterlab-pygments 0.1.2 jupyterlab_server 2.25.1
keras 3.5.0 kiwisolver 1.4.4 langchain 0.2.12
langchain-core 0.2.41 langchain-text-splitters 0.2.4 رموز langcode 3.4.1
langsmith 0.1.129 language_data 1.2.0 launchpadlib 1.11.0
lazr.restfulclient 0.14.6 lazr.uri 1.0.6 lazy_loader 0.4
libclang 15.0.6.1 Librosa 0.10.2 غيغابايت فاتح 4.5.0
الأدوات المساعدة للبرق 0.11.7 linkify-it-py 2.0.0 llvmlite 0.42.0
lz4 4.3.2 ماكو 1.2.0 marisa-trie 1.2.0
Markdown 3.4.1 markdown-it-py 2.2.0 MarkupSafe 2.1.3
matplotlib 3.8.4 matplotlib-inline 0.1.6 مكابي 0.7.0
mdit-py-plugins 0.3.0 mdurl 0.1.0 memray 1.14.0
سوء الحظ 2.0.4 ml-dtypes 0.4.1 mlflow-skinny 2.15.1
المزيد من التكرارات 10.3.0 فسيفساء مل-cli 0.6.41 تدفق الفسيفساء 0.8.0
mpmath 1.3.0 msal 1.31.0 msal-extensions 1.2.0
msgpack 1.1.0 متعدد التقييمات 6.0.4 متعدد التتبع 1.12
معالجة متعددة 0.70.16 مورمورهاش 1.0.10 mypy 1.10.0
mypy-extensions 1.0.0 namex 0.0.8 nbclient 0.8.0
nbconvert 7.10.0 تنسيق nbformat 5.9.2 nest-asyncio 1.6.0
networkx 3.2.1 النينجا 1.11.1.1 nltk 3.8.1
nodeenv 1.9.1 notebook 7.0.8 notebook_shim 0.2.3
numba 0.59.1 numpy 1.26.4 nvidia-ml-py 12.560.30
أواتهليب 3.2.0 oci 2.135.0 openai 1.40.2
opencensus 0.11.4 سياق opencensus 0.1.3 opentelemetry-api 1.27.0
opentelemetry-sdk 1.27.0 opentelemetry-semantic-conventions 0.48b0 opt_einsum 3.4.0
إلغاء الاشتراك 0.12.1 أوبتونا 3.6.1 تكامل الاشتراكات 3.6.0
orjson 3.10.7 يتجاوز 7.4.0 التغليف 24.1
pandas 1.5.3 عوامل تصفية pandocfilter 1.5.0 باراميكو 3.4.0
parso 0.8.3 pathspec 0.10.3 بتسي 0.5.6
pexpect 4.8.0 فيك 0.12.4 pillow 10.3.0
pip 24.2 المنصات 3.10.0 بشكل مخطط 5.22.0
توصيل 1.0.0 pmdarima 2.0.4 بوتش 1.8.2
مأخذ المدخل 2.10.1 مسبق الوشاية 3.0.9 prometheus-client 0.14.1
مجموعة أدوات المطالبة 3.0.43 نبي 1.1.5 proto-plus 1.24.0
protobuf 4.24.1 psutil 5.9.0 psycopg2 2.9.3
عملية ptyprocess 0.7.0 تقييم خالص 0.2.2 py-cpuinfo 9.0.0
py-spy 0.3.14 pyarrow 15.0.2 إصلاح pyarrow-hotfix 0.6
pyasn1 0.4.8 وحدات pyasn1 0.2.8 pybind11 2.13.6
pyccolo 0.0.65 pycparser 2.21 pydantic 2.8.2
pydantic_core 2.20.1 pyflakes 3.2.0 Pygments 2.15.1
PyGObject 3.48.2 PyJWT 2.7.0 PyNaCl 1.5.0
pyodbc 5.0.1 pyOpenSSL 24.0.0 pyparsing 3.0.9
تمام 1.1.294 pytesseract 0.3.10 python-dateutil 2.9.0.post0
محرر python 1.0.4 python-json-logger 2.0.7 python-lsp-jsonrpc 1.1.2
خادم python-lsp 1.10.0 python-snappy 0.6.1 تكوين pytool 1.2.6
pytorch-ranger 0.1.1 pytz 2024.1 PyWavelets 1.5.0
PyYAML 6.0.1 pyzmq 25.1.2 سؤال 1.10.0
شعاع 2.35.0 المرجع 0.30.2 regex 2023.10.3
الطلبات 2.32.2 requests-oauthlib ⁦⁩⁦⁩1.3.1 مدقق rfc3339 0.1.4
مدقق rfc3986 0.1.1 rich 13.3.5 حبل 1.12.0
rpds-py 0.10.6 rsa 4.9 ruamel.yaml 0.18.6
ruamel.yaml.clib 0.2.8 s3transfer 0.10.2 مأمونات 0.4.4
صورة scikit 0.23.2 scikit-learn 1.4.2 شفرة 1.13.1
بحر محمول 0.13.2 Send2Trash 1.8.2 محولات الجملة 3.0.1
جمل 0.2.0 أدوات الإعداد 74.0.0 shap 0.46.0
shellingham 1.5.4 simplejson 3.17.6 ستة 1.16.0
القطاعه 0.0.8 smart-open 5.2.1 smmap ⁧5.0.0⁧
شم 1.3.0 ملف صوت 0.12.1 شوربة الحساء 2.5
soxr 0.5.0.post1 التباعد 3.7.5 تباعد قديم 3.0.12
مسجلات التباعد 1.0.5 SQLAlchemy 2.0.30 sqlparse 0.4.2
مrsly 2.4.8 ssh-import-id 5.11 بيانات المكدس 0.2.0
ستانيو 0.5.1 نماذج الإحصائيات 0.14.2 sympy 1.12
جدولة 0.9.0 تشابك لأعلى في unicode 0.2.0 مثابره 8.2.2
لوحة العشرات 2.17.0 خادم بيانات tensorboard 0.7.2 ملف تعريف مكون إضافي من tensorboard 2.17.0
tensorboardX 2.6.2.2 تدفق العشرات 2.17.0 tensorflow-estimator 2.15.0
لون المصطلحات 2.4.0 terminado 0.17.1 النصيه 0.81.0
tf_keras 2.17.0 رقيق 8.2.5 threadpoolctl 2.2.0
ملف تعريف 2023.4.12 tiktoken 0.7.0 tinycss2 1.2.1
tokenize-rt 4.2.1 الرموز المميزة 0.19.1 tomli 2.0.1
مشعل 2.4.0+cpu محسن الشعلة 0.3.0 تقييم الشعلة 0.0.7
مقاييس الشعلة 1.4.0.post0 شعلة الشعلة 0.19.0+cpu اعصار 6.4.1
tqdm 4.66.4 سمات السمات 5.14.3 المحولات 4.44.0
typeguard 4.3.0 typer 0.12.5 أنواع protobuf 3.20.3
types-psutil 5.9.0 أنواع pytz 2023.3.1.1 types-PyYAML 6.0.0
أنواع الطلبات 2.31.0.0 أنواع الإعدادات 68.0.0.0 أنواع ستة 1.16.0
types-urllib3 1.26.25.14 typing_extensions 4.11.0 uc-micro-py 1.0.1
ujson 5.10.0 ترقيات غير مراقبة 0.1 قالب uri 1.3.0
urllib3 1.26.16 المدققون 0.34.0 virtualenv 20.26.2
الرؤي 0.7.5 wadllib 1.3.6 الوسابي 1.1.3
wcwidth 0.2.5 weasel 0.4.1 ألوان ويب 24.8.0
ترميزات الويب 0.5.1 عميل websocket 1.8.0 مآخذ الويب 11.0.3
ويركزيوغ 3.0.3 whatthepatch 1.0.2 دولاب 0.43.0
wordcloud 1.9.3 ملف التفافي 1.14.1 xgboost 2.0.3
xgboost-ray 0.1.19 xxhash 3.4.1 yapf 0.33.0
yarl 1.9.3 جمع معلومات ydata 4.9.0 zipp 3.17.0
zstd 1.5.5.1

مكتبات Python على مجموعات GPU

مكتبة إصدار مكتبة إصدار مكتبة إصدار
absl-py 1.0.0 تسريع 0.33.0 aiohttp 3.9.5
aiohttp-cors 0.7.0 aiosignal 1.2.0 الأنواع ذات التعليقات التوضيحية 0.7.0
anyio 4.2.0 argcomplete 3.5.0 argon2-cffi 21.3.0
روابط argon2-cffi 21.2.0 سهم 1.2.3 استور 0.8.1
الرموز المميزة 2.0.5 astunparse 1.6.3 async-lru 2.0.4
سلاسل السلاسل 23.1.0 قراءة صوتية 3.0.1 الأوامر التلقائية 2.2.2
azure-core 1.31.0 azure-cosmos 4.3.1 هوية azure 1.18.0
azure-storage-blob 12.23.1 azure-storage-file-datalake 12.17.0 بابل 2.11.0
التراجع 2.2.1 backports.tarfile 1.2.0 bcrypt 3.2.0
beautifulsoup4 4.12.3 black 24.4.2 بيض 4.1.0
وامض 1.7.0 نعيم 0.7.11 boto3 1.34.69
روبوت الدردشة 1.34.69 Brotli 1.0.9 قوالب ذاكرة التخزين المؤقت 5.3.3
فهرس 2.0.10 ترميز الفئات 2.6.3 شهادة 2024.6.2
cffi 1.16.0 تجزئة 4.0.0 charset-normalizer 2.0.4
مكسر الدائرة 2.0.0 نقر 8.1.7 cloudpathlib 0.19.0
cloudpickle 2.2.1 cmdstanpy 1.2.4 colorful 0.5.6
سجل الألوان 6.8.2 الاتصالات 0.2.1 ملحن 0.24.1
الحلوي 0.1.5 configparser 5.2.0 مخطط إحاطة 1.2.0
اسم بارد 2.2.0 التشفير 42.0.5 دورة 0.11.0
cymem 2.0.8 Cython 3.0.11 dacite 1.8.1
وقت تشغيل databricks-automl 0.2.21 هندسة ميزة databricks 0.7.0 databricks-sdk 0.30.0
مجموعات البيانات 2.20.0 dbl-tempo 0.1.26 dbus-python 1.3.2
تصحيح الأخطاء 1.6.7 ديكور 5.1.1 deepspeed 0.14.4
defusedxml 0.7.1 مهملة 1.2.14 شبت 0.3.8
استياء 0.3.8 شجرة dm 0.1.8 docstring-to-markdown 0.11
einops 0.8.0 نقاط الإدخال 0.4 التقييم 0.4.2
تنفيذ 0.8.3 نظرة عامة على الواجهات 1.1.1 Farama-Notifications 0.0.4
fastjsonschema 2.20.0 عجلة نص سريع 0.9.2 قفل الملف 3.13.1
flash_attn 2.5.6 Flask 2.2.5 خزائن مسطحة 24.3.25
أصوام الخطوط 4.51.0 fqdn 1.5.1 قائمة مجمدة 1.4.0
fsspec 2023.5.0 future 0.18.3 غاست 0.4.0
gitdb 4.0.11 GitPython 3.1.37 google-api-core 2.20.0
google-auth 2.21.0 google-auth-oauthlib 1.0.0 google-cloud-core 2.4.1
google-cloud-storage 2.10.0 google-crc32c 1.6.0 google-pasta 0.2.0
google-resumable-media 2.7.2 googleapis-common-protos 1.65.0 gql 3.5.0
graphql-core 3.2.4 أخضر 3.0.1 grpcio 1.60.0
حالة grpcio 1.60.0 gunicorn 20.1.0 gviz-api 1.10.0
صالة رياضية 0.28.1 h11 0.14.0 h5py 3.11.0
hjson 3.1.0 العطلات 0.54 htmlmin 0.1.12
httpcore 1.0.5 httplib2 0.20.4 httpx 0.27.2
huggingface-hub 0.24.5 idna 3.7 ImageHash 4.3.1
صورة 2.33.1 التعلم غير المتوازن 0.12.3 بيانات تعريف importlib 6.0.0
importlib_resources 6.4.5 تحديد 7.3.1 ipyflow-core 0.0.201
ipykernel 6.28.0 ipython 8.25.0 ipython-genutils 0.2.0
عناوين ipywidgets 7.7.2 isodate 0.6.1 isoduration 20.11.0
غير متزامن 2.2.0 jaraco.context 5.3.0 jaraco.functools 4.0.1
jaraco.text 3.12.1 jax-jumpy 1.0.0 jedi 0.19.1
جينجا 2 3.1.4 هزة 0.5.0 مسار jmespath 1.0.1
joblib 1.4.2 joblibspark 0.5.1 json5 0.9.6
jsonpatch 1.33 jsonpointer 3.0.0 jsonschema 4.19.2
jsonschema-specifications 2023.7.1 أحداث jupyter 0.10.0 jupyter-lsp 2.2.0
jupyter_client 8.6.0 jupyter_core 5.7.2 jupyter_server 2.14.1
jupyter_server_terminals 0.4.4 jupyterlab 4.0.11 jupyterlab-pygments 0.1.2
jupyterlab_server 2.25.1 keras 3.5.0 kiwisolver 1.4.4
langchain 0.2.12 langchain-core 0.2.41 langchain-text-splitters 0.2.4
رموز langcode 3.4.1 langsmith 0.1.129 language_data 1.2.0
launchpadlib 1.11.0 lazr.restfulclient 0.14.6 lazr.uri 1.0.6
lazy_loader 0.4 libclang 15.0.6.1 Librosa 0.10.2
غيغابايت فاتح 4.5.0 الأدوات المساعدة للبرق 0.11.7 linkify-it-py 2.0.0
llvmlite 0.42.0 lz4 4.3.2 ماكو 1.2.0
marisa-trie 1.2.0 Markdown 3.4.1 markdown-it-py 2.2.0
MarkupSafe 2.1.3 matplotlib 3.8.4 matplotlib-inline 0.1.6
مكابي 0.7.0 mdit-py-plugins 0.3.0 mdurl 0.1.0
memray 1.14.0 سوء الحظ 2.0.4 ml-dtypes 0.4.1
mlflow-skinny 2.15.1 المزيد من التكرارات 10.3.0 فسيفساء مل-cli 0.6.41
تدفق الفسيفساء 0.8.0 mpmath 1.3.0 msal 1.31.0
msal-extensions 1.2.0 msgpack 1.1.0 متعدد التقييمات 6.0.4
متعدد التتبع 1.12 معالجة متعددة 0.70.16 مورمورهاش 1.0.10
mypy 1.10.0 mypy-extensions 1.0.0 namex 0.0.8
nbclient 0.8.0 nbconvert 7.10.0 تنسيق nbformat 5.9.2
nest-asyncio 1.6.0 networkx 3.2.1 النينجا 1.11.1.1
nltk 3.8.1 nodeenv 1.9.1 notebook 7.0.8
notebook_shim 0.2.3 numba 0.59.1 numpy 1.26.4
nvidia-cublas-cu12 12.4.2.65 nvidia-cuda-cupti-cu12 12.4.99 nvidia-cuda-nvrtc-cu12 12.4.99
nvidia-cuda-runtime-cu12 12.4.99 nvidia-cudnn-cu12 9.1.0.70 nvidia-cufft-cu12 11.2.0.44
nvidia-curand-cu12 10.3.5.119 nvidia-cusolver-cu12 11.6.0.99 nvidia-cusparse-cu12 12.3.0.142
nvidia-ml-py 12.560.30 nvidia-nccl-cu12 2.20.5 nvidia-nvjitlink-cu12 12.4.99
nvidia-nvtx-cu12 12.4.99 أواتهليب 3.2.0 oci 2.135.0
openai 1.40.2 opencensus 0.11.4 سياق opencensus 0.1.3
opentelemetry-api 1.27.0 opentelemetry-sdk 1.27.0 opentelemetry-semantic-conventions 0.48b0
opt_einsum 3.4.0 إلغاء الاشتراك 0.12.1 أوبتونا 3.6.1
تكامل الاشتراكات 3.6.0 orjson 3.10.7 يتجاوز 7.4.0
التغليف 24.1 pandas 1.5.3 عوامل تصفية pandocfilter 1.5.0
باراميكو 3.4.0 parso 0.8.3 pathspec 0.10.3
بتسي 0.5.6 pexpect 4.8.0 فيك 0.12.4
pillow 10.3.0 pip 24.2 المنصات 3.10.0
بشكل مخطط 5.22.0 توصيل 1.0.0 pmdarima 2.0.4
بوتش 1.8.2 مأخذ المدخل 2.10.1 مسبق الوشاية 3.0.9
prometheus-client 0.14.1 مجموعة أدوات المطالبة 3.0.43 نبي 1.1.5
proto-plus 1.24.0 protobuf 4.24.1 psutil 5.9.0
psycopg2 2.9.3 عملية ptyprocess 0.7.0 تقييم خالص 0.2.2
py-cpuinfo 9.0.0 py-spy 0.3.14 pyarrow 15.0.2
إصلاح pyarrow-hotfix 0.6 pyasn1 0.4.8 وحدات pyasn1 0.2.8
pybind11 2.13.6 pyccolo 0.0.65 pycparser 2.21
pydantic 2.8.2 pydantic_core 2.20.1 pyflakes 3.2.0
Pygments 2.15.1 PyGObject 3.48.2 PyJWT 2.7.0
PyNaCl 1.5.0 pyodbc 5.0.1 pyOpenSSL 24.0.0
pyparsing 3.0.9 تمام 1.1.294 pytesseract 0.3.10
python-dateutil 2.9.0.post0 محرر python 1.0.4 python-json-logger 2.0.7
python-lsp-jsonrpc 1.1.2 خادم python-lsp 1.10.0 python-snappy 0.6.1
تكوين pytool 1.2.6 pytorch-ranger 0.1.1 pytz 2024.1
PyWavelets 1.5.0 PyYAML 6.0.1 pyzmq 25.1.2
سؤال 1.10.0 شعاع 2.35.0 المرجع 0.30.2
regex 2023.10.3 الطلبات 2.32.2 requests-oauthlib ⁦⁩⁦⁩1.3.1
مدقق rfc3339 0.1.4 مدقق rfc3986 0.1.1 rich 13.3.5
حبل 1.12.0 rpds-py 0.10.6 rsa 4.9
ruamel.yaml 0.18.6 ruamel.yaml.clib 0.2.8 s3transfer 0.10.2
مأمونات 0.4.4 صورة scikit 0.23.2 scikit-learn 1.4.2
شفرة 1.13.1 بحر محمول 0.13.2 Send2Trash 1.8.2
محولات الجملة 3.0.1 جمل 0.2.0 أدوات الإعداد 74.0.0
shap 0.46.0 shellingham 1.5.4 simplejson 3.17.6
ستة 1.16.0 القطاعه 0.0.8 smart-open 5.2.1
smmap ⁧5.0.0⁧ شم 1.3.0 ملف صوت 0.12.1
شوربة الحساء 2.5 soxr 0.5.0.post1 التباعد 3.7.5
تباعد قديم 3.0.12 مسجلات التباعد 1.0.5 SQLAlchemy 2.0.30
sqlparse 0.4.2 مrsly 2.4.8 ssh-import-id 5.11
بيانات المكدس 0.2.0 ستانيو 0.5.1 نماذج الإحصائيات 0.14.2
sympy 1.12 جدولة 0.9.0 تشابك لأعلى في unicode 0.2.0
مثابره 8.2.2 لوحة العشرات 2.17.0 خادم بيانات tensorboard 0.7.2
ملف تعريف مكون إضافي من tensorboard 2.17.0 tensorboardX 2.6.2.2 تدفق العشرات 2.17.0
tensorflow-estimator 2.15.0 لون المصطلحات 2.4.0 terminado 0.17.1
النصيه 0.81.0 tf_keras 2.17.0 رقيق 8.2.5
threadpoolctl 2.2.0 ملف تعريف 2023.4.12 tiktoken 0.7.0
tinycss2 1.2.1 tokenize-rt 4.2.1 الرموز المميزة 0.19.1
tomli 2.0.1 مشعل 2.4.0+cu124 محسن الشعلة 0.3.0
تقييم الشعلة 0.0.7 مقاييس الشعلة 1.4.0.post0 شعلة الشعلة 0.19.0+cu124
اعصار 6.4.1 tqdm 4.66.4 سمات السمات 5.14.3
المحولات 4.44.0 تريتون 3.0.0 typeguard 4.3.0
typer 0.12.5 أنواع protobuf 3.20.3 types-psutil 5.9.0
أنواع pytz 2023.3.1.1 types-PyYAML 6.0.0 أنواع الطلبات 2.31.0.0
أنواع الإعدادات 68.0.0.0 أنواع ستة 1.16.0 types-urllib3 1.26.25.14
typing_extensions 4.11.0 uc-micro-py 1.0.1 ujson 5.10.0
ترقيات غير مراقبة 0.1 قالب uri 1.3.0 urllib3 1.26.16
المدققون 0.34.0 virtualenv 20.26.2 الرؤي 0.7.5
wadllib 1.3.6 الوسابي 1.1.3 wcwidth 0.2.5
weasel 0.4.1 ألوان ويب 24.8.0 ترميزات الويب 0.5.1
عميل websocket 1.8.0 مآخذ الويب 11.0.3 ويركزيوغ 3.0.3
whatthepatch 1.0.2 دولاب 0.43.0 wordcloud 1.9.3
ملف التفافي 1.14.1 xgboost 2.0.3 xgboost-ray 0.1.19
xxhash 3.4.1 yapf 0.33.0 yarl 1.9.3
جمع معلومات ydata 4.9.0 zipp 3.17.0 zstd 1.5.5.1

مكتبات R

مكتبات R مطابقة لمكتبات R في Databricks Runtime 16.0.

مكتبات Java وScala (مجموعة Scala 2.12)

بالإضافة إلى مكتبات Java و Scala في Databricks Runtime 16.0، يحتوي Databricks Runtime 16.0 ML على JARs التالية:

مجموعات وحدة المعالجة المركزية

معرف مجموعة معرف البيانات الاصطناعية إصدار
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.4-db1-spark3.5
org.mlflow عميل mlflow 2.15.1
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

مجموعات GPU

معرف مجموعة معرف البيانات الاصطناعية إصدار
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.4-db1-spark3.5
org.mlflow عميل mlflow 2.15.1
org.tensorflow spark-tensorflow-connector_2.12 1.15.0