適用於 Machine Learning 的 Databricks Runtime 16.1
Databricks Runtime 16.1 for Machine Learning 會根據 Databricks Runtime 16.1，為機器學習和數據科學提供現成to-go 環境。 Databricks Runtime ML 包含許多熱門的機器學習連結庫，包括 TensorFlow、PyTorch 和 XGBoost。 Databricks Runtime ML 包含 AutoML，這是自動定型機器學習管線的工具。 Databricks Runtime ML 也支援使用 TorchDistributor、DeepSpeed 和 Ray 的分散式深度學習訓練。
提示
若要查看已達到終止支援的 Databricks Runtime 版本的發行說明（EoS），請參閱 終止支援 Databricks Runtime 發行說明。 EoS Databricks Runtime 版本已淘汰，且可能未更新。
新功能和改善
Databricks Runtime 16.1 ML 建置在 Databricks Runtime 16.1 之上。 如需 Databricks Runtime 16.1 新功能的相關信息，包括 Apache Spark MLlib 和 SparkR，請參閱 Databricks Runtime 16.1 版本資訊。
系統環境
Databricks Runtime 16.1 ML 中的系統環境與 Databricks Runtime 16.1 不同，如下所示。
- 針對 GPU 叢集，Databricks Runtime ML 包含下列 NVIDIA GPU 連結庫：
- CUDA 12.6
- cublas 12.6.0.22-1
- cusolver 11.6.4.38-1
- cupti 12.6.37-1
- cusparse 12.5.2.23-1
- cuDNN 9.3.0.75-1
- NCCL 2.22.3
- TensorRT 10.2.0.19-1
圖書館
下列各節列出 Databricks Runtime 16.1 ML 中包含的連結庫，與 Databricks Runtime 16.1 中包含的連結庫不同。
在本節中：
頂級圖書館
Databricks Runtime 16.1 ML 包含下列頂尖 函式庫：
- 數據集
- GraphFrames
- MLflow
- PyTorch
- spark-tensorflow-connector
- Scikit-learn
- 串流
- TensorFlow
- TensorBoard
- 變壓器
Python 函式庫
Databricks Runtime 16.1 ML 使用 virtualenv 進行 Python 套件管理，並包含許多熱門 ML 套件。
除了下列各節中指定的套件之外，Databricks Runtime 16.1 ML 也包含下列套件：
- hyperopt 0.2.9+db5
- automl 1.29.0
若要在本機 Python 虛擬環境中重現 Databricks Runtime ML Python 環境，請下載 requirements-16.1.txt 檔案並執行 pip install -r requirements-16.1.txt。 此命令會安裝 Databricks Runtime ML 使用的所有開放原始碼連結庫，但不會安裝 Databricks 所開發的連結庫，例如 databricks-automl、databricks-feature-engineering或 hyperopt的 Databricks 分支。
CPU 集群上的 Python 程式庫
| 圖書館 | 版本 | 圖書館 | 版本 | 圖書館 | 版本 |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | 加速 | 1.1.1 | aiohttp | 3.9.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | alembic | 1.13.3 |
| 批注類型 | 0.7.0 | anyio | 4.2.0 | argcomplete | 3.5.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindings | 21.2.0 | 箭 | 1.2.3 |
| 阿斯特 | 0.8.1 | asttokens | 2.0.5 | astunparse | 1.6.3 |
| async-lru | 2.0.4 | 屬性 | 23.1.0 | audioread | 3.0.1 |
| 自動指令 | 2.2.2 | azure-core | 1.31.0 | azure-cosmos | 4.3.1 |
| azure-identity | 1.18.0 | Azure Blob 儲存空間 | 12.23.1 | azure-storage-file-datalake | 12.17.0 |
| 巴別塔 | 2.11.0 | 退避 | 2.2.1 | backports.tarfile | 1.2.0 |
| bcrypt | 3.2.0 | beautifulsoup4 | 4.12.3 | 黑 | 24.4.2 |
| 漂白劑 | 4.1.0 | 閃爍器 | 1.7.0 | 幸福 | 0.7.11 |
| boto3 | 1.34.69 | botocore | 1.34.69 | Brotli | 1.0.9 |
| cachetools | 5.3.3 | 目錄 | 2.0.10 | category-encoders | 2.6.3 |
| certifi | 2024年6月2日 | cffi | 1.16.0 | chardet | 4.0.0 |
| charset-normalizer | 2.0.4 | 斷路器 | 2.0.0 | 點擊 | 8.1.7 |
| cloudpathlib | 0.19.0 | 雲平台序列化庫 (cloudpickle) | 2.2.1 | cmdstanpy | 1.2.4 |
| 豐富多彩 | 0.5.6 | colorlog | 6.8.2 | 通訊 | 0.2.1 |
| 作曲家 | 0.27.0 | 糖果 | 0.1.5 | configparser | 5.2.0 |
| contourpy | 1.2.0 | coolname | 2.2.0 | 密碼學 | 42.0.5 |
| 單車騎士 | 0.11.0 | cymem | 2.0.10 | Cython | 3.0.11 |
| 英安岩 | 1.8.1 | databricks-automl-runtime | 0.2.21 | Databricks 特徵工程 | 0.7.0 |
| databricks-sdk | 0.30.0 | 數據集 | 3.1.0 | dbl-tempo | 0.1.26 |
| dbus-python | 1.3.2 | debugpy | 1.6.7 | 裝飾器 | 5.1.1 |
| deepspeed | 0.16.0 | defusedxml | 0.7.1 | 荒廢的 | 1.2.14 |
| 蒔蘿 | 0.3.8 | distlib | 0.3.8 | dm-tree | 0.1.8 |
| 文件字符串轉Markdown | 0.11 | 入口點 | 0.4 | 評價 | 0.4.3 |
| 執行 | 0.8.3 | 面向概覽 | 1.1.1 | Farama-Notifications | 0.0.4 |
| fastjsonschema | 2.21.1 | fasttext-wheel | 0.9.2 | 檔案鎖定 | 3.13.1 |
| 燒瓶 | 2.2.5 | flatbuffers | 24.3.25 | fonttools | 4.51.0 |
| fqdn | 1.5.1 | 凍結清單 | 1.4.0 | fsspec | 2023.5.0 |
| 未來 | 0.18.3 | gast | 0.4.0 | gitdb | 4.0.11 |
| GitPython | 3.1.37 | google-api-core | 2.20.0 | Google 認證 | 2.21.0 |
| google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 | google-cloud-storage | 2.10.0 |
| google-crc32c | 1.6.0 | google-pasta | 0.2.0 | google-resumable-media | 2.7.2 |
| googleapis-common-protos | 1.65.0 | gql | 3.5.0 | graphql-core | 3.2.4 |
| greenlet | 3.0.1 | grpcio | 1.60.0 | grpcio-status | 1.60.0 |
| gunicorn | 20.1.0 | gviz-api | 1.10.0 | 體育館 | 0.28.1 |
| h11 | 0.14.0 | h5py | 3.11.0 | hjson | 3.1.0 |
| 假期 | 0.54 | htmlmin | 0.1.12 | httpcore | 1.0.5 |
| httplib2 | 0.20.4 | httpx | 0.28.0 | huggingface-hub | 0.24.5 |
| idna | 3.7 | ImageHash | 4.3.1 | imageio | 2.33.1 |
| 不平衡學習 | 0.12.3 | importlib-metadata | 6.0.0 | importlib_resources | 6.4.5 |
| 屈折 | 7.3.1 | ipyflow-core | 0.0.201 | ipykernel | 6.28.0 |
| ipython | 8.25.0 | ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 |
| isodate | 0.6.1 | isoduration | 20.11.0 | itsdangerous | 2.2.0 |
| jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 | jaraco.text | 3.12.1 |
| jax-jumpy | 1.0.0 | jedi | 0.19.1 | Jinja2 | 3.1.4 |
| jiter | 0.8.0 | jmespath | 1.0.1 | joblib | 1.4.2 |
| joblibspark | 0.5.1 | json5 | 0.9.6 | jsonpatch | 1.33 |
| jsonpointer | 3.0.0 | jsonschema | 4.19.2 | jsonschema-specifications | 2023年7月1日 |
| Jupyter 事件 | 0.10.0 | jupyter-lsp | 2.2.0 | jupyter_client | 8.6.0 |
| jupyter_core | 5.7.2 | jupyter伺服器 | 2.14.1 | jupyter_server_terminals | 0.4.4 |
| jupyterlab | 4.0.11 | jupyterlab-pygments | 0.1.2 | jupyterlab_server | 2.25.1 |
| keras | 3.6.0 | kiwisolver | 1.4.4 | langchain | 0.3.8 |
| langchain-core | 0.2.41 | langchain 文本切分工具 | 0.2.4 | langcodes | 3.4.1 |
| langsmith | 0.1.129 | 語言資料 | 1.2.0 | launchpadlib | 1.11.0 |
| lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 | lazy_loader | 0.4 |
| libclang | 15.0.6.1 | librosa | 0.10.2 | lightgbm | 4.5.0 |
| 閃電公用程式 | 0.11.9 | linkify-it-py | 2.0.0 | llvmlite | 0.42.0 |
| lz4 | 4.3.2 | Mako | 1.2.0 | marisa-trie | 1.2.0 |
| Markdown | 3.4.1 | markdown-it-py | 2.2.0 | MarkupSafe | 2.1.3 |
| matplotlib | 3.8.4 | matplotlib-inline | 0.1.6 | mccabe | 0.7.0 |
| mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 | memray | 1.14.0 |
| 調音不當 | 2.0.4 | ml-dtypes | 0.4.1 | mlflow-skinny | 2.15.1 |
| more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 | 馬賽克ml-streaming | 0.8.0 |
| mpmath | 1.3.0 | msal | 1.31.1 | msal-extensions | 1.2.0 |
| msgpack | 1.1.0 | multidict | 6.0.4 | multimethod | 1.12 |
| 多程序 | 0.70.16 | murmurhash | 1.0.11 | mypy | 1.10.0 |
| mypy-extensions | 1.0.0 | namex | 0.0.8 | nbclient | 0.8.0 |
| nbconvert | 7.10.0 | nbformat | 5.9.2 | nest-asyncio | 1.6.0 |
| networkx | 3.2.1 | 忍者 | 1.11.1.1 | nltk | 3.8.1 |
| nodeenv | 1.9.1 | 筆記本 | 7.0.8 | notebook_shim | 0.2.3 |
| numba | 0.59.1 | numpy | 1.26.4 | nvidia-ml-py | 12.560.30 |
| oauthlib | 3.2.0 | oci | 2.139.0 | openai | 1.55.1 |
| opencensus | 0.11.4 | opencensus-context | 0.1.3 | opentelemetry-api | 1.28.2 |
| opentelemetry-sdk | 1.28.2 | opentelemetry-semantic-conventions | 0.49b2 | opt_einsum | 3.4.0 |
| optree | 0.12.1 | optuna | 3.6.1 | optuna-integration | 3.6.0 |
| orjson | 3.10.12 | 覆蓋 | 7.4.0 | 包裝 | 24.1 |
| 熊貓 | 1.5.3 | pandocfilters | 1.5.0 | paramiko | 3.4.0 |
| parso | 0.8.3 | pathspec | 0.10.3 | 佩西 | 0.5.6 |
| pexpect | 4.8.0 | phik | 0.12.4 | 枕頭 | 10.3.0 |
| 果仁 | 24.2 | platformdirs | 3.10.0 | plotly | 5.22.0 |
| 插入式 | 1.0.0 | pmdarima | 2.0.4 | 狗狗 | 1.8.2 |
| portalocker | 2.10.1 | preshed | 3.0.9 | prometheus-client | 0.14.1 |
| prompt-toolkit | 3.0.43 | 先知 | 1.1.5 | proto-plus | 1.24.0 |
| protobuf | 4.24.1 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | py-cpuinfo | 9.0.0 |
| py-spy | 0.3.14 | pyarrow | 15.0.2 | pyarrow-Hotfix | 0.6 |
| pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 | pybind11 | 2.13.6 |
| pyccolo | 0.0.65 | pycparser | 2.21 | pydantic | 2.8.2 |
| pydantic_core | 2.20.1 | pyflakes | 3.2.0 | Pygments | 2.15.1 |
| PyGObject | 3.48.2 | PyJWT | 2.7.0 | PyNaCl | 1.5.0 |
| pyodbc | 5.0.1 | pyOpenSSL | 24.0.0 | pyparsing | 3.0.9 |
| pyright | 1.1.294 | pytesseract | 0.3.10 | python-dateutil | 2.9.0.post0 |
| Python 編輯器 | 1.0.4 | python-json-logger | 2.0.7 | python-lsp-jsonrpc | 1.1.2 |
| python-lsp-server | 1.10.0 | python-snappy | 0.6.1 | pytoolconfig | 1.2.6 |
| pytorch-ranger | 0.1.1 | pytz | 2024.1 | PyWavelets | 1.5.0 |
| PyYAML | 6.0.1 | pyzmq | 25.1.2 | 問卷 | 1.10.0 |
| 射線 | 2.35.0 | 引用 | 0.30.2 | regex | 2023.10.3 |
| 要求 | 2.32.2 | requests-oauthlib | 1.3.1 | rfc3339-validator | 0.1.4 |
| rfc3986-validator | 0.1.1 | 富 | 13.3.5 | 繩 | 1.12.0 |
| rpds-py | 0.10.6 | rsa | 4.9 | ruamel.yaml | 0.18.6 |
| ruamel.yaml.clib | 0.2.8 | s3transfer | 0.10.2 | safetensors | 0.4.4 |
| scikit-image | 0.23.2 | scikit-learn | 1.4.2 | scipy | 1.13.1 |
| seaborn | 0.13.2 | Send2Trash | 1.8.2 | 句子轉換器 | 3.3.1 |
| sentencepiece | 0.2.0 | setuptools | 74.0.0 | shap | 0.46.0 |
| shellingham | 1.5.4 | simplejson | 3.17.6 | 六 | 1.16.0 |
| 切片機 | 0.0.8 | smart-open | 5.2.1 | smmap | 5.0.0 |
| sniffio | 1.3.0 | soundfile | 0.12.1 | 濾湯器 | 2.5 |
| soxr | 0.5.0.post1 | spacy | 3.7.5 | spacy-legacy | 3.0.12 |
| spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.30 | sqlparse | 0.4.2 |
| 認真嗎 | 2.4.8 | ssh-import-id | 5.11 | 堆疊資料 | 0.2.0 |
| stanio | 0.5.1 | statsmodels | 0.14.2 | sympy | 1.13.1 |
| 製成表格 | 0.9.0 | 混亂-up-in-unicode | 0.2.0 | 韌性 | 8.2.2 |
| tensorboard | 2.18.0 | tensorboard-data-server（張量板數據伺服器） | 0.7.2 | TensorBoard 外掛程式分析工具 | 2.18.0 |
| tensorboardX | 2.6.2.2 | tensorflow | 2.18.0 | tensorflow-estimator | 2.15.0 |
| termcolor | 2.4.0 | 完成 | 0.17.1 | 文本 | 0.87.1 |
| tf_keras | 2.18.0 | thinc | 8.2.5 | threadpoolctl | 2.2.0 |
| tifffile | 2023.4.12 | tiktoken | 0.7.0 | tinycss2 | 1.2.1 |
| tokenize-rt | 4.2.1 | 詞元分詞器 | 0.20.0 | tomli | 2.0.1 |
| 火炬 | 2.5.0+cpu | torch-optimizer | 0.3.0 | torcheval | 0.0.7 |
| torchmetrics | 1.4.0.post0 | torchvision | 0.20.0+cpu | 龍捲風 | 6.4.1 |
| tqdm | 4.66.4 | 特性 | 5.14.3 | 變壓器 | 4.46.3 |
| typeguard | 4.3.0 | typer | 0.12.5 | types-protobuf | 3.20.3 |
| types-psutil | 5.9.0 | types-pytz | 2023.3.1.1 | types-PyYAML | 6.0.0 |
| 類型要求 | 2.31.0.0 | types-setuptools | 68.0.0.0 | 類型六 | 1.16.0 |
| types-urllib3 | 1.26.25.14 | typing_extensions | 4.11.0 | uc-micro-py | 1.0.1 |
| ujson | 5.10.0 | 無人看管自動升級 | 0.1 | URI 樣板 | 1.3.0 |
| urllib3 | 1.26.16 | 驗證工具 | 0.34.0 | virtualenv | 20.26.2 |
| 願景 | 0.7.5 | wadllib | 1.3.6 | 山葵 | 1.1.3 |
| wcwidth | 0.2.5 | 黃鼠狼 | 0.4.1 | 網頁顏色 | 24.8.0 |
| 網頁編碼格式 | 0.5.1 | websocket-client | 1.8.0 | websockets | 11.0.3 |
| Werkzeug | 3.0.3 | whatthepatch | 1.0.2 | 輪子 | 0.43.0 |
| 文字雲 | 1.9.3 | 包裹 | 1.14.1 | xgboost | 2.0.3 |
| xgboost-ray | 0.1.19 | xxhash | 3.4.1 | yapf | 0.33.0 |
| yarl | 1.9.3 | ydata 分析概況 | 4.9.0 | zipp | 3.17.0 |
| zstd | 1.5.5.1 |
GPU 叢集上的 Python 函式庫
注意
PyTorch 使用 CUDA PyPI 依賴性來提供 CUDA 支援，而非 Databricks Runtime 16.1 ML 內建的 CUDA 函式庫版本。
| 圖書館 | 版本 | 圖書館 | 版本 | 圖書館 | 版本 |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | 加速 | 1.1.1 | aiohttp | 3.9.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | 批注類型 | 0.7.0 |
| anyio | 4.2.0 | argcomplete | 3.5.0 | argon2-cffi | 21.3.0 |
| argon2-cffi-bindings | 21.2.0 | 箭 | 1.2.3 | 阿斯特 | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | async-lru | 2.0.4 |
| 屬性 | 23.1.0 | audioread | 3.0.1 | 自動指令 | 2.2.2 |
| azure-core | 1.31.0 | azure-cosmos | 4.3.1 | azure-identity | 1.18.0 |
| Azure Blob 儲存空間 | 12.23.1 | azure-storage-file-datalake | 12.17.0 | 巴別塔 | 2.11.0 |
| 退避 | 2.2.1 | backports.tarfile | 1.2.0 | bcrypt | 3.2.0 |
| beautifulsoup4 | 4.12.3 | 黑 | 24.4.2 | 漂白劑 | 4.1.0 |
| 閃爍器 | 1.7.0 | 幸福 | 0.7.11 | boto3 | 1.34.69 |
| botocore | 1.34.69 | Brotli | 1.0.9 | cachetools | 5.3.3 |
| 目錄 | 2.0.10 | category-encoders | 2.6.3 | certifi | 2024年6月2日 |
| cffi | 1.16.0 | chardet | 4.0.0 | charset-normalizer | 2.0.4 |
| 斷路器 | 2.0.0 | 點擊 | 8.1.7 | cloudpathlib | 0.19.0 |
| 雲平台序列化庫 (cloudpickle) | 2.2.1 | cmdstanpy | 1.2.4 | 豐富多彩 | 0.5.6 |
| colorlog | 6.8.2 | 通訊 | 0.2.1 | 作曲家 | 0.27.0 |
| 糖果 | 0.1.5 | configparser | 5.2.0 | contourpy | 1.2.0 |
| coolname | 2.2.0 | 密碼學 | 42.0.5 | 單車騎士 | 0.11.0 |
| cymem | 2.0.10 | Cython | 3.0.11 | 英安岩 | 1.8.1 |
| databricks-automl-runtime | 0.2.21 | Databricks 特徵工程 | 0.7.0 | databricks-sdk | 0.30.0 |
| 數據集 | 3.1.0 | dbl-tempo | 0.1.26 | dbus-python | 1.3.2 |
| debugpy | 1.6.7 | 裝飾器 | 5.1.1 | deepspeed | 0.16.0 |
| defusedxml | 0.7.1 | 荒廢的 | 1.2.14 | 蒔蘿 | 0.3.8 |
| distlib | 0.3.8 | dm-tree | 0.1.8 | 文件字符串轉Markdown | 0.11 |
| einops | 0.8.0 | 入口點 | 0.4 | 評價 | 0.4.3 |
| 執行 | 0.8.3 | 面向概覽 | 1.1.1 | Farama-Notifications | 0.0.4 |
| fastjsonschema | 2.21.1 | fasttext-wheel | 0.9.2 | 檔案鎖定 | 3.13.1 |
| flash_attn | 2.7.0 | 燒瓶 | 2.2.5 | flatbuffers | 24.3.25 |
| fonttools | 4.51.0 | fqdn | 1.5.1 | 凍結清單 | 1.4.0 |
| fsspec | 2023.5.0 | 未來 | 0.18.3 | gast | 0.4.0 |
| gitdb | 4.0.11 | GitPython | 3.1.37 | google-api-core | 2.20.0 |
| Google 認證 | 2.21.0 | google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 |
| google-cloud-storage | 2.10.0 | google-crc32c | 1.6.0 | google-pasta | 0.2.0 |
| google-resumable-media | 2.7.2 | googleapis-common-protos | 1.65.0 | gql | 3.5.0 |
| graphql-core | 3.2.4 | greenlet | 3.0.1 | grpcio | 1.60.0 |
| grpcio-status | 1.60.0 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| 體育館 | 0.28.1 | h11 | 0.14.0 | h5py | 3.11.0 |
| hjson | 3.1.0 | 假期 | 0.54 | htmlmin | 0.1.12 |
| httpcore | 1.0.5 | httplib2 | 0.20.4 | httpx | 0.27.2 |
| huggingface-hub | 0.24.5 | idna | 3.7 | ImageHash | 4.3.1 |
| imageio | 2.33.1 | 不平衡學習 | 0.12.3 | importlib-metadata | 6.0.0 |
| importlib_resources | 6.4.5 | 屈折 | 7.3.1 | ipyflow-core | 0.0.201 |
| ipykernel | 6.28.0 | ipython | 8.25.0 | ipython-genutils | 0.2.0 |
| ipywidgets | 7.7.2 | isodate | 0.6.1 | isoduration | 20.11.0 |
| itsdangerous | 2.2.0 | jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 |
| jaraco.text | 3.12.1 | jax-jumpy | 1.0.0 | jedi | 0.19.1 |
| Jinja2 | 3.1.4 | jiter | 0.8.0 | jmespath | 1.0.1 |
| joblib | 1.4.2 | joblibspark | 0.5.1 | json5 | 0.9.6 |
| jsonpatch | 1.33 | jsonpointer | 3.0.0 | jsonschema | 4.19.2 |
| jsonschema-specifications | 2023年7月1日 | Jupyter 事件 | 0.10.0 | jupyter-lsp | 2.2.0 |
| jupyter_client | 8.6.0 | jupyter_core | 5.7.2 | jupyter伺服器 | 2.14.1 |
| jupyter_server_terminals | 0.4.4 | jupyterlab | 4.0.11 | jupyterlab-pygments | 0.1.2 |
| jupyterlab_server | 2.25.1 | keras | 3.6.0 | kiwisolver | 1.4.4 |
| langchain | 0.3.8 | langchain-core | 0.2.41 | langchain 文本切分工具 | 0.2.4 |
| langcodes | 3.4.1 | langsmith | 0.1.129 | 語言資料 | 1.2.0 |
| launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 | lazr.uri | 1.0.6 |
| lazy_loader | 0.4 | libclang | 15.0.6.1 | librosa | 0.10.2 |
| lightgbm | 4.5.0 | 閃電公用程式 | 0.11.9 | linkify-it-py | 2.0.0 |
| llvmlite | 0.42.0 | lz4 | 4.3.2 | Mako | 1.2.0 |
| marisa-trie | 1.2.0 | Markdown | 3.4.1 | markdown-it-py | 2.2.0 |
| MarkupSafe | 2.1.3 | matplotlib | 3.8.4 | matplotlib-inline | 0.1.6 |
| mccabe | 0.7.0 | mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 |
| memray | 1.14.0 | 調音不當 | 2.0.4 | ml-dtypes | 0.4.1 |
| mlflow-skinny | 2.15.1 | more-itertools | 10.3.0 | mosaicml-cli | 0.6.41 |
| 馬賽克ml-streaming | 0.8.0 | mpmath | 1.3.0 | msal | 1.31.1 |
| msal-extensions | 1.2.0 | msgpack | 1.1.0 | multidict | 6.0.4 |
| multimethod | 1.12 | 多程序 | 0.70.16 | murmurhash | 1.0.11 |
| mypy | 1.10.0 | mypy-extensions | 1.0.0 | namex | 0.0.8 |
| nbclient | 0.8.0 | nbconvert | 7.10.0 | nbformat | 5.9.2 |
| nest-asyncio | 1.6.0 | networkx | 3.2.1 | 忍者 | 1.11.1.1 |
| nltk | 3.8.1 | nodeenv | 1.9.1 | 筆記本 | 7.0.8 |
| notebook_shim | 0.2.3 | numba | 0.59.1 | numpy | 1.26.4 |
| nvidia-cublas-cu12 | 12.4.5.8 | nvidia-cuda-cupti-cu12 | 12.4.127 | nvidia-cuda-nvrtc-cu12 | 12.4.127 |
| nvidia-cuda-runtime-cu12 | 12.4.127 | nvidia-cudnn-cu12 | 9.1.0.70 | nvidia-cufft-cu12 | 11.2.1.3 |
| nvidia-curand-cu12 | 10.3.5.147 | nvidia-cusolver-cu12 | 11.6.1.9 | nvidia-cusparse-cu12 | 12.3.1.170 |
| nvidia-ml-py | 12.560.30 | nvidia-nccl-cu12 | 2.21.5 | nvidia-nvjitlink-cu12 | 12.4.127 |
| nvidia-nvtx-cu12 | 12.4.127 | oauthlib | 3.2.0 | oci | 2.139.0 |
| openai | 1.55.1 | opencensus | 0.11.4 | opencensus-context | 0.1.3 |
| opentelemetry-api | 1.28.2 | opentelemetry-sdk | 1.28.2 | opentelemetry-semantic-conventions | 0.49b2 |
| opt_einsum | 3.4.0 | optree | 0.12.1 | optuna | 3.6.1 |
| optuna-integration | 3.6.0 | orjson | 3.10.12 | 覆蓋 | 7.4.0 |
| 包裝 | 24.1 | 熊貓 | 1.5.3 | pandocfilters | 1.5.0 |
| paramiko | 3.4.0 | parso | 0.8.3 | pathspec | 0.10.3 |
| 佩西 | 0.5.6 | pexpect | 4.8.0 | phik | 0.12.4 |
| 枕頭 | 10.3.0 | 果仁 | 24.2 | platformdirs | 3.10.0 |
| plotly | 5.22.0 | 插入式 | 1.0.0 | pmdarima | 2.0.4 |
| 狗狗 | 1.8.2 | portalocker | 2.10.1 | preshed | 3.0.9 |
| prometheus-client | 0.14.1 | prompt-toolkit | 3.0.43 | 先知 | 1.1.5 |
| proto-plus | 1.24.0 | protobuf | 4.24.1 | psutil | 5.9.0 |
| psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | pure-eval | 0.2.2 |
| py-cpuinfo | 9.0.0 | py-spy | 0.3.14 | pyarrow | 15.0.2 |
| pyarrow-Hotfix | 0.6 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
| pybind11 | 2.13.6 | pyccolo | 0.0.65 | pycparser | 2.21 |
| pydantic | 2.8.2 | pydantic_core | 2.20.1 | pyflakes | 3.2.0 |
| Pygments | 2.15.1 | PyGObject | 3.48.2 | PyJWT | 2.7.0 |
| PyNaCl | 1.5.0 | pyodbc | 5.0.1 | pyOpenSSL | 24.0.0 |
| pyparsing | 3.0.9 | pyright | 1.1.294 | pytesseract | 0.3.10 |
| python-dateutil | 2.9.0.post0 | Python 編輯器 | 1.0.4 | python-json-logger | 2.0.7 |
| python-lsp-jsonrpc | 1.1.2 | python-lsp-server | 1.10.0 | python-snappy | 0.6.1 |
| pytoolconfig | 1.2.6 | pytorch-ranger | 0.1.1 | pytz | 2024.1 |
| PyWavelets | 1.5.0 | PyYAML | 6.0.1 | pyzmq | 25.1.2 |
| 問卷 | 1.10.0 | 射線 | 2.35.0 | 引用 | 0.30.2 |
| regex | 2023.10.3 | 要求 | 2.32.2 | requests-oauthlib | 1.3.1 |
| rfc3339-validator | 0.1.4 | rfc3986-validator | 0.1.1 | 富 | 13.3.5 |
| 繩 | 1.12.0 | rpds-py | 0.10.6 | rsa | 4.9 |
| ruamel.yaml | 0.18.6 | ruamel.yaml.clib | 0.2.8 | s3transfer | 0.10.2 |
| safetensors | 0.4.4 | scikit-image | 0.23.2 | scikit-learn | 1.4.2 |
| scipy | 1.13.1 | seaborn | 0.13.2 | Send2Trash | 1.8.2 |
| 句子轉換器 | 3.3.1 | sentencepiece | 0.2.0 | setuptools | 74.0.0 |
| shap | 0.46.0 | shellingham | 1.5.4 | simplejson | 3.17.6 |
| 六 | 1.16.0 | 切片機 | 0.0.8 | smart-open | 5.2.1 |
| smmap | 5.0.0 | sniffio | 1.3.0 | soundfile | 0.12.1 |
| 濾湯器 | 2.5 | soxr | 0.5.0.post1 | spacy | 3.7.5 |
| spacy-legacy | 3.0.12 | spacy-loggers | 1.0.5 | SQLAlchemy | 2.0.30 |
| sqlparse | 0.4.2 | 認真嗎 | 2.4.8 | ssh-import-id | 5.11 |
| 堆疊資料 | 0.2.0 | stanio | 0.5.1 | statsmodels | 0.14.2 |
| sympy | 1.13.1 | 製成表格 | 0.9.0 | 混亂-up-in-unicode | 0.2.0 |
| 韌性 | 8.2.2 | tensorboard | 2.17.0 | tensorboard-data-server（張量板數據伺服器） | 0.7.2 |
| TensorBoard 外掛程式分析工具 | 2.18.0 | tensorboardX | 2.6.2.2 | tensorflow | 2.18.0 |
| tensorflow-estimator | 2.15.0 | termcolor | 2.4.0 | 完成 | 0.17.1 |
| 文本 | 0.87.1 | tf_keras | 2.17.0 | thinc | 8.2.5 |
| threadpoolctl | 2.2.0 | tifffile | 2023.4.12 | tiktoken | 0.7.0 |
| tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 | 詞元分詞器 | 0.20.0 |
| tomli | 2.0.1 | 火炬 | 2.5.0+cu124 | torch-optimizer | 0.3.0 |
| torcheval | 0.0.7 | torchmetrics | 1.4.0.post0 | torchvision | 0.20.0+cu124 |
| 龍捲風 | 6.4.1 | tqdm | 4.66.4 | 特性 | 5.14.3 |
| 變壓器 | 4.46.3 | 氚核 | 3.1.0 | typeguard | 4.3.0 |
| typer | 0.14.0 | types-protobuf | 3.20.3 | types-psutil | 5.9.0 |
| types-pytz | 2023.3.1.1 | types-PyYAML | 6.0.0 | 類型要求 | 2.31.0.0 |
| types-setuptools | 68.0.0.0 | 類型六 | 1.16.0 | types-urllib3 | 1.26.25.14 |
| typing_extensions | 4.11.0 | uc-micro-py | 1.0.1 | ujson | 5.10.0 |
| 無人看管自動升級 | 0.1 | URI 樣板 | 1.3.0 | urllib3 | 1.26.16 |
| 驗證工具 | 0.34.0 | virtualenv | 20.26.2 | 願景 | 0.7.5 |
| wadllib | 1.3.6 | 山葵 | 1.1.3 | wcwidth | 0.2.5 |
| 黃鼠狼 | 0.4.1 | 網頁顏色 | 24.8.0 | 網頁編碼格式 | 0.5.1 |
| websocket-client | 1.8.0 | websockets | 11.0.3 | Werkzeug | 3.0.3 |
| whatthepatch | 1.0.2 | 輪子 | 0.43.0 | 文字雲 | 1.9.3 |
| 包裹 | 1.14.1 | xgboost | 2.0.3 | xgboost-ray | 0.1.19 |
| xxhash | 3.4.1 | yapf | 0.33.0 | yarl | 1.9.3 |
| ydata 分析概況 | 4.9.0 | zipp | 3.17.0 | zstd | 1.5.5.1 |
R 函式庫
R 連結庫與 Databricks Runtime 16.1 中的 R 連結庫 相同。
Java 和 Scala 函式庫（Scala 2.12 叢集）
除了 Databricks Runtime 16.1 中的 Java 和 Scala 連結庫之外，Databricks Runtime 16.1 ML 還包含下列 JAR：
CPU 叢集
| 群組標識碼 | 成品標識碼 | 版本 |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU 叢集
| 群組標識碼 | 成品標識碼 | 版本 |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.4-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.15.1 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |