共用方式為

Databricks Runtime 10.5 (EoS)

  • 發行項

注意

針對此 Databricks Runtime 版本的支援已結束。 如需了解終止支援日期，請參閱終止支援歷程記錄。 如需所有支援的 Databricks Runtime 版本，請參閱 Databricks Runtime 發行說明版本與相容性。

下列版本資訊提供由 Apache Spark 3.2.1 提供之 Databricks Runtime 10.5 的相關信息。 Databricks 於 2022 年 5 月發行此版本。

新功能和改進

SQL：新的函式 to_number 和 try_to_number

to_number 函式 與 try_to_number 函式 可讓您將各種格式數位的字元表示轉換成 DECIMAL。

SQL：新增函式 try_sum

不同於 sum，try_sum 聚合函數 傳回 NULL，而不是發生溢位時的錯誤。

SQL：更新為 ceil、ceiling和 floor 函式

ceil 函式、ceiling 函式和 floor 函式 現在支援第二個選擇性自變數來指定目標小數位數。

SQL：新的聚合函數 regr_avgx 和 regr_avgy

新的 regr_avgx 聚合函數 和 regr_avgy 聚合函數 支援線性回歸。

SQL：更新為 contains、startswith和 endswith 函式

contains 函式、startswith 函式和 endswith 函式 現在除了字串之外，還支援二進位數據類型作為輸入。

SQL：新增函式 array_size

新的 array_size 函式 會計算陣列的大小。

Unity Catalog：SQL LIST 輸出將移除 is_directory 資料欄，並在目錄路徑中新增結尾的 /（公測版）

SQL LIST 語句的輸出已變更，對應於由 Unity Catalog 管控的路徑列表。 不再顯示 is_directory 欄。 相反地，代表目錄的路徑現在以尾端斜線（/）結束 path 和 name 數據行。 這項變更是為了與命令的 dbutils.fs.ls 輸出一致。

自動載入器：新的SQL函式 CLOUD_FILES_STATE

您可以使用新的 CLOUD_FILES_STATE 函式來查詢自動載入器資料流的內部狀態;請參閱 自動載入器探索到的查詢檔案。

自動載入器：檔案通知支援現已正式推出

Google Cloud 上的自動載入器檔案通知支援現已正式推出。

Delta Lake：寫入單一檔案之記錄上限的新 maxRecordsPerFile 選項

當您使用 DataFrame API 來寫入 Delta 數據表時，您可以使用 [maxRecordsPerFile] 選項來指定要寫入單一檔案的記錄數目上限。 指定零的值或負值不代表任何限制。 請參閱設定 Delta Lake 來控制資料檔大小。

考拉斯的淘汰

考拉 現在已被廢棄。 Koalas 在 Apache Spark 之上提供 pandas API。 Koalas 是由社群所貢獻，從 Apache Spark 3.2 開始，已在 Spark 上以 pandas API 的形式提供。 Koalas 會繼續預安裝 Databricks Runtime 10.5，但從下一個 Databricks Runtime 版本開始，考拉將不再預安裝。

若要深入瞭解 Spark 上的 pandas API，請參閱：

所有檔案格式的新 _metadata 欄

您可以使用 _metadata 資料列取得輸入檔的元數據資訊。 _metadata 欄被 隱藏。 此資料行適用於所有輸入檔案格式。 若要使返回的DataFrame中包含_metadata資料行，您必須在查詢中明確參考此資料行。 請參閱 檔案資料資料列。

使用 Databricks Runtime 10.5 測試 DLT 管線

Databricks Runtime 10.5 現在是 DLT 支援的 preview 版本。 若要使用 Databricks Runtime 10.5 測試管線，請在管線設定中將 channel 設定設為 preview。

錯誤修正

  • 已修正啟用了異動數據擷取（CDC）的 Delta 表格中，更新作業的 numUpdatedRows 和 numCopiedRows 計量結果顯示。

圖書館升級

  • 升級的 Python 函式庫：
    • 從 plotly 5.5.0 升級到 5.6.0
  • 升級的 R 函式庫：
    • 基準從 4.1.2 到 4.1.3
    • 插入號從 6.0-90 更新到 6.0-91
    • 叢集從 2.1.2 到 2.1.3
    • commonmark 從 1.7 更新至 1.8.0
    • 編譯程式從 4.1.2 到 4.1.3
    • crayon 從 1.5.0 到 1.5.1
    • 從 4.1.2 到 4.1.3 的數據集
    • desc 版本從 1.4.0 更新到 1.4.1
    • fansi 從 1.0.2 到 1.0.3
    • 從 1.6.1 黏附到 1.6.2
    • 圖形從 4.1.2 到 4.1.3
    • grDevices 從 4.1.2 到 4.1.3
    • 從 4.1.2 到 4.1.3 的方格
    • knitr 從 1.37 更新到 1.38 版本
    • MASS 從 7.3-55 到 7.3-56
    • 從 1.4-0 到 1.4-1 的矩陣
    • 方法從 4.1.2 到 4.1.3
    • mgcv 從 1.8-39 到 1.8-40
    • nlme 從 3.1-155 到 3.1-157
    • openssl 從 1.4.6 到 2.0.0
    • 平行從 4.1.2 到 4.1.3
    • plyr 從 1.8.6 到 1.8.7
    • processx 從 3.5.2 到 3.5.3
    • r2d3 從 0.2.5 到 0.2.6
    • Rcpp 從 1.0.8 到 1.0.8.3
    • rlang 從 1.0.1 到 1.0.2
    • 從 2.11 到 2.13 的 rmarkdown
    • RSQLite 從 2.2.10 到 2.2.11
    • sass 從 0.4.0 更新到 0.4.1
    • 從 4.1.2 到 4.1.3 的曲線
    • 從 4.1.2 到 4.1.3 的統計數據
    • stats4 從 4.1.2 到 4.1.3
    • tcltk 從 4.1.2 到 4.1.3
    • 從 4.1.2 到 4.1.3 的工具
    • utils 從 4.1.2 更新到 4.1.3
    • uuid 從 1.0-3 更新到 1.0-4
    • waldo 從 0.3.1 到 0.4.0
    • withr 從 2.4.3 到 2.5.0
    • xfun 從 0.29 升級到 0.30
  • 升級的 Java 程式庫：
    • com.h2database.h2，從 1.4.195 到 2.1.210
    • org.apache.hadoop.hadoop-client-api，從 3.3.1-databricks 到 3.3.2-databricks
    • org.apache.hadoop.hadoop-client-runtime 從 3.3.1 到 3.3.2
    • org.rocksdb.rocksdbjni 從 6.24.2 到 6.20.3

Apache Spark

Databricks Runtime 10.5 包含 Apache Spark 3.2.1。 此版本包含 Databricks Runtime 10.4 LTS 中包含的所有 Spark 修正和改善，以及下列對 Spark 進行的其他錯誤修正和改進：

  • [SPARK-38354] [SC-97886] 還原 “[SQL] 新增隨機哈希聯結的哈希探查指標”
  • [SPARK-38484] [SAS-103][sas-111][SAS-113][sc-98102][Cher-Pick] 檢測 PySpark SQL 模組與一般使用記錄器
  • [SPARK-38333] [SQL]PlanExpression 表達式應該略過 Executor 中的 addExprTree 函式
  • [SPARK-38646] [PYTHON][10.x] 將 Python 函式的 trait 分離出來
  • [SPARK-38674] [PHOTON]將計量新增至 PhotonSubqueryBroadcastExec
  • [SPARK-38787] [SS] 在索引鍵的剩餘清單中，將找到的值替換為非 Null 元素，並從 keyWithIndexToValue 存放區的值中移除所有剩餘的 Null 元素，以進行資料流聯結。
  • [SPARK-38446] [Core]修正由 Log4j 所造成的 ExecutorClassLoader 和 FileDownloadCallback 之間的死結
  • [SPARK-38705] [SQL] 在創建和刪除函式指令中使用函式標識碼
  • [SPARK-38684] [SS] 修正與 RocksDB 狀態存放區提供者串流外部聯結的正確性問題
  • [SPARK-38655] [SQL] OffsetWindowFunctionFrameBase 找不到輸入不是 null 的位移數據列
  • [SPARK-38204] [SS]針對具有回溯相容性的具狀態運算子使用 StatefulOpClusteredDistribution
  • [SPARK-38616] [SQL] 追蹤 Catalyst TreeNode 中的 SQL 查詢文字
  • [SPARK-38600] [SQL] 將 unit 包含到 TIMESTAMPADD/DIFF 的 SQL 字串中
  • [SPARK-34805] [SQL] 傳遞別名欄位中巢狀欄的元數據
  • [SPARK-38535] [SQL] 新增datetimeUnit列舉，並在TIMESTAMPADD/DIFF中使用它
  • [SPARK-38415] [SQL] 更新histogram_numeric （x， y） 結果類型，讓 x == 輸入類型
  • [SPARK-38148] [SQL] 如果已經存在靜態分割區剪除，請勿新增動態分割區剪除
  • [SPARK-37527] [SQL] 編譯 COVAR_POP、COVAR_SAMP 和 CORR 在 H2Dialet
  • [SPARK-38510] [SQL] 嘗試再次使用 ClassSymbol.selfType 以解決循環參考
  • [SPARK-38509] [SQL] 取消註冊 TIMESTAMPADD/DIFF 函式並移除 DATE_ADD/DIFF
  • [SPARK-38504] [SQL]無法將 TimestampNTZ 讀取為 TimestampLTZ
  • [SPARK-38526] [SQL]修正 RuntimeReplaceable 的誤導函式別名名稱
  • [SPARK-38335] [SQL] 實作 DEFAULT 欄位值的解析器支援
  • [SPARK-38593] [SS]將已丟棄延遲事件數目的計量傳入 SessionWindowStateStoreSaveExec
  • [SPARK-38549] [SS]新增 numRowsDroppedByWatermark 至 SessionWindowStateStoreRestoreExec
  • [SPARK-38583] [SQL] 還原允許數值類型的 to_timestamp 行為
  • [SPARK-38481] [SQL]以 Spark 例外狀況取代 TIMESTAMPADD Java 溢位例外狀況
  • [SPARK-37753] [SQL] 微調邏輯以在 DynamicJoinSelection 中降級廣播哈希聯結
  • [SPARK-37582] [SPARK-37583][sql] CONTAINS, STARTSWITH, ENDSWITH 應該同時支援字串和二進位類型
  • [SPARK-38345] [SQL]介紹 SQL 函式 ARRAY_SIZE
  • [SPARK-38385] [SQL]改善空白語句和 <EOF> ParseException 中的錯誤訊息
  • [SPARK-37614] [SQL]支援 ANSI 聚合函數：regr_avgx和regr_avgy
  • [SPARK-38560] [SQL] 如果 Sum, Count, Any 同 distinct 使用，則無法執行部分聚合下推。
  • [SPARK-38360] [SQL][ss][PYTHON] 引進 exists 函式，TreeNode 以消除重複的程式代碼模式
  • [SPARK-38385] [SQL]改善 ANTLR 中「輸入不相符」案例的錯誤訊息
  • [SPARK-38240] [SQL] 改進 RuntimeReplaceable 並增添新增函式的指導方針
  • [SPARK-38542] [SQL]應該將 UnsafeHashedRelation 的 numKeys 序列化出去
  • [SPARK-38521] [SQL]從字串變更 partitionOverwriteMode 為 Scala 中的變數
  • [SPARK-38558] [SQL] 移除 IntegerType 與 IntDecimal 之間不必要的轉換
  • [SPARK-38489] [SQL]Aggregate.groupOnly 支援可折迭表達式
  • [SPARK-38410] [SQL] 支援指定重新平衡的初始分割區編號
  • [SPARK-38107] [SQL] 使用錯誤類別於 python/pandas UDF 的編譯錯誤中
  • [SPARK-38354] [SQL] 針對重排哈希聯結新增哈希探測衡量指標
  • [SPARK-38112] [SQL]在日期/時間戳處理的執行錯誤中使用錯誤類別
  • [SPARK-38361] [SQL]將 Factory 方法 getConnection 新增至 JDBCDialect。
  • [SPARK-37865] [SQL]修正聯合去重的正確性Bug
  • [SPARK-38298] [SQL][測試] 修正 DataExpressionSuite、NullExpressionsSuite、StringExpressionsSuite、complexTypesSuite、ANSI 模式下的 CastSuite
  • [SPARK-38407] [SQL]ANSI 轉換：放寬非空複雜類型的轉換限制
  • [SPARK-38352] [SQL] 修正 ANSI 模式下的 DataFrameAggregateSuite/DataFrameSetOperationsSuite/DataFrameWindowFunctionsSuite
  • [SPARK-38054] [SQL] 支援 JDBC v2 MySQL 方言中的清單命名空間
  • [SPARK-37960] [SQL]在 DS v2 API 中表示催化劑表達式的新架構
  • [SPARK-38103] [SQL] 將變換的解析錯誤遷移至新的錯誤架構
  • [SPARK-38519] [SQL]AQE 引發例外狀況應該遵循 SparkFatalException
  • [SPARK-38528] [SQL] 在建立專案列表時積極地在匯總序列上執行迭代 ExtractGenerator
  • [SPARK-38320] [SS] 修正在含有鍵資料的批次中 flatMapGroupsWithState 的逾時問題
  • [SPARK-38442] [SQL]修正 ANSI 模式下的 ConstantFoldingSuite/ColumnExpressionSuite/DataFrameSuite/AdaptiveQueryExecSuite
  • [SPARK-38268] [SQL]在 Abs/CheckOverflow 的 toString 方法中隱藏 “failOnError” 字段
  • [SPARK-37949] [SQL]改善重新平衡統計數據估計
  • [SPARK-38450] [SQL] 修正 ANSI 模式下的 HiveQuerySuite/PushFoldableIntoBranchesSuite/TransposeWindowSuite
  • [SPARK-38501] [SQL]修正 ANSI 模式下的 thriftserver 測試失敗
  • [SPARK-37895] [SQL] 過濾條件下推至帶引號的欄位
  • [SPARK-38449] [SQL] 避免在 ignoreIfExists=true 且數據表存在時呼叫 createTable
  • [SPARK-38406] [SQL]改善 ShufflePartitionsUtil createSkewPartitionSpecs 的效能
  • [SPARK-37947] [SQL] 從包含在 Generate 運算符中的 GeneratorOuter 表達式中擷取產生器。
  • [SPARK-38309] [CORE]修正SHS shuffleTotalReads 和 shuffleTotalBlocks 百分位數計量
  • [SPARK-38412] [SS] 修正 StateSchemaCompatibilityChecker 中從和至的順序錯置問題
  • [SPARK-38267] [CORE][sql][SS] 將布爾表達式中的模式匹配替換為條件語句
  • [SPARK-38104] [SQL] 將視窗剖析錯誤移轉至新的錯誤架構
  • [SPARK-38434] [SQL]CheckAnalysis.getDataTypesAreCompatibleFn 方法的正確語意
  • [SPARK-38033] [SS]無法啟動 SS 處理，因為 com……
  • [SPARK-38378] [SQL]將 ANTLR 文法定義重構為不同的剖析器和 Lexer 檔案
  • [SPARK-37475] [SQL]將 scale 參數新增至 floor 和 ceil 函式
  • [SPARK-38411] [CORE] 在讀取事件記錄時使用UTF-8doMergeApplicationListingInternal
  • [SPARK-36553] [ML] KMeans 避免計算大型 K 的輔助統計數據
  • [SPARK-38393] [SQL] 清理已過時的使用方式 GenSeq/GenMap
  • [SPARK-38389] [SQL] 新增DATEDIFF() 和DATE_DIFF() 作為TIMESTAMPDIFF() 的別名
  • [SPARK-33206] [CORE][3.2] 修正小型索引檔案的洗牌索引快取權重計算
  • [SPARK-38353] [PYTHON] 在Spark上為Pandas API增加enter和exit特殊方法
  • [SPARK-38323] [SQL][串流] 支援串流中的隱藏檔案元數據
  • [SPARK-38138] [SQL]具體化 QueryPlan 子查詢
  • [SPARK-38094] 根據欄位ID啟用匹配的架構欄位名稱
  • [SPARK-37923] [SQL] 在解析器內產生 BucketSpec 的分區轉換
  • [SPARK-38363] [SQL]當 ANSI 模式開啟時，請避免在 Dataset.summary（）/Dataset.describe（） 中發生運行時錯誤
  • [SPARK-38284][SQL]新增函式TIMESTAMPDIFF()
  • [SPARK-38251] [SQL] 在 ANSI 模式下將 Cast.toString 變更為 “cast” 而不是 “ansi_cast”
  • [SPARK-38314] [SQL] 修正了在寫入隱藏檔案元數據後導致無法讀取 parquet 檔案的問題

請參閱 Databricks Runtime 10.5 維護更新。

系統環境

  • 操作系統：Ubuntu 20.04.4 LTS
  • Java：Zulu 8.56.0.21-CA-linux64
  • Scala：2.12.14
  • Python：3.8.10
  • R：4.1.3
  • Delta Lake：1.2.1

已安裝的 Python 程式庫

圖書館 版本 圖書館 版本 圖書館 版本
Antergos Linux 2015.10 (ISO-Rolling) appdirs 1.4.4 argon2-cffi 20.1.0
非同步生成器 1.10 屬性 20.3.0 回調 (backcall) 0.2.0
bidict 0.21.4 漂白水 3.3.0 boto3 1.16.7
botocore 1.19.7 certifi 2020.12.5 cffi 1.14.5
chardet 4.0.0 自行車手 0.10.0 Cython 0.29.23
dbus-python 1.2.16 裝飾器 5.0.6 defusedxml 0.7.1
distlib 0.3.4 distro-info 0.23ubuntu1 入口點 0.3
面向概覽 1.0.0 文件鎖定 3.6.0 idna 2.10
ipykernel 5.3.4 ipython 7.22.0 ipython-genutils 0.2.0
ipywidgets 7.6.3 jedi 0.17.2 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.0.1 jsonschema 3.2.0
jupyter-client 6.1.12 jupyter-core 4.7.1 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 kiwisolver 1.3.1 koalas 1.8.2
MarkupSafe 2.0.1 matplotlib 3.4.2 調音錯誤 0.8.4
nbclient 0.5.3 nbconvert 6.0.7 nbformat 5.1.3
nest-asyncio 1.5.1 筆記本 6.3.0 numpy 1.20.1
包裝 20.9 pandas 1.2.4 pandocfilters 1.4.3
parso 0.7.0 替罪羊 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 枕頭 8.2.0 Python 的套件管理工具 pip 21.0.1
plotly 5.6.0 prometheus-client 0.10.1 prompt-toolkit 3.0.17
protobuf 3.17.2 psycopg2 2.8.5 ptyprocess 0.7.0
pyarrow 4.0.0 pycparser 2.20 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 pyrsistent 0.17.3
python-apt 2.0.0+ubuntu0.20.4.7 python-dateutil 2.8.1 python-engineio 4.3.0
python-socketio 5.4.1 pytz 2020.5 pyzmq 20.0.0
請求 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 scipy 1.6.2 seaborn 0.11.1
Send2Trash 1.5.0 setuptools 52.0.0 六 1.15.0
ssh-import-id 5.10 statsmodels 0.12.2 韌性 8.0.1
結束 0.9.4 testpath 0.4.4 threadpoolctl 2.1.0
tornado 6.1 traitlets 5.0.5 自動升級 0.1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
webencodings 0.5.1 輪子 0.36.2 widgetsnbextension 3.5.1

已安裝的 R 程式庫

R 函式庫是從 2022-03-28 的 Microsoft CRAN 快照安裝的。

圖書館 版本 圖書館 版本 圖書館 版本
askpass 1.1 assertthat 0.2.1 回移 1.4.1
基地 4.1.3 base64enc 0.1-3 位元 4.0.4
64位元 4.0.5 塊狀物 1.2.2 boot 1.3-28
釀造 1.0-7 活力 1.1.3 掃帚 0.7.12
bslib 0.3.1 cachem 1.0.6 callr 3.7.0
caret 6.0-91 cellranger 1.1.0 chron 2.3-56
課程 (or 類別, depending on context) 7.3-20 命令列介面 (CLI) 3.2.0 clipr 0.8.0
叢集 2.1.3 codetools 0.2-18 色彩空間 2.0-3
commonmark 1.8.0 編譯器 4.1.3 設定 0.3.1
cpp11 0.4.2 蠟筆 1.5.1 憑證 1.3.2
curl 4.3.2 資料表 1.14.2 資料集 4.1.3
DBI 1.1.2 dbplyr 2.1.1 描述 1.4.1
devtools 2.4.3 diffobj 0.3.5 摘要 0.6.29
dplyr 1.0.8 dtplyr 1.2.1 e1071 1.7-9
省略符號 0.3.2 評估 0.15 粉絲 1.0.3
顏色 2.1.0 快速映射 1.1.0 fontawesome 0.2.2
forcats 0.5.1 foreach 1.5.2 外國的 0.8-82
鍛造 0.2.0 fs 1.5.2 未來 1.24.0
future.apply 1.8.1 漱口 1.2.0 泛型 0.1.2
gert 1.5.0 ggplot2 3.3.5 gh 1.3.0
gitcreds 0.1.1 glmnet 4.1-3 全域 0.14.0
膠水 1.6.2 googledrive 2.0.0 googlesheets4 1.0.0
gower 1.0.0 圖形 4.1.3 grDevices 4.1.3
網格 4.1.3 gridExtra 2.3 gsubfn 0.7
gtable 0.3.0 安全帽 0.2.0 避風港 2.4.3
更高 0.9 hms 1.1.1 htmltools 0.5.2
htmlwidgets 1.5.4 httpuv 1.6.5 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 ids 1.0.1
ini 0.3.1 ipred 0.9-12 isoband 0.2.5
迭代器 1.0.14 jquerylib 0.1.4 jsonlite 1.8.0
KernSmooth 2.23-20 knitr 1.38 標籤 0.4.2
稍後 1.3.0 格子 0.20-45 熔岩 1.6.10
生命週期 1.0.1 listenv 0.8.0 lubridate 1.8.0
magrittr 2.0.2 markdown 1.1 MASS 7.3-56
矩陣 1.4-1 記憶化 2.0.1 方法 4.1.3
mgcv 1.8-40 默劇 0.12 ModelMetrics 1.2.2.2
modelr 0.1.8 munsell 0.5.0 nlme 3.1-157
nnet 7.3-17 numDeriv 2016.8-1.1 openssl 2.0.0
平行 4.1.3 平行地 1.30.0 柱 1.7.0
pkgbuild 1.3.1 pkgconfig 2.0.3 pkgload 1.2.4
plogr 0.2.0 plyr 1.8.7 讚美 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.5.3
prodlim 2019.11.13 進度 1.2.2 progressr 0.10.0
承諾 1.2.0.1 原型 1.0.0 代理伺服器 0.4-26
ps 1.6.0 purrr 0.3.4 r2d3 0.2.6
R6 2.5.1 隨機森林 (randomForest) 4.7-1 rappdirs 0.3.3
rcmdcheck 1.4.0 RColorBrewer 1.1-2 Rcpp 1.0.8.3
RcppEigen 0.3.3.9.1 readr 2.1.2 readxl 1.3.1
食譜 0.2.0 重賽 1.0.1 rematch2 2.1.2
遙控器們 2.4.2 可重現範例 2.0.1 reshape2 1.4.4
rlang 1.0.2 rmarkdown 2.13 RODBC 1.3-19
roxygen2 7.1.2 rpart 4.1.16 rprojroot 2.0.2
Rserve 1.8-10 RSQLite 2.2.11 rstudioapi 0.13
rversions 2.1.1 rvest 1.0.2 sass 0.4.1
scales 1.1.1 selectr 0.4-2 會話資訊 1.2.2
形狀 1.4.6 閃亮的 1.7.1 sourcetools 0.1.7
sparklyr 1.7.5 SparkR 3.2.0 空間的 7.3-11
splines 4.1.3 sqldf 0.4-11 SQUAREM 2021.1
統計數據 4.1.3 stats4 4.1.3 stringi 1.7.6
stringr 1.4.0 生存 3.2-13 sys 3.4
tcltk 4.1.3 教學演示 2.10 testthat 3.1.2
tibble 3.1.6 tidyr 1.2.0 tidyselect 1.1.2
tidyverse 1.3.1 時間日期 3043.102 tinytex 0.37
工具 4.1.3 tzdb 0.2.0 usethis 2.1.5
utf8 1.2.2 實用工具 4.1.3 uuid（通用唯一識別碼） 1.0-4
vctrs 0.3.8 viridisLite 0.4.0 vroom 1.5.7
waldo 0.4.0 鬍鬚 0.4 withr 2.5.0
xfun 0.30 xml2 1.3.3 xopen 1.0.0
xtable 1.8-4 yaml 2.3.5 zip 2.2.0

安裝 Java 和 Scala 函式庫 (Scala 2.12 叢群版本)

群組識別碼 成品識別碼 版本
ANTLR ANTLR 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws aws-java-sdk-cloudsearch 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws aws-java-sdk-glacier（AWS開發工具包，Glacier存儲服務） 1.12.189
com.amazonaws aws-java-sdk-glue 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-匯入匯出 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws aws-java-sdk-machinelearning 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws aws-java-sdk-support 1.12.189
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics stream 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml 同學 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.12.3
com.fasterxml.jackson.core jackson-core 2.12.3
com.fasterxml.jackson.core jackson-databind 2.12.3
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.3
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.3
com.fasterxml.jackson.module jackson-module-paranamer 2.12.3
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.3
com.github.ben-manes.caffeine caffeine 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib 核心 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.210
com.helger 性能分析器 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.發佈版
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1.0.3
com.sun.istack istack-commons-runtime 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe 配置 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.2
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
協同文件上傳 (commons-fileupload) commons-fileupload（公用檔案上傳） 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool 公共資源池 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib blas 2.2.1
dev.ludovic.netlib lapack 2.2.1
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift 空氣壓縮機 0.21
io.delta delta-sharing-spark_2.12 0.4.0
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics 度量-健康檢查 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.68.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx 收藏家 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation 啟用 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction 交易API 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.10
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
maven-trees hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine pyolite 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr 字串範本 3.2.1
org.apache.ant 螞蟻 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow 箭頭格式 2.0.0
org.apache.arrow 箭頭記憶核心 2.0.0
org.apache.arrow arrow-memory-netty 2.0.0
org.apache.arrow 箭頭向量 2.0.0
org.apache.avro Avro 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro-mapred 1.10.2
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator 策展人客戶端 2.13.0
org.apache.curator curator-framework 2.13.0
org.apache.curator 策展人食譜 2.13.0
org.apache.derby 德比 10.14.2.0
org.apache.hadoop hadoop-client-api 3.3.2-databricks
org.apache.hadoop hadoop-client-runtime 3.3.2
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents HttpClient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy 常春藤 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.13
org.apache.orc orc-mapreduce 1.6.13
org.apache.orc orc-shims 1.6.13
org.apache.parquet 帕魯克特格式欄（parquet-column） 1.12.0-databricks-0004
org.apache.parquet parquet-common 1.12.0-databricks-0004
org.apache.parquet parquet 編碼 1.12.0-databricks-0004
org.apache.parquet parquet-format-結構體 1.12.0-databricks-0004
org.apache.parquet parquet-hadoop 1.12.0-databricks-0004
org.apache.parquet parquet-jackson 1.12.0-databricks-0004
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus 觀眾註釋 0.5.0
org.apache.zookeeper 動物園管理員 3.6.2
org.apache.zookeeper zookeeper-jute 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.43.v20210629
org.eclipse.jetty jetty-continuation 9.4.43.v20210629
org.eclipse.jetty jetty-http 9.4.43.v20210629
org.eclipse.jetty jetty-io 9.4.43.v20210629
org.eclipse.jetty jetty-jndi 9.4.43.v20210629
org.eclipse.jetty jetty-plus 9.4.43.v20210629
org.eclipse.jetty jetty-proxy 9.4.43.v20210629
org.eclipse.jetty jetty-security 9.4.43.v20210629
org.eclipse.jetty jetty伺服器 9.4.43.v20210629
org.eclipse.jetty jetty-servlet 9.4.43.v20210629
org.eclipse.jetty jetty-servlets 9.4.43.v20210629
org.eclipse.jetty jetty-util 9.4.43.v20210629
org.eclipse.jetty jetty-util-ajax 9.4.43.v20210629
org.eclipse.jetty jetty-webapp 9.4.43.v20210629
org.eclipse.jetty jetty-xml 9.4.43.v20210629
org.eclipse.jetty.websocket WebSocket API 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-client 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-common 9.4.43.v20210629
org.eclipse.jetty.websocket WebSocket伺服器 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-servlet 9.4.43.v20210629
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jaxb jaxb-runtime 2.3.2
org.glassfish.jersey.containers jersey-container-servlet 2.34
org.glassfish.jersey.containers jersey-container-servlet-core 2.34
org.glassfish.jersey.core jersey-client 2.34
org.glassfish.jersey.core jersey-common 2.34
org.glassfish.jersey.core jersey-server 2.34
org.glassfish.jersey.inject jersey-hk2 2.34
org.hibernate.validator hibernate-validator 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains 註解 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap 墊片 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt 測試介面 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark 未使用 1.0.0
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1