Megosztás a következőn keresztül:

Databricks Runtime 12.0 (EoS)

  • Cikk

Feljegyzés

A Databricks Runtime-verzió támogatása véget ért. A támogatás megszűnésének dátumáról lásd a támogatási előzményeket. Az összes támogatott Databricks Runtime-verziót lásd a Databricks Runtime kiadási megjegyzéseinek verziói és kompatibilitása részben.

Az alábbi kibocsátási megjegyzések az Apache Spark 3.3.1 által működtetett Databricks Runtime 12.0-ról nyújtanak információkat.

A Databricks 2022 decemberében adta ki ezt a verziót.

Új funkciók és fejlesztések

A prediktív I/O általánosan hozzáférhető

A prediktív I/O már általánosan elérhető. További információ: Mi a prediktív I/O?.

A Photon-író támogatja a zstd tömörítést

A Photon natív író mostantól támogatja a zstd tömörítési kodeket, ha a zstd az alábbi beállítással van engedélyezve: spark.sql.parquet.compression.codeczstd.

Különálló fürtök szakaszszintű tevékenységerőforrás-profiljának támogatása

Most már szakaszszintű ütemezést használhat különálló fürtökön, amikor a dinamikus allokáció le van tiltva. A funkció használatához adja meg az egyes fázisokhoz tartozó tevékenységerőforrásokat ResourceProfileBuilder .

SQL-támogatás szelektív felülíráshoz a következővel: REPLACE WHERE

Mostantól szelektíven felülírhatja a deltatáblák tetszőleges kifejezéseinek megfelelő adatokat az alábbi mintával.

INSERT INTO table_name REPLACE WHERE predicate append_relation

Lásd: Tetszőleges szelektív felülírás replaceWhere.

A vízjelek mostantól támogatottak az SQL-ben

Most már megadhatja a vízjeleket a DLT SQL-felületen és a streamelt DataFrame-eken futó SQL-lekérdezésekben. Lásd WATERMARK záradék.

PySpark-memóriaprofilozás

A memóriaprofilozás mostantól engedélyezve van a PySpark felhasználó által definiált függvényeihez. Ez információt nyújt a felhasználó által definiált függvények egyes kódsorainak memórianöveléséről, memóriahasználatáról és előfordulásainak számáról.

Dinamikus metszés a DELETE és UPDATE esetében

A Photon-kompatibilis számítás használatakor DELETE és UPDATE mostantól dinamikus fájl- és partíciómetszetet használnak, ahol javítja a teljesítményt. Például a dinamikus metszés akkor engedélyezett, amikor egy kisebb forrástábla felhasználásával frissítik vagy törlik a sorokat egy nagyobb táblában.

Sorszintű törlési metrikák particionált adatmanipulációs nyelvi műveletekhez

Particionált predikátumok esetén a felhasználók mostantól naplózhatják, hogy hány sor törlődik az olyan adatmanipulációs nyelv (DML) műveletek futtatásakor, mint például DELETEa , TRUNCATEés replaceWhere.

Hibajavítások

Kijavítottunk egy JSON-elemzéssel kapcsolatos hibát az Automatikus betöltőben, ahol az összes oszlop sztringként maradt meg. Korábban cloudFiles.inferColumnTypes nem volt beállítva, vagy false-re volt beállítva, és a JSON beágyazott objektumokat tartalmazott.

Könyvtárfrissítések

  • Frissített Python-kódtárak:
    • argon2-cffi 20.1.0 és 21.3.0 között
    • attrs 21.2.0-tól 21.4.0-ra
    • backports.entry-points-selectable 1.1.1-ről 1.2.0-ra
    • fehérítő 4.0.0-tól 4.1.0-ra
    • boto3 1.21.18 és 1.21.32 között
    • botocore 1.24.18-tól 1.24.32-ig
    • cffi 1.14.6-tól 1.15.0-ra
    • kattintson a 8.0.3-tól a 8.0.4-hez
    • cycler 0.10.0-ról 0.11.0-ra
    • Cython 0.29.24-től 0.29.28-ig
    • debugpy 1.4.1-ről 1.5.1-re
    • decorator 5.1.0-ról 5.1.1-re
    • belépési pontok 0,3 és 0,4 között
    • idna 3,2 és 3,3 között
    • ipykernel 6.12.1 és 6.15.3 között
    • ipython 7.32.0-tól 8.5.0-ig
    • ipywidgets 7.7.0 és 7.7.2 között
    • jedi 0.18.0-tól 0.18.1-től
    • joblib 1.0.1-től 1.1.0-ra
    • jsonschema 3.2.0 és 4.4.0 között
    • kiwisolver 1.3.1 és 1.3.2 között
    • matplotlib 3.4.3 és 3.5.1 között
    • nbclient 0.5.3-tól 0.5.13-ig
    • nbconvert 6.1.0-ról 6.4.4-re
    • nbformat 5.1.3-tól 5.3.0-ra
    • nest-asyncio 1.5.1 és 1.5.5 között
    • jegyzetfüzet 6.4.5-től 6.4.8-ra
    • numpy 1.20.3 és 1.21.5 között
    • csomagolás 21,0-tól 21,3-ig
    • pandas 1.3.4 és 1.4.2 között
    • pandocfilters 1.4.3 és 1.5.0 között
    • parso 0.8.2 és 0.8.3 között
    • Párna 8.4.0-tól 9.0.1-től
    • platformdirs 2.5.2 és 2.5.4 között
    • plotly 5.9.0-ról 5.6.0-ra
    • prometheus-client 0.11.0 és 0.13.1 között
    • protobuf 4.21.5 és 3.19.4 között
    • pycparser 2,20 és 2,21 között
    • Pygments 2.10.0-tól 2.11.2
    • pyodbc 4.0.31-től 4.0.32-ig
    • pyzmq 22.2.1 és 22.3.0 között
    • 2.26.0 és 2.27.1 közötti kérelmek
    • s3transfer 0.5.2-től 0.5.0-ra
    • scikit-learn 0.24.2-től 1.0.2-ig
    • scipy 1.7.1-ről 1.7.3-ra
    • 0.12.2 és 0.13.2 közötti statisztikák
    • terminado frissítve 0.9.4-ről 0.13.1-re
    • tomli 2.0.1 és 1.2.2 között
    • traitletek 5.1.0-ról 5.1.1-re
    • urllib3 1.26.7 és 1.26.9 között
    • widgetsnbextension 3.6.0 és 3.6.1 között
  • Frissített R-kódtárak:
    • alap: 4.1.3–4.2.2
    • Homebrew frissítés 1.0-7-ről 1.0-8-ra
    • bslib 0.4.0 és 0.4.1 között
    • callr 3.7.2-től 3.7.3-ra
    • chron 2.3-57-ről 2.3-58-ra
    • cli 3.3.0 és 3.4.1 között
    • cluster 2.1.3-ra 2.1.4-re
    • commonmark from 1.8.0 to 1.8.1
    • fordító 4.1.3–4.2.2
    • cpp11 0.4.2-től 0.4.3-ra
    • a crayon 1.5.1-ről 1.5.2-re
    • curl 4.3.2-ről 4.3.3-ra
    • A data.table frissítése 1.14.2-ről 1.14.4-re
    • adatkészletek a 4.1.3-tól a 4.2.2-hez
    • desc 1.4.1 és 1.4.2 között
    • devtools 2.4.4 és 2.4.5 között
    • kivonat 0.6.29-től 0.6.30-ra
    • e1071 1,7-11 és 1,7-12 között
    • értékelés 0,16 és 0,18 között
    • fontawesome 0.3.0 és 0.4.0 között
    • 1.28.0-tól 1.29.0-ra
    • future.apply 1.9.1-ről 1.10.0-ra
    • gargle frissítés 1.2.0-ról 1.2.1-re
    • gert 1.8.0 és 1.9.1 között
    • ggplot2 3.3.6-tól 3.4.0-ra
    • gh 1.3.0 és 1.3.1 között
    • gitcreds 0.1.1 és 0.1.2 között
    • 4.1.3 és 4.2.2 közötti grafikus elemek
    • grDevices verzió 4.1.3–4.2.2
    • rács 4.1.3 és 4.2.2 között
    • httpuv 1.6.5-től 1.6.6-osig
    • izoband 0.2.5-től 0.2.6-osig
    • jsonlite 1.8.0-tól 1.8.3-ra
    • láva 1.6.10-től 1.7.0-ra
    • életciklus 1.0.1 és 1.0.3 között
    • A lubridate 1.8.0-ról 1.9.0-ra változott
    • markdown 1,1-ről 1,3-ra
    • TÖMEG 7,3-56-tól 7,3-58-ig
    • Mátrix 1,4-1 és 1,5-1 között
    • módszerek a 4.1.3-tól a 4.2.2-ig
    • mgcv 1.8-40-ről 1.8-41-re
    • nlme 3.1-157-ről 3.1-160-ra
    • nnet 7.3-17-ről 7.3-18-ra
    • openssl frissítése 2.0.2-ről 2.0.4-re
    • 4.1.3-tól 4.2.2-ig terjedő párhuzamos rész
    • pkgload 1.3.0 és 1.3.1 között
    • processx 3.7.0 és 3.8.0 között
    • ps 1.7.1 és 1.7.2 között
    • purrr 0.3.4 és 0.3.5 között
    • ragg 1.2.2 és 1.2.4 között
    • RcppEigen 0.3.3.9.2 és 0.3.3.3.9.3 között
    • readr 2.1.2-es verzióról 2.1.3-as verzióra
    • receptek 1.0.1-től 1.0.3-ra
    • rlang 1.0.5-től 1.0.6-ig
    • rmarkdown 2.16-tól 2.18-ig
    • rpart 4.1.16-tól 4.1.19-ig
    • RSQLite 2.2.16-tól 2.2.18-ra
    • shiny 1.7.2-ről 1.7.3-ra frissítés
    • SparkR 3.3.0 és 3.3.1 között
    • spline-ok 4.1.3-tól 4.2.2-ig
    • 4.1.3 és 4.2.2 közötti statisztikák
    • statisztikái4 a 4.1.3-tól a 4.2.2-hez
    • sys 3.4-től 3.4.1-re
    • tcltk 4.1.3 és 4.2.2 között
    • testthat 3.1.4-től 3.1.5-ösig
    • tidyr 1.2.0-ról 1.2.1-re
    • tidyselect 1.1.2-ről 1.2.0-ra
    • timeDate: 4021.104-ről 4021.106-ra
    • tinytex 0,41 és 0,42 között
    • 4.1.3–4.2.2.2.
    • utils 4.1.3-tól 4.2.2-től
    • 0.4.1 és 0.5.0 közötti vctrs
    • vroom 1.5.7-től 1.6.0-ra
    • xfun 0,32 és 0,34 között
    • yaml 2.3.5-től 2.3.6-ig
    • zip 2.2.0 és 2.2.2 között
  • Frissített Java-kódtárak:
    • com.fasterxml.jackson.core.jackson-databind 2.13.4 és 2.13.4.2 között
    • org.apache.parquet.parquet-column from 1.12.0-databricks-0007 to 1.12.3-databricks-0001
    • org.apache.parquet.parquet-common from 1.12.0-databricks-0007 to 1.12.3-databricks-0001
    • org.apache.parquet.parquet-encoding verzióváltozás: 1.12.0-databricks-0007-ről 1.12.3-databricks-0001-re
    • org.apache.parquet.parquet-format-structures from 1.12.0-databricks-0007 to 1.12.3-databricks-0001
    • org.apache.parquet.parquet-hadoop from 1.12.0-databricks-0007 to 1.12.3-databricks-0001
    • org.apache.parquet.parquet-jackson ettől 1.12.0-databricks-0007 eddig 1.12.3-databricks-0001
    • org.apache.yetus.audience-annotations verzió 0.5.0-tól 0.13.0-ig

Apache Spark

A Databricks Runtime 12.0 tartalmazza az Apache Spark 3.3.1-et. Ez a kiadás tartalmazza a Databricks Runtime 11.3 LTS-ben található összes Spark-javítást és -fejlesztést, valamint a Spark következő további hibajavításait és fejlesztéseit:

  • [SPARK-40844] [SC-116996][12.x][12.0][12.0.0] "[SC-113542][ss] A Kafka eltolási konfiguráció alapértelmezett értékének visszavonása"
  • [SPARK-40646] [SC-116061] "[SC-113379][sql] Részleges eredmények visszaadásának javítása JSON-adatforrásban és JSON-függvényekben"
  • [SPARK-41195] [SC-116305][sql] Támogatás PIVOT/UNPIVOT csatlakozó gyermekekkel
  • [SPARK-41178] [SC-116139][sql] Javítás a parser szabály precedenciájában JOIN és vessző között.
  • [SPARK-41072] [SC-116140][sc-116044][SC-115852][sql][SS] Adja hozzá a STREAM_FAILED hibaosztályt StreamingQueryException
  • [SPARK-40921] Visszavonás “([SC-115140][sc-114585][SQL]) A FORRÁS ÁLTAL NEM ILLESZKEDŐ eset záradékának hozzáadása” MERGE INTO
  • [SPARK-37980] [SC-115758] [SQL] A METADATA oszlop kiterjesztése a Parquet-fájlok sorindexeinek támogatásához
  • [SPARK-41055] [SC-115582][sql] Nevezze át _LEGACY_ERROR_TEMP_2424-ről GROUP_BY_AGGREGATE-ra
  • [SPARK-41101] [SC-115849][python][PROTOBUF] Üzenetosztálynév támogatása PYSPARK-PROTOBUF
  • [SPARK-40956] [SC-115867] SQL egyenértékű Dataframe felülírás parancshoz
  • [SPARK-41095] [SC-115659][sql] Megoldatlan operátorok átalakítása belső hibákká
  • [SPARK-41144] [SC-115866][sql] A megoldatlan tipp nem okozhat lekérdezési hibát
  • [SPARK-41137] [SC-115858][sql] Nevezze át LATERAL_JOIN_OF_TYPE-t INVALID_LATERAL_JOIN_TYPE-ra
  • [SPARK-40998] [SC-114754][sql] Nevezze át a hibaosztályt _LEGACY_ERROR_TEMP_0040INVALID_IDENTIFIER
  • [SPARK-41015] [SC-115130][sql][PROTOBUF] UnitTest null ellenőrzés adatgenerátorhoz
  • [SPARK-40769] [SC-114923][core][SQL] Az összesítő kifejezések típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-41043] [SC-115183][sql] Nevezze át a _LEGACY_ERROR_TEMP_2429 hibaosztályt NUM_COLUMNS_MISMATCH
  • [SPARK-40777] [SC-114855][sql][PROTOBUF] A Protobuf importálási támogatása és a hibaosztályok áthelyezése.
  • [SPARK-41019] [SC-114987][sql] Adjon meg egy lekérdezési környezetet a failAnalysis()
  • [SPARK-41027] [SC-115131][sql] MAP_FROM_ENTRIES_WRONG_TYPE helyett használja a UNEXPECTED_INPUT_TYPE
  • [SPARK-40476] [SC-115868][sc-1111163][ML][sql] Az ALS shuffle méretének csökkentése
  • [SPARK-41134] [SC-115851][sql] A belső hibák hibaüzenetének javítása
  • [SPARK-37980] Visszaállítás " [SQL] Metaadat-oszlop kiterjesztése a Parquet-fájlok sorindexeinek támogatásához
  • [SPARK-41109] [SC-115788][sql] Nevezze át a hibaosztályt _LEGACY_ERROR_TEMP_1216 INVALID_LIKE_PATTERN
  • [SPARK-40984] [SC-115844][core][SQL] NON_FOLDABLE_INPUT használata FRAME_LESS_OFFSET_WITHOUT_FOLDABLE helyett
  • [SPARK-41029] [SC-115828][sql] A Scala 2.13-hoz készült GenericArrayData konstruktorhasználatának optimalizálása
  • [SPARK-40697] [SC-113648][sql] Olvasási oldali karakterkitöltés hozzáadása a külső adatfájlok lefedéséhez
  • [SPARK-40978] [SC-114574][sql] failAnalysis() kontextus nélkül migrálása hibaosztályokra
  • [SPARK-40663] [SC-114586][sql] Végrehajtási hibák migrálása hibaosztályokra: _LEGACY_ERROR_TEMP_2251-2275
  • [SPARK-38959] [SC-115672][sc-112707][SQL] DS V2: Futtatókörnyezeti csoportok szűrésének támogatása sorszintű parancsokban
  • [SPARK-40372] [SC-115668][sql] A tömbtípus-ellenőrzések hibáinak migrálása hibaosztályokra
  • [SPARK-41038] [SC-115371][sql] Nevezze át MULTI_VALUE_SUBQUERY_ERRORSCALAR_SUBQUERY_TOO_MANY_ROWS
  • [SPARK-40965] [SC-114443][sql] Nevezze át a _LEGACY_ERROR_TEMP_1208 hibaosztályt FIELD_NOT_FOUND
  • [SPARK-40748] [SC-114696][sql] A feltételek típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-40371] [SC-114557][sql] Az NthValue és az NTile típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-41092] [SC-115547][sql] Ne használjon azonosítót az intervallumegységek egyeztetéséhez
  • [SPARK-41009] [SC-115360][sql] Nevezze át a hibaosztályt _LEGACY_ERROR_TEMP_1070LOCATION_ALREADY_EXISTS
  • [SPARK-37980] [SQL] Metaadat-oszlop kiterjesztése a Parquet-fájlok sorindexeinek támogatásához
  • [SPARK-40967] [SC-114448][sql] failAnalysis() migrálása hibaosztályokra
  • [SPARK-34265] [SC-115486][sc-113788][PYTHON][sql] Instrument Python UDF-ek SQL-metrikákkal
  • [SPARK-41012] [SC-114873][sql] Nevezze át _LEGACY_ERROR_TEMP_1022ORDER_BY_POS_OUT_OF_RANGE
  • [SPARK-41042] [SC-115142][sql] Nevezze át PARSE_CHAR_MISSING_LENGTHDATATYPE_MISSING_SIZE
  • [SPARK-40752] [SC-114442][sql] A különféle kifejezések típusellenőrzési hibáinak hibakategóriákra való migrálása
  • [SPARK-37945] [SC-115534][sql][CORE] Hibaosztályok használata az aritmetikai műveletek végrehajtási hibáiban
  • [SPARK-40374] [SC-114705][sql] Típuskészítők ellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-41056] [SC-115354][r] Az R 4.2-ben bevezetett új R_LIBS_SITE viselkedés javítása
  • [SPARK-41041] [SC-115357][sql] Integrálja _LEGACY_ERROR_TEMP_1279 a(z) TABLE_OR_VIEW_ALREADY_EXISTS-ba/-be
  • [SPARK-40663] [SC-114852][sql] Végrehajtási hibák áttelepítése hibaosztályokra: _LEGACY_ERROR_TEMP_2201-2225
  • [SPARK-41020] [SC-114984][sql] Nevezze át a _LEGACY_ERROR_TEMP_1019 hibaosztályt STAR_GROUP_BY_POS
  • [SPARK-41035] [SC-115233][sql] Ne javítsa az összesítő függvények összecsukható komponenseit RewriteDistinctAggregates
  • [SPARK-39778] [SC-114353][sql] Hibaosztályok és üzenetek javítása
  • [SPARK-40798] [SC-113782][sql] Az alter partíciónak ellenőriznie kell az értéket a storeAssignmentPolicy betartásával
  • [SPARK-40810] [SC-113533][sql] A SparkIllegalArgumentException használata IllegalArgumentException helyett a CreateDatabaseCommand & AlterDatabaseSetLocationCommand alkalmazásban
  • [SPARK-40921] [SC-115140][sc-114585][SQL] Adja hozzá a WHEN NOT MATCHED BY SOURCE záradékot a MERGE INTO-hoz
  • [SPARK-40360] [SC-114965] ALREADY_EXISTS és NOT_FOUND kivételek
  • [SPARK-41007] [SC-115085][sql] Adjunk hozzá egy hiányzó szerializálót a java.math.BigInteger-hez
  • [SPARK-40751] [SC-114254][sql] A magas rendű függvények típusellenőrzési hibáinak migrálása a hibaosztályokra.
  • [SPARK-40248] [SC-114704][sql] Nagyobb számú bit használata Bloom-szűrő létrehozásához
  • [SPARK-41040] [SC-115145][ss] A readStream.table használatakor az önkiszolgáló streamelési lekérdezés hibáinak kijavítása
  • [SPARK-32380] [SC-114966][sql] A HBase-tábla hozzáférésének javítása a Hive-en keresztül a Sparkból
  • [SPARK-40749] [SC-114860][sql] A generátorok típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-40925] [SC-114445][sql][SS][warmfix][12.x] Késleltetett állapot operátor javítása…
  • [SPARK-40654] [SC-112783] Ideiglenes naplósorok eltávolítása
  • [SPARK-40742] [SC-114913][sc-112646][CORE][sql] Az általános típushoz kapcsolódó Java-fordítási figyelmeztetések javítása
  • [SPARK-40657] [SC-113642][cherry-pick] Java-osztályok támogatása a Protobban...
  • [SPARK-40898] [SC-113932][sql] Helyezze idézőjelbe a függvényneveket a típuseltérési hibáknál
  • [SPARK-40760] [SC-113750][sql] Intervallumkifejezések típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-36114] [SC-113771][sql] Segéd lekérdezések támogatása korrelált nem egyenlőségi predikátumokkal
  • [SPARK-40856] [SC-113738][sql] Frissítse a WRONG_NUM_PARAMS hibasablonját
  • [SPARK-40759] [SC-114251][sql] Az időablak típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-40750] [SC-113812][sql] Matematikai kifejezések típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-40756] [SC-113749][sql] Sztringkifejezések típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-40768] [SC-113640][sql] A bloom_filter_agg() típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-40369] [SC-113402][core][SQL] A hívások típusellenőrzési hibáinak migrálása tükröződés útján hibaosztályokra
  • [SPARK-39445] [SQL] Távolítsa el az ablakot, ha a windowExpressions üres az oszlopkivágás során.
  • [SPARK-40761] [SC-113245][sql] Percentilis kifejezések típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-40361] [SC-112789][sql] Aritmetikai típusellenőrzési hibák migrálása hibaosztályokra
  • [SPARK-40714] [SC-112576][sql] PartitionAlreadyExistsException eltávolítása
  • [SPARK-40702] [SC-112437][sql] Partíciós specifikációk javítása a PartitionsAlreadyExistException
  • [SPARK-40358] [SC-112631][sql] A gyűjteménytípus-ellenőrzési hibák migrálása hibaosztályokra
  • [SPARK-40910] [SC-114259][sql] A Nem támogatottOperationException helyett a SparkUnsupportedOperationException
  • [SPARK-39876] [SC-112429][sql] UNPIVOT hozzáadása az SQL-szintaxishoz
  • [SPARK-39783] [SC-113389][sql] Idézze a qualifiedName-t, a hibaüzenetekben az oszlopjelöltekhez kapcsolódó fordított apostrófok javítása érdekében.
  • [SPARK-40663] [SC-112520][sql] Végrehajtási hibák áttelepítése hibaosztályokra: _LEGACY_ERROR_TEMP_2026-2282
  • [SPARK-40975] [SC-114555][sql] Nevezze át a _LEGACY_ERROR_TEMP_0021 hibaosztályt UNSUPPORTED_TYPED_LITERAL
  • [SPARK-37935] [SC-114472][sql] Külön hibaosztálymezők kiküszöbölése
  • [SPARK-40944] [SC-114530][sql] A CREATE TABLE oszlopbeállításainak rendezési kényszerének lazítása
  • [SPARK-40815] [SC-114528][sql] DelegateSymlinkTextInputFormat hozzáadása a SymlinkTextInputSplit hiba megkerülésére
  • [SPARK-40933] [SC-114441][sql] Reimplement df.stat.{cov, corr} beépített SQL-függvényekkel
  • [SPARK-40932] [SC-114439][core] Az allGather hibaüzeneteinek kijavítása felülbírálva van
  • [SPARK-39312] [SQL] Natív parquet In operátor használata predikátumban a szűrő továbbításához
  • [SPARK-40862] [SC-114352][sql] Nem összesített allekérdezések támogatása a RewriteCorrelatedScalarSubqueryben
  • [SPARK-40963] [SC-114446][sql] Állítsa be helyesen a nullázhatóságot a projektnél, amelyet a ExtractGenerator hozott létre
  • [SPARK-40663] [SC-112295][sql] Végrehajtási hibák migrálása hibaosztályokra: _LEGACY_ERROR_TEMP_2000-2024
  • [SPARK-40892] [SC-114347][sql][SS] Lazítsa meg window_time szabály követelményét – több window_time hívás engedélyezése
  • [SPARK-40540] [SC-111639][sql] Fordítási hibák áthelyezése hibaosztályokra: _LEGACY_ERROR_TEMP_1100-1347
  • [SPARK-40924] [SC-114258][sql] A Unhex javítása, ha a bemenetnek páratlan számú szimbóluma van
  • [SPARK-40821] [SC-113754][sql][CORE][python][SS] Window_time függvény bemutatása az eseményidő ablakoszlopból való kinyeréséhez
  • [SPARK-40800] [SC-113772][sql] Mindig inline-oljuk a kifejezéseket az OptimizeOneRowRelationSubquery-ben.
  • [SPARK-40900] [SC-114006][sql] frequentItems újraimplementálása adatkeret műveletek használatával
  • [SPARK-40735] [SC-114022][sc-112657] A szkriptekben a bash következetes meghívása a /usr/bin/env bash használatával a kód hordozhatóbbá tétele érdekében
  • [SPARK-40773] [SC-113091][sql] Refactor checkCorrelationsInSubquery
  • [SPARK-40615] [SC-113400][sql] Nem támogatott adattípusok ellenőrzése az alkérdezések dekorrelálásakor
  • [SPARK-40660] [SC-112293][core][SQL] XORShiftRandom algoritmusra váltás az elemek szétosztásához
  • [SPARK-40540] [SC-113926][sc-111331][SQL] Fordítási hibák áttelepítése hibaosztályokra
  • [SPARK-40551] [SC-113135][sql] DataSource V2: API-k hozzáadása deltaalapú sorszintű műveletekhez
  • [SPARK-39391] [SC-110676][core] Particionálóosztályok újrafelhasználása
  • [SPARK-40368] [SC-113396][sql] A Bloom filter típusellenőrzési hibáinak migrálása hibaosztályokra
  • [SPARK-39146] [SC-111814][core][SQL] Helyi singleton bevezetése a ObjectMapper újrahasznosítására.
  • [SPARK-40357] [SC-113786][sc-111352][SQL] Ablaktípus-ellenőrzési hibák áthelyezése hibaosztályokra
  • [SPARK-40874] [SC-113756][python] A Python UDF-ekben lévő adatátvitelek javítása, ha a titkosítás be van kapcsolva
  • [SPARK-40359] [SC-113770][sc-111146][SQL] A CSV-/JSON-kifejezésekben a migrálási típus ellenőrzése hibaosztályokra meghiúsul
  • [SPARK-40880] [SC-113764][sql] summary újraimplementálása adatkeret műveletekkel
  • [SPARK-40877] [SC-113763][sql] crosstab megvalósítása adatkeretműveletekkel
  • [SPARK-40382] [SC-113098][sql] Csoportosítsa a különböző összesített kifejezéseket szemantikailag egyenértékű gyermekekkel a RewriteDistinctAggregates
  • [SPARK-40826] [SC-113532][ss] További ellenőrzőpont átnevezési fájlellenőrzés hozzáadása
  • [SPARK-40829] [SC-113426][sql] A CREATE TABLE LIKE nézetben "serde" formátumban tárolás nem működik
  • [SPARK-40844] [SC-113542][ss] A Kafka eltolási lekérdezési konfiguráció alapértelmezett értékének megfordítása
  • [SPARK-40488] [SC-113568][sc-1111160] Ne törje körbe a kivételeket, ha az adatforrás írása meghiúsul
  • [SPARK-40560] [SC-113631][sc-111335][SQL] Nevezze át messagemessageTemplate-ra a STANDARD formátumban a hibák esetén
  • [SPARK-40618] [SC-113096][sql] Hiba javítása a MergeScalarSubqueries szabályban beágyazott allekérdezésekkel a hivatkozáskövetés használatával
  • [SPARK-40530] [SC-113528][sc-111332][SQL] Hibaalapú fejlesztői API-k hozzáadása
  • [SPARK-40806] [SC-113250][sql] Elírás javítása: CREATE TABLE –> REPLACE TABLE
  • [SPARK-40646] [SC-113379][sql] Részleges eredmények javítása JSON-adatforrásban és JSON-függvényekben
  • [SPARK-40654] [Cherry-pick][sc-112783][SQL] Protobuf támogatás a Sparkhoz - a…
  • [SPARK-40753] [SC-113539][sql] Hiba javítása a katalóguskönyvtár-művelet tesztesetében
  • [SPARK-40765] [SC-113056][sql] Redundáns fs művelet optimalizálása CommandUtils#calculateSingleLocationSize#getPathSize metódusban
  • [SPARK-40114] [ES-479282][r][11.X] Arrow 9.0.0 támogatás a SparkR használatával
  • [SPARK-40479] [SC-110935][sql] Váratlan bemeneti típusú hiba áttelepítése hibaosztályba
  • [SPARK-40473] [SC-113388][sc-1111141][SQL] Elemzési hibák migrálása hibaosztályokra
  • [SPARK-39853] [SC-111867][core] Fázis szintű feladaterőforrás-profilok támogatása önálló fürt esetén, amikor a dinamikus erőforrás-allokáció le van tiltva (visszaportolva a PR-47157-ből)
  • [SPARK-40407] [SC-111161][sql] A df.repartition által okozott lehetséges adateltérés javítása
  • [SPARK-40425] [SC-110840][sql] DROP TABLE nem kell táblakeresést végeznie
  • [SPARK-40703] [SC-113242][sql] Shuffle bevezetése a SinglePartition számára a párhuzamosság javítása érdekében
  • [SPARK-40640] [SC-113138][core] SparkHadoopUtil a hadoop/hive konfigurációs beállítások forrásának beállításához
  • [SPARK-39062] [11.x][core] Szakasz szintű erőforrás-ütemezési támogatás hozzáadása független fürthöz
  • [SPARK-33861] [SC-109877]"[SQL] A feltételes predikátum egyszerűsítése" visszaállítása
  • [SPARK-40667] [SC-113136][sql] Fájl adatforrás-beállításainak újrabontása
  • [SPARK-40370] [SC-110677][sql] A migrálás típusellenőrzése nem tud hibaosztályokat eredményezni a CAST-ben
  • [SPARK-40611] [SC-113105][sql] A setInterval & getInterval teljesítményének javítása a UnsafeRow kapcsán
  • [SPARK-40733] [SC-113126][sql] Hozza létre a SERDEPROPERTIES tartalmát a ShowCreateTableAsSerdeCommand eredményében rögzített sorrendben.
  • [SPARK-40585] [SC-112180][sql] A kettős idézőjeles azonosítók támogatása
  • [SPARK-40772] [SC-112992][sql] A spark.sql.adaptive.skewJoin.skewedPartitionFactor javítása Double értékek támogatásához
  • [SPARK-40565] [SC-112417][sql] Ne küldjön nem determinisztikus szűrőket v2-fájlforrásokba
  • [SPARK-8731] [SC-112784] A Beeline nem működik az -e beállítással a háttérben való indításkor
  • [SPARK-35242] [SC-111398][sql] A munkamenet-katalógus alapértelmezett adatbázisának módosításának támogatása
  • [SPARK-40426] [SC-110672][sql] A SparkThrowable.getMessageParameters térképének visszaadása
  • [SPARK-40494] [SC-112655][sc-111025][CORE][sql][ML][mllib] Optimalizálja keys.zipWithIndex.toMap kódminta teljesítményét
  • [SPARK-40521] [SC-112430][sql] Csak a létező partíciókat adja vissza a Hive partíciók létrehozásából PartitionsAlreadyExistException
  • [SPARK-40705] [SC-112567][sql] A módosítható tömbök használatának eseteinek kezelése Sor JSON-ra konvertálásakor a Scala 2.13-hoz
  • [SPARK-39895] [SC-112590][sql][PYTHON] Több oszlop eltávolításának támogatása
  • [SPARK-40607] [SC-112296][core][SQL][mllib][SS] Redundáns sztring interpolátor műveletek eltávolítása
  • [SPARK-40420] [SC-112604][sc-110569][SQL] A hibaüzenet paramétereinek rendezése nevek szerint a JSON-formátumokban
  • [SPARK-40403] [SC-110564][sql] Számítsa ki a nem biztonságos tömbméretet hosszú értékekkel a hibaüzenet negatív méretének elkerülése érdekében
  • [SPARK-40482] [SC-110831][sql] SPARK-24544 Print actual failure cause when look up function failed visszaállítása
  • [SPARK-40400] [SC-112555][sc-110397][SQL] Hibaüzenet-paraméterek átadása a kivételeknek térképként
  • [SPARK-40628] [SC-112414][sql] Ne vigyen át összetett bal oldali fél- vagy anti-csatlakozási feltételt a projekten keresztül
  • [SPARK-40562] [SC-111455][sql] spark.sql.legacy.groupingIdWithAppendedUserGroupBy hozzáadása
  • [SPARK-40501] [SC-111333][sql] A hozzáadott PushProjectionThroughLimit az optimalizálóhoz
  • [SPARK-39200] [SC-111244][core] Fallback Storage teljes tartalom beolvasása
  • [SPARK-38717] [SC-111241][sql] Kezeli a Hive gyűjtőspektív esetmegőrző viselkedését
  • [SPARK-40385] [SC-111123][sql] A társobjektum-konstruktor értelmezett útvonalának javítása
  • [SPARK-40216] [SC-112413][sql] A ParquetUtils.prepareWrite kód deduplikációját ParquetFileFormat és ParquetWrite
  • [SPARK-40636] [SC-112160][core] Kijavítottuk a BlockManagerDecommissionerben található hibásan megmaradt shuffles napló hibáját.
  • [SPARK-40617] [SC-112009] Versenyhelyzet javítása az ExecutorMetricsPoller stageTCMP bejegyzéseinek kezelésekor
  • [SPARK-40618] [SC-112046][sql] Hiba javítása a MergeScalarSubqueries szabályban beágyazott alqueriesekkel
  • [SPARK-40612] [SC-111933][core] A delegálási jogkivonat megújításához használt tag javítása a nem YARN erőforrás-kezelők esetében
  • [SPARK-40595] [SC-111662][sql] A nem használt CTE-kapcsolatok hibaüzenetének javítása
  • [SPARK-40314] [SC-111879][sql][PYTHON] Scala- és Python-kapcsolatok hozzáadása inline és inline_outer számára
  • [SPARK-40416] [SC-110945][sql] A részlekérdezés kifejezés CheckAnalysis hibajelzéseinek áthelyezése az új hibakeret használatára
  • [SPARK-40318] [SC-111865][sc-109986][SQL] try_avg() a gyermek kivételeit kellene dobnia.
  • [SPARK-40509] [SC-111644][ss][PYTHON] Példa hozzáadása az applyInPandasWithState-hoz
  • [SPARK-40310] [SC-111329][sc-109842][SQL] A try_sum() függvénynek ki kell váltania a gyermekéből származó kivételeket.
  • [SPARK-40016] [SQL] Távolítsa el a szükségtelen TryEval-t a try_sum() megvalósításából.
  • [SPARK-40527] [SC-111224][sql] A szerkezetmezők nevének vagy térképkulcsának megőrzése a CreateStructben
  • [SPARK-38098] [SC-111178][python] A beágyazott StructType ArrayType-jának támogatása a nyílalapú átalakításhoz
  • [SPARK-40324] [SC-111359][sc-110293][SQL] Lekérdezési környezet biztosítása az AnalysisExceptionben
  • [SPARK-40492] [SC-111324][ss] Végezze el a karbantartást a StateStore streamelése előtt
  • [SPARK-40487] [SC-111124][sql] A BroadcastNestedLoopJoinExec fájlban állítsa be a defaultJoin parancsot párhuzamosan
  • [SPARK-40474] [SC-111273][sql] CsV-sémakövető és adatelemzési viselkedés javítása vegyes dátumokkal és időbélyegekkel rendelkező oszlopokon
  • [SPARK-40508] [SC-111066][sql] Az ismeretlen particionálást az UnknownPartitioning típusként kezeljük
  • [SPARK-40496] [SC-111234][sc-111013][SQL] A konfigurációk javítása az "enableDateTimeParsingFallback" vezérléséhez
  • [SPARK-40435] [SC-111214][ss][PYTHON] Tesztcsomagok hozzáadása az applyInPandasWithState-hoz a PySparkban
  • [SPARK-40434] [SC-111125][ss][PYTHON] Implementálja az applyInPandasWithState-t a PySparkban

Karbantartási frissítések

Lásd a Databricks Runtime 12.0 karbantartási frissítéseit.

Rendszerkörnyezet

  • Operációs rendszer: Ubuntu 20.04.5 LTS
  • Java: Zulu 8.64.0.19-CA-linux64
  • Scala: 2.12.14
  • Python: 3.9.5
  • R: 4.2.2
  • Delta Lake: 2.2.0

Telepített Python-kódtárak

Könyvtár Verzió Könyvtár Verzió Könyvtár Verzió
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 asttokens 2.0.5
attribútumok 21.4.0 visszahívás 0.2.0 backports.entry-points-selectable 1.2.0
beautifulsoup4 4.11.1 fekete 22.3.0 fehérítő 4.1.0
boto3 1.21.32 botocore 1.24.32 tanúsítvány 2021.10.8
cffi 1.15.0 karakterkódolás-érzékelő 4.0.0 charset-normalizer 2.0.4
kattintás 8.0.4 kriptográfia 3.4.8 biciklista 0.11.0
Cython 0.29.28 dbus-python 1.2.16 debugpy 1.5.1
lakberendező 5.1.1 defusedxml 0.7.1 distlib 0.3.6
belépési pontok 0,4 Végrehajtó 0.8.3 aspektusok áttekintése 1.0.0
fastjsonschema 2.16.2 fájlzár 3.8.0 betűtípusok 4.25.0
idna 3.3 ipykernel 6.15.3 ipython 8.5.0
ipython-genutils 0.2.0 ipywidgets 7.7.2 jedi 0.18.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.1.0
jsonschema 4.4.0 jupyter-client 6.1.12 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 kiwisolver 1.3.2
MarkupSafe 2.0.1 matplotlib 3.5.1 matplotlib-inline 0.1.2
félrehangolás 0.8.4 mypy-extensions 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.3.0 nest-asyncio 1.5.5
jegyzetfüzet 6.4.8 numpy 1.21.5 csomagolás 21,3
pandas 1.4.2 pandocfilters 1.5.0 parso 0.8.3
útvonal specifikáció (pathspec) 0.9.0 Patsy 0.5.2 pexpect 4.8.0
pickleshare 0.7.5 Párna 9.0.1 mag 21.2.4
platformdirs 2.5.4 ábrázolás 5.6.0 prometheus-client 0.13.1
prompt-toolkit 3.0.20 protobuf 3.19.4 psutil 5.8.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
pyarrow 7.0.0 pycparser 2.21 Pygments 2.11.2
PyGObject 3.36.0 pyodbc 4.0.32 pyparsing 3.0.4
pyrsistent 0.18.0 python-dateutil 2.8.2 pytz 2021.3
pyzmq 22.3.0 kérelmek 2.27.1 requests-unixsocket 0.2.0
s3transfer 0.5.0 scikit-learn 1.0.2 scipy 1.7.3
tengeri 0.11.2 Send2Trash 1.8.0 setuptools 58.0.4
hat 1.16.0 leves szűrő 2.3.1 ssh-import-id 5.10
veremadatok 0.2.0 statsmodels 0.13.2 Kitartás 8.0.1
befejezve 0.13.1 tesztútvonal 0.5.0 threadpoolctl 2.2.0
tokenize-rt 4.2.1 tomli 1.2.2 tornádó 6.1
traitlets 5.1.1 typing_extensions 4.1.1 felügyelet nélküli frissítések 0,1
urllib3 1.26.9 virtualenv 20.8.0 wcwidth 0.2.5
webencodings 0.5.1 kerék 0.37.0 widgetsnbextension 3.6.1

Telepített R-kódtárak

Az R-kódtárak a 2022-11-11-i Microsoft CRAN-pillanatképből vannak telepítve.

Könyvtár Verzió Könyvtár Verzió Könyvtár Verzió
nyíl 10.0.0 askpass 1,1 assertthat 0.2.1
háttérportolások 1.4.1 alap 4.2.2 base64enc 0.1-3
bit 4.0.4 bit64 4.0.5 blob 1.2.3
indítás 1.3-28 főz 1.0-8 Brio 1.1.3
seprű 1.0.1 bslib 0.4.1 gyorsítótár 1.0.6
hívó 3.7.3 kalapjel 6.0-93 cellranger 1.1.0
chron 2.3-58 osztály 7.3-20 Cli 3.4.1
clipr 0.8.0 óra 0.6.1 klaszter 2.1.4
kódeszközök 0.2-18 színtér 2.0-3 commonmark 1.8.1
fordítóprogram 4.2.2 konfiguráció 0.3.1 cpp11 0.4.3
zsírkréta 1.5.2 Megbízólevél 1.3.2 csavarodik 4.3.3
adat.tábla 1.14.4 adatkészletek 4.2.2 DBI 1.1.3
dbplyr 2.2.1 leírás 1.4.2 devtools 2.4.5
diffobj 0.3.5 összefoglaló 0.6.30 lefelé világítás 0.4.2
dplyr 1.0.10 dtplyr 1.2.2 e1071 1.7-12
három pont 0.3.2 értékel 0,18 rajongók 1.0.3
színek 2.1.1 gyorstérkép 1.1.0 fontawesome 0.4.0
macskák 0.5.2 foreach 1.5.2 külföldi 0.8-82
kovácsol 0.2.0 fs 1.5.2 jövő 1.29.0
future.apply 1.10.0 gargarizál 1.2.1 generikus 0.1.3
Gert 1.9.1 ggplot2 3.4.0 gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-4 globális 0.16.1
ragasztó 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
Gower 1.0.0 grafika 4.2.2 grDevices 4.2.2
hálózat 4.2.2 gridExtra 2.3 gsubfn 0,7
gtable 0.3.1 védősisak 1.2.0 kikötő 2.5.1
magasabb 0,9 HMS 1.1.2 htmltools 0.5.3
htmlwidgets 1.5.4 httpuv 1.6.6 httr 1.4.4
Azonosítók 1.0.1 ini 0.3.1 ipred 0.9-13
izoband 0.2.6 iterátorok 1.0.14 jquerylib 0.1.4
jsonlite 1.8.3 KernSmooth 2.23-20 knitr 1,40
címkézés 0.4.2 később 1.3.0 rács 0.20-45
láva 1.7.0 életciklus 1.0.3 figyelő 0.8.0
lubridate 1.9.0 magrittr 2.0.3 markdown 1.3
TÖMEG 7.3-58 Mátrix 1.5-1 memorizálás 2.0.1
módszerek 4.2.2 mgcv 1.8-41 MIME 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modellező 0.1.9
munsell 0.5.0 nlme 3.1-160 nnet 7.3-18
numDeriv 2016. augusztus - 1.1 openssl 2.0.4 parallel 4.2.2
párhuzamosan 1.32.1 pillér 1.8.1 pkgbuild 1.3.1
pkgconfig 2.0.3 pkgdown 2.0.6 pkgload 1.3.1
plogr 0.2.0 lejátszó 1.8.7 dicséret 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 haladás 1.2.2
progressr 0.11.0 Ígéretek 1.2.0.1 prototípus 1.0.0
meghatalmazott 0.4-27 Ps 1.7.2 purrr 0.3.5
r2d3 0.2.6 R6 2.5.1 ragg 1.2.4
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.9 RcppEigen 0.3.3.9.3
olvasó 2.1.3 readxl 1.4.1 receptek 1.0.3
visszavágó 1.0.1 visszavágó2 2.1.2 Távirányítók 2.4.2
példa a hibakereséshez 2.0.2 újraformázás2 1.4.4 rlang 1.0.6
rmarkdown 2.18 RODBC 1.3-19 roxygen2 7.2.1
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.2.18 rstudioapi 0,14 rversions 2.1.2
rvest 1.0.3 Sass 0.4.2 mérleg 1.2.1
választó 0.4-2 munkamenet-információ 1.2.2 alak 1.4.6
Fényes 1.7.3 sourcetools 0.1.7 sparklyr 1.7.8
SparkR 3.3.1 térbeli 7.3-11 splines 4.2.2
sqldf 0.4-11 SQUAREM 2021.1 statisztika 4.2.2
statisztikák4 4.2.2 string 1.7.8 sztring 1.4.1
túlélés 3.4-0 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 testthat 3.1.5 szövegformázás 0.3.6
tibble 3.1.8 tidyr 1.2.1 tidyselect 1.2.0
tidyverse 1.3.2 időváltozás 0.1.1 időDátum 4021.106
tinytex 0.42 eszközök 4.2.2 tzdb 0.3.0
URL-ellenőrző 1.0.1 usethis 2.1.6 utf8 1.2.2
segédprogramok 4.2.2 uuid 1.1-0 vctrs 0.5.0
viridisLite 0.4.1 vroom 1.6.0 Waldo 0.4.0
bajuszszőr 0,4 withr 2.5.0 xfun 0.34
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.6 cipzár 2.2.2

Telepített Java- és Scala-kódtárak (Scala 2.12-fürtverzió)

Csoportazonosító Artefaktum azonosítója Verzió
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws aws-java-sdk-cloudsearch 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws aws-java-sdk-glacier 1.12.189
com.amazonaws aws-java-sdk-glue 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-importexport 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws aws-java-sdk-machinelearning 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws aws-java-sdk-support 1.12.189
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics patak 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-árnyékolt 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml osztálytárs 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.13.4
com.fasterxml.jackson.core jackson-core 2.13.4
com.fasterxml.jackson.core jackson-databind 2.13.4.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-joda 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.13.4
com.fasterxml.jackson.module jackson-module-scala_2.12 2.13.4
com.github.ben-manes.koffein koffein 2.3.4
com.github.fommil jniloader 1,1
com.github.fommil.netlib core 1.1.2
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib native_ref-java-natives 1,1
com.github.fommil.netlib natív_rendszer-java 1,1
com.github.fommil.netlib natív_rendszer-java-natív 1,1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1,1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1,1
com.github.luben zstd-jni 1.5.2-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink Csellengő 1.6.1
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guáva 15,0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.0.204
com.helger profilozó 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1,1
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe konfiguráció 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1,15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fájl feltöltés 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
commons-naplózás commons-naplózás 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib lapack 2.2.1
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift levegőkompresszor 0.21
io.delta delta-sharing-spark_2.12 0.5.2
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metrikák-állapotellenőrzések 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.74.Final
io.netty netty-buffer 4.1.74.Final
io.netty netty-codec 4.1.74.Final
io.netty netty-common 4.1.74.Final
io.netty netty-handler 4.1.74.Final
io.netty netty-resolver 4.1.74.Final
io.netty netty-tcnative-classes 2.0.48.Final
io.netty netty-transport 4.1.74.Final
io.netty netty-transport-classes-epoll 4.1.74.Final
io.netty netty-transport-classes-kqueue 4.1.74.Final
io.netty netty-transport-native-epoll-linux-aarch_64 4.1.74.Final
io.netty netty-transport-native-epoll-linux-x86_64 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-aarch_64 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-x86_64 4.1.74.Final
io.netty netty-transport-native-unix-common 4.1.74.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx gyűjtő 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktiválás 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1,1
javax.transaction transaction-api 1,1
javax.xml.bind jaxb-api 2.2.11
javolution Javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.13
net.java.dev.jna jna 5.8.0
net.razorvine savanyúság 1,2
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.22
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow nyílformátum 7.0.0
org.apache.arrow nyíl memóriaegység 7.0.0
org.apache.arrow nyíl-memória-netty 7.0.0
org.apache.arrow nyíl-vektor 7.0.0
org.apache.avro avro 1.11.0
org.apache.avro avro-ipc 1.11.0
org.apache.avro avro-mapred 1.11.0
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator kurátor-ügyfél 2.13.0
org.apache.curator kurátor-keretrendszer 2.13.0
org.apache.curator kurátor-receptek 2.13.0
org.apache.derby derbi 10.14.2.0
org.apache.hadoop hadoop-client-api 3.3.4-databricks
org.apache.hadoop hadoop-kliens-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.14
org.apache.ivy borostyánkő 2.5.0
org.apache.logging.log4j log4j-1.2-api 2.18.0
org.apache.logging.log4j log4j-api 2.18.0
org.apache.logging.log4j log4j-core 2.18.0
org.apache.logging.log4j log4j-slf4j-impl 2.18.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.7.6
org.apache.orc orc-mapreduce 1.7.6
org.apache.orc orc-shims 1.7.6
org.apache.parquet parquet-oszlop 1.12.3-databricks-0001
org.apache.parquet parquet-common 1.12.3-databricks-0001
org.apache.parquet parquet-kódolás 1.12.3-databricks-0001
org.apache.parquet parquet-formátum-struktúrák 1.12.3-databricks-0001
org.apache.parquet parquet-hadoop 1.12.3-databricks-0001
org.apache.parquet parquet-jackson 1.12.3-databricks-0001
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus közönségmegjegyzések 0.13.0
org.apache.zookeeper állatgondozó 3.6.2
org.apache.zookeeper zookeeper-juta 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.46.v20220331
org.eclipse.jetty jetty-folytatás 9.4.46.v20220331
org.eclipse.jetty jetty-http 9.4.46.v20220331
org.eclipse.jetty jetty-io 9.4.46.v20220331
org.eclipse.jetty jetty-jndi 9.4.46.v20220331
org.eclipse.jetty Jetty-Plus 9.4.46.v20220331
org.eclipse.jetty jetty-proxy 9.4.46.v20220331
org.eclipse.jetty jetty-biztonság 9.4.46.v20220331
org.eclipse.jetty jetty-server 9.4.46.v20220331
org.eclipse.jetty jetty-servlet 9.4.46.v20220331
org.eclipse.jetty jetty-servlets 9.4.46.v20220331
org.eclipse.jetty jetty-util 9.4.46.v20220331
org.eclipse.jetty jetty-util-ajax 9.4.46.v20220331
org.eclipse.jetty jetty-webapp 9.4.46.v20220331
org.eclipse.jetty jetty-xml 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-api 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-kliens 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-common 9.4.46.v20220331
org.eclipse.jetty.websocket websocket szerver 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-servlet 9.4.46.v20220331
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-lokátor 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.36
org.glassfish.jersey.containers jersey-container-servlet-core 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core jersey-common 2.36
org.glassfish.jersey.core jersey-server 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator hibernate-validator 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2 Végleges
org.jdbi jdbi 2.63.1
org.jetbrains Széljegyzetek 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow mlflow-spark 1.27.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.3
org.roaringbitmap RoaringBitmap 0.9.25
org.roaringbitmap Hézagoló alátétek 0.9.25
org.rocksdb rocksdbjni 6.24.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt teszt-interfész 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1,2
org.scalanlp breeze_2.12 1,2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.36
org.slf4j jul-to-slf4j 1.7.36
org.slf4j slf4j-api 1.7.36
org.spark-project.spark Használatlan 1.0.0
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel makró-kompatibilitás_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1,5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1