Udostępnij za pośrednictwem

Databricks Runtime 10.5 (EoS)

  • Artykuł

Uwaga

Obsługa tej wersji środowiska Databricks Runtime została zakończona. Aby uzyskać datę zakończenia pomocy technicznej, zobacz Historia zakończenia pomocy technicznej. Wszystkie obsługiwane wersje środowiska Databricks Runtime można znaleźć w temacie Databricks Runtime release notes versions and compatibility (Wersje i zgodność środowiska Databricks Runtime).

Poniższe informacje o wersji zawierają informacje o środowisku Databricks Runtime 10.5 obsługiwanym przez platformę Apache Spark 3.2.1. Usługa Databricks wydała tę wersję w maju 2022 r.

Nowe funkcje i ulepszenia

SQL: nowe funkcje to_number i try_to_number

Funkcja to_number oraz try_to_number funkcja umożliwiają konwertowanie reprezentacji znakowych liczb w różnych formatach na DECIMAL.

SQL: Nowa funkcja try_sum

W przeciwieństwie do sumfunkcja agregacji try_sum zwraca wartość NULL zamiast błędu, gdy wystąpi przepełnienie.

SQL: aktualizacja do funkcji ceil, ceiling i floor

Funkcja ceil, ceiling funkcjii floor teraz obsługuje drugi opcjonalny argument określający skalę docelową.

SQL: Funkcje agregujące regr_avgx i regr_avgy nowe

Nowa funkcja agregacji regr_avgx i regr_avgy funkcji agregującej obsługuje regresje liniowe.

SQL: aktualizacja dla funkcji contains, startswith i endswith

Funkcja contains, startswith funkcjii endswith obsługuje teraz typy danych binarnych jako dane wejściowe oprócz ciągów.

SQL: Nowa funkcja array_size

Nowa funkcja array_size oblicza rozmiar tablicy.

Katalog Unity: dane wyjściowe SQL LIST usuwa kolumnę is_directory i dodaje końcowe / do ścieżek katalogów (wersja testowa)

Dane wyjściowe instrukcji SQL LIST, służącej do wyświetlania listy ścieżek zarządzanych przez Unity Catalog , uległy zmianie. Kolumna is_directory nie jest już wyświetlana. Zamiast tego ścieżki reprezentujące katalogi kończą się ukośnikiem (/) dla kolumn path i name. Ta zmiana zapewnia spójność z danymi wyjściowymi dbutils.fs.ls polecenia .

Automatyczne ładowanie: nowa funkcja SQL CLOUD_FILES_STATE

Za pomocą nowej CLOUD_FILES_STATE funkcji można wykonywać zapytania dotyczące wewnętrznego stanu strumienia automatycznego modułu ładującego. Zobacz Wykonywanie zapytań dotyczących plików odnalezionych przez moduł automatycznego ładowania.

Automatyczne ładowanie: obsługa powiadomień o plikach jest teraz w pełni dostępna.

Obsługa powiadomień dotyczących plików dla opcji Co to jest automatyczne ładowanie? w usłudze Google Cloud jest teraz ogólnie dostępna.

Delta Lake: nowa maxRecordsPerFile opcja maksymalnej liczby rekordów zapisywanych w jednym pliku

Gdy używasz API DataFrame do zapisywania w tabeli Delta, możesz użyć opcji maxRecordsPerFile, aby określić maksymalną liczbę rekordów do zapisu w jednym pliku. Określenie wartości zerowej lub ujemnej nie reprezentuje żadnego limitu. Zobacz Konfigurowanie usługi Delta Lake w celu kontrolowania rozmiaru pliku danych.

Wycofanie koalasu

Koalas jest teraz przestarzały. Koalas udostępnia interfejsy API pandas na platformie Apache Spark. Projekt Koalas został udostępniony przez społeczność i jest dostępny jako interfejs API pandas na platformie Spark, począwszy od Apache Spark 3.2. Koalas nadal jest wstępnie zainstalowany dla środowiska Databricks Runtime 10.5, ale Koalas nie będzie już wstępnie zainstalowany, począwszy od następnej wersji środowiska Databricks Runtime.

Aby dowiedzieć się więcej na temat interfejsu API biblioteki pandas na platformie Spark, zobacz:

Nowa _metadata kolumna dla wszystkich formatów plików

Informacje o metadanych dla plików wejściowych można uzyskać za pomocą kolumny _metadata. Kolumna jest ukryta_metadata. Ta kolumna jest dostępna dla wszystkich formatów plików wejściowych. Aby uwzględnić kolumnę _metadata w zwróconym DataFrameelemencie , musisz jawnie odwołać się do tej kolumny w zapytaniu. Zobacz Kolumna metadanych pliku.

Testuj potok DLT za pomocą środowiska Databricks Runtime 10.5

Środowisko Databricks Runtime 10.5 jest teraz wersją preview obsługiwaną dla DLT. Aby przetestować potok przy użyciu środowiska Databricks Runtime 10.5, ustaw channel na preview w ustawieniach potoku.

Poprawki błędów

  • Naprawiono wyświetlanie numUpdatedRows wyników metryk i numCopiedRows operacji aktualizacji w tabelach Delta, które mają włączone przechwytywanie zmian danych (CDC).

Uaktualnienia biblioteki

  • Uaktualnione biblioteki języka Python:
    • wykres z 5.5.0 do 5.6.0
  • Uaktualnione biblioteki języka R:
    • od 4.1.2 do 4.1.3
    • zmiana wersji z 6.0-90 do 6.0-91
    • klaster z wersji 2.1.2 do 2.1.3
    • commonmark od 1.7 do 1.8.0
    • Kompilator z wersji 4.1.2 do 4.1.3
    • crayon z wersji 1.5.0 do 1.5.1
    • zestawy danych z wersji 4.1.2 do 4.1.3
    • desc z 1.4.0 do 1.4.1
    • fansi z 1.0.2 do 1.0.3
    • klej z 1.6.1 do 1.6.2
    • grafika z wersji 4.1.2 do 4.1.3
    • grDevices z wersji 4.1.2 do 4.1.3
    • siatka z 4.1.2 do 4.1.3
    • knitr z 1.37 do 1.38
    • MASA z 7.3-55 do 7.3-56
    • Macierz z zakresu od 1.4-0 do 1.4-1
    • metody z wersji 4.1.2 do 4.1.3
    • mgcv z 1.8-39 do 1.8-40
    • nlme z 3.1-155 do 3.1-157
    • openssl z 1.4.6 do 2.0.0
    • przejście z wersji 4.1.2 do 4.1.3
    • plyr od 1.8.6 do 1.8.7
    • processx z wersji 3.5.2 do 3.5.3
    • r2d3 z 0.2.5 do 0.2.6
    • Program Rcpp z wersji 1.0.8 do 1.0.8.3
    • rlang z wersji 1.0.1 do 1.0.2
    • rmarkdown z 2.11 do 2.13
    • RSQLite z wersji 2.2.10 do 2.2.11
    • sass z wersji 0.4.0 do 0.4.1
    • splajny od 4.1.2 do 4.1.3
    • statystyki z 4.1.2 do 4.1.3
    • „stats4” z 4.1.2 do 4.1.3
    • tcltk z wersji 4.1.2 do 4.1.3
    • narzędzia z wersji 4.1.2 do 4.1.3
    • Narzędzia z wersji 4.1.2 do 4.1.3
    • uuid z 1.0-3 do 1.0-4
    • waldo od 0.3.1 do 0.4.0
    • withr z 2.4.3 do 2.5.0
    • xfun od 0.29 do 0.30
  • Uaktualnione biblioteki Java:
    • com.h2database.h2 z 1.4.195 do 2.1.210
    • org.apache.hadoop.hadoop-client-api z wersji 3.3.1-databricks do 3.3.2-databricks
    • org.apache.hadoop.hadoop-client-runtime z wersji 3.3.1 do 3.3.2
    • org.rocksdb.rocksdbjni z 6.24.2 do 6.20.3

Apache Spark

Środowisko Databricks Runtime 10.5 zawiera platformę Apache Spark 3.2.1. Ta wersja zawiera wszystkie poprawki i ulepszenia platformy Spark zawarte w środowisku Databricks Runtime 10.4 LTS, a także następujące dodatkowe poprawki błędów i ulepszenia wprowadzone na platformie Spark:

  • [SPARK-38354] [SC-97886] Cofnij „[SQL] Dodaj metrykę sond skrótu dla spojenia skrótu z przetasowaniem”
  • [SPARK-38484] [SAS-103][sas-111][SAS-113][sc-98102][Cherry-Pick] Moduł SQL Instrument PySpark z ogólnym rejestratorem użycia
  • [SPARK-38333] [SQL] Wyrażenie PlanExpression powinno ominąć addExprTree w Executorze
  • [SPARK-38646] [PYTHON][10.x] Wyodrębnianie cechy dla funkcji w Pythonie
  • [SPARK-38674] [PHOTON] Dodaj metrykę do PhotonSubqueryBroadcastExec
  • [SPARK-38787] [SS] Zastąp znalezioną wartość elementem niebędącym nullem na pozostałej liście dla klucza i usuń pozostałe elementy null z wartości w magazynie keyWithIndexToValue dla sprzężeń między strumieniami
  • [SPARK-38446] [Core] Naprawianie zakleszczenia między elementami ExecutorClassLoader i FileDownloadCallback spowodowanymi przez log4j
  • [SPARK-38705] [SQL] Użyj identyfikatora funkcji w poleceniach create i drop function
  • [SPARK-38684] [SS] Naprawiono problem z poprawnością w połączeniu zewnętrznym strumień-strumień za pomocą dostawcy magazynu stanów bazy danych RocksDB
  • [SPARK-38655] [SQL] OffsetWindowFunctionFrameBase Nie można odnaleźć wiersza przesunięcia, którego dane wejściowe nie mają wartości null
  • [SPARK-38204] [SS] Zastosowanie StatefulOpClusteredDistribution dla operatorów stanowych przy zachowaniu zgodności wstecznej
  • [SPARK-38616] [SQL] Monitoruj tekst zapytania SQL w węźle Catalyst TreeNode
  • [SPARK-38600] [SQL] Dołącz unit do ciągu sql elementu TIMESTAMPADD/DIFF
  • [SPARK-34805] [SQL] Propagacja metadanych z kolumn zagnieżdżonych w aliasie
  • [SPARK-38535] [SQL] Dodaj wyliczenie datetimeUnit i użyj go w TIMESTAMPADD/DIFF
  • [SPARK-38415] [SQL] Zaktualizuj typ wyniku histogram_numeric (x, y), aby x był tego samego typu co dane wejściowe
  • [SPARK-38148] [SQL] Nie należy dodawać dynamicznego oczyszczania partycji, jeśli istnieje oczyszczanie partycji statycznej
  • [SPARK-37527] [SQL] Kompilowanie COVAR_POP, COVAR_SAMP i CORR w H2Dialet
  • [SPARK-38510] [SQL] Ponów próbę klasySymbol.selfType, aby obejść odwołania cykliczne
  • [SPARK-38509] [SQL] Wyrejestrowywanie TIMESTAMPADD/DIFF funkcji i usuwanie DATE_ADD/DIFF
  • [SPARK-38504] [SQL] Nie można odczytać timestampNTZ jako timestampLTZ
  • [SPARK-38526] [SQL] Poprawka funkcji o mylącej nazwie aliasu dla RuntimeReplaceable
  • [SPARK-38335] [SQL] Wdrożenie obsługi parsera dla wartości domyślnych kolumn
  • [SPARK-38593] [SS] Przekazywanie metryki dotyczącej liczby porzuconych zdarzeń opóźnionych do SessionWindowStateStoreSaveExec
  • [SPARK-38549] [SS] Dodaj numRowsDroppedByWatermark do SessionWindowStateStoreRestoreExec
  • [SPARK-38583] [SQL] Przywróć zachowanie, to_timestamp które zezwala na typy liczbowe
  • [SPARK-38481] [SQL] Zastąpienie wyjątku przepełnienia w Javie wyjątkiem Spark
  • [SPARK-37753] [SQL] Dostrajanie logiki obniżania sprzężenia skrótu emisji w funkcji DynamicJoinSelection
  • [SPARK-37582] [SPARK-37583][sql] CONTAINS, STARTSWITH, ENDSWITH powinny obsługiwać zarówno typy ciągów znaków, jak i typy binarne
  • [SPARK-38345] [SQL] Wprowadzenie ARRAY_SIZE funkcji SQL
  • [SPARK-38385] [SQL] Ulepszanie komunikatów o błędach pustej instrukcji i <EOF> w funkcji ParseException
  • [SPARK-37614] [SQL] Obsługa funkcji agregującej ANSI: regr_avgx i regr_avgy
  • [SPARK-38560] [SQL] Jeśli Sum, Count, Any towarzyszą odrębnym elementom, nie można wykonać częściowego opuszczenia agregacji.
  • [SPARK-38360] [SQL][ss][PYTHON] Wprowadzenie funkcji exists dla TreeNode w celu wyeliminowania zduplikowanych wzorców kodu
  • [SPARK-38385] [SQL] Ulepszanie komunikatów o błędach przypadków "niedopasowanych danych wejściowych" z ANTLR
  • [SPARK-38240] [SQL] Poprawa RuntimeReplaceable oraz dodanie wytycznych dotyczących dodawania nowych funkcji
  • [SPARK-38542] [SQL] UnsafeHashedRelation powinien serializować numKeys na zewnątrz
  • [SPARK-38521] [SQL] Zmiana partitionOverwriteMode z ciągu na zmienną w języku Scala
  • [SPARK-38558] [SQL] Usuń niepotrzebne rzutowania między IntegerType a IntDecimal
  • [SPARK-38489] [SQL] Funkcja Aggregate.groupOnly obsługuje składane wyrażenia
  • [SPARK-38410] [SQL] Obsługa określania początkowego numeru partycji na potrzeby ponownego równoważenia
  • [SPARK-38107] [SQL] Użyj klas błędów przy kompilacji błędów funkcji użytkownika Python/Pandas
  • [SPARK-38354] [SQL] Dodaj metrykę sondowania skrótu dla sprzężenia skrótu z przemieszaniem
  • [SPARK-38112] [SQL] Użycie klas błędów w błędach wykonania związanych z obsługą daty/czasu
  • [SPARK-38361] [SQL] Dodaj metodę fabryczną do getConnectionJDBCDialect.
  • [SPARK-37865] [SQL] Naprawiono błąd poprawności deduplikacji w złączeniu.
  • [SPARK-38298] [SQL][testy] Naprawa DataExpressionSuite, NullExpressionsSuite, StringExpressionsSuite, complexTypesSuite, CastSuite w trybie ANSI
  • [SPARK-38407] [SQL] Rzutowanie ANSI: złagodzenie ograniczenia rzutowania typów złożonych innych niż null
  • [SPARK-38352] [SQL] Skorygować DataFrameAggregateSuite/DataFrameSetOperationsSuite/DataFrameWindowFunctionsSuite w trybie ANSI
  • [SPARK-38054] [SQL] Obsługuje przestrzenie nazw list w dialektze JDBC v2 MySQL
  • [SPARK-37960] [SQL] Nowa struktura reprezentująca wyrażenia katalizatora w interfejsach API DS w wersji 2
  • [SPARK-38103] [SQL] Migrowanie błędów analizy przekształcenia do nowej struktury błędów
  • [SPARK-38519] [SQL] Wyjątek AQE powinien być zgłaszany z uwzględnieniem wyjątku SparkFatalException
  • [SPARK-38528] [SQL] Chętnie iteruje sekwencję agregacji podczas kompilowania listy projektów w programie ExtractGenerator
  • [SPARK-38320] [SS] Naprawiono limit czasu flatMapGroupsWithState w trybie wsadowym z danymi dla klucza
  • [SPARK-38442] [SQL] Napraw błąd ConstantFoldingSuite/ColumnExpressionSuite/DataFrameSuite/AdaptiveQueryExecSuite w trybie ANSI
  • [SPARK-38268] [SQL] Ukryj pole "failOnError" w metodzie toString metody Abs/CheckOverflow
  • [SPARK-37949] [SQL] Ulepszanie szacowania statystyk ponownego równoważenia
  • [SPARK-38450] [SQL] Poprawa HiveQuerySuite, PushFoldableIntoBranchesSuite, TransposeWindowSuite w trybie ANSI
  • [SPARK-38501] [SQL] Naprawa niepowodzeń testów thriftserver w trybie ANSI
  • [SPARK-37895] [SQL] Filtruj kolumnę wypychaną z kolumnami cytowanymi
  • [SPARK-38449] [SQL] Unikaj wywoływania metody createTable, gdy ignoreIfExists=true i tabela już istnieje
  • [SPARK-38406] [SQL] Zwiększanie wydajności funkcji ShufflePartitionsUtil createSkewPartitionSpecs
  • [SPARK-37947] [SQL] Wyodrębnij generator z wyrażenia GeneratorOuter zawartego przez operator Generate.
  • [SPARK-38309] [CORE] Naprawianie metryk SHS shuffleTotalReads i shuffleTotalBlocks percentylu
  • [SPARK-38412] [SS] Naprawa zamienionej sekwencji od i do w StateSchemaCompatibilityChecker
  • [SPARK-38267] [CORE][sql][SS] Zamień porównania wzorca w wyrażeniach logicznych za pomocą instrukcji warunkowych
  • [SPARK-38104] [SQL] Migrowanie błędów analizowania okna do nowej platformy błędów
  • [SPARK-38434] [SQL] Prawidłowa semantyka metody CheckAnalysis.getDataTypesAreCompatibleFn
  • [SPARK-38033] [SS] Nie można uruchomić przetwarzania usług SS, ponieważ com...
  • [SPARK-38378] [SQL] Refaktoryzacja definicji gramatycznej ANTLR na oddzielne pliki analizatora i leksera
  • [SPARK-37475] [SQL] Dodawanie parametru skalowania do funkcji podłogowych i ceil
  • [SPARK-38411] [CORE] Używanie UTF-8 podczas doMergeApplicationListingInternal odczytywania dzienników zdarzeń
  • [SPARK-36553] [ML] KMeans unika obliczania pomocniczych statystyk w przypadku dużych K
  • [SPARK-38393] [SQL] Usunięcie przestarzałego użycia GenSeq/GenMap
  • [SPARK-38389] [SQL] Dodaj aliasy DATEDIFF() i DATE_DIFF() dla TIMESTAMPDIFF()
  • [SPARK-33206] [CORE][3.2] Napraw kalkulację wagi pamięci podręcznej indeksu shuffle dla małych plików indeksowych
  • [SPARK-38353] [PYTHON] Instrumentacja metod magicznych enter i exit dla interfejsu API biblioteki Pandas na platformie Spark
  • [SPARK-38323] [SQL][streaming] Obsługa ukrytych metadanych plików w strumieniu
  • [SPARK-38138] [SQL] Materializowanie podzapytania queryPlan
  • [SPARK-38094] Włączanie dopasowywania nazw kolumn schematu do identyfikatorów pól
  • [SPARK-37923] [SQL] Generowanie przekształceń partycji dla BucketSpec wewnątrz parsera
  • [SPARK-38363] [SQL] Unikaj błędu w czasie wykonywania w elemencie Dataset.summary()/Dataset.describe(), gdy jest włączony tryb ANSI
  • [SPARK-38284] [SQL] TIMESTAMPDIFF() Dodawanie funkcji
  • [SPARK-38251] [SQL] Zmień ciąg Cast.toString jako "cast" zamiast "ansi_cast" w trybie ANSI
  • [SPARK-38314] [SQL] Poprawka braku odczytu plików parquet po zapisaniu ukrytych metadanych pliku w programie

Zobacz konserwacyjne aktualizacje Databricks Runtime 10.5.

Środowisko systemu

  • System operacyjny: Ubuntu 20.04.4 LTS
  • Java: Zulu 8.56.0.21-CA-linux64
  • Scala: 2.12.14
  • Python: 3.8.10
  • R: 4.1.3
  • Delta Lake: 1.2.1

Zainstalowane biblioteki języka Python

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
Antergos Linux 2015.10 (ISO-Rolling) appdirs 1.4.4 argon2-cffi 20.1.0
asynchroniczny generator 1.10 attrs 20.3.0 If "backcall" is used in a context that requires a translation, a possible Polish equivalent could be "przywołanie zwrotne" to maintain the technical meaning. 0.2.0
bidict 0.21.4 wybielacz 3.3.0 boto3 1.16.7
botocore 1.19.7 certyfikat 2020.12.5 cffi 1.14.5
chardet 4.0.0 rowerzysta 0.10.0 Cython 0.29.23
dbus-python 1.2.16 dekorator 5.0.6 defusedxml 0.7.1
distlib 0.3.4 distro-info 0.23ubuntu1 punkty wejścia 0.3
aspekty — omówienie 1.0.0 blokada plików 3.6.0 idna 2.10
ipykernel 5.3.4 ipython 7.22.0 ipython-genutils 0.2.0
ipywidgets 7.6.3 jedi 0.17.2 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.0.1 jsonschema 3.2.0
jupyter-client 6.1.12 jupyter-core 4.7.1 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 kiwisolver 1.3.1 Koale 1.8.2
MarkupSafe 2.0.1 matplotlib 3.4.2 rozstroić 0.8.4
nbclient 0.5.3 nbconvert 6.0.7 nbformat 5.1.3
nest-asyncio 1.5.1 notatnik 6.3.0 numpy 1.20.1
opakowanie 20.9 Pandas 1.2.4 pandocfilters 1.4.3
parso 0.7.0 ofiara 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 Poduszka 8.2.0 pip 21.0.1
kreślenie 5.6.0 prometheus-client 0.10.1 prompt-toolkit 3.0.17
protobuf 3.17.2 psycopg2 2.8.5 ptyprocess 0.7.0
pyarrow 4.0.0 pycparser 2,20 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 pyrsistent 0.17.3
python-apt 2.0.0+ubuntu0.20.4.7 python-dateutil 2.8.1 Python-engineio 4.3.0
python-socketio 5.4.1 pytz 2020.5 pyzmq 20.0.0
żądania 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 scipy 1.6.2 seaborn 0.11.1
Send2Trash 1.5.0 setuptools 52.0.0 Sześć 1.15.0
ssh-import-id 5.10 statsmodels 0.12.2 Wytrzymałość 8.0.1
zakończony 0.9.4 ścieżka testowa 0.4.4 threadpoolctl 2.1.0
tornado 6.1 traitlets 5.0.5 nienadzorowane uaktualnienia 0.1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
kodowania sieciowe 0.5.1 koło 0.36.2 widgetsnbextension 3.5.1

Zainstalowane biblioteki języka R

Biblioteki języka R są instalowane z migawki Microsoft CRAN z dnia 2022-03-28.

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
askpass 1.1 assertthat 0.2.1 backporty (wsteczne przenoszenie) 1.4.1
baza 4.1.3 base64enc 0.1-3 bit 4.0.4
bit64 4.0.5 bryła 1.2.2 bootowanie 1.3-28
warzyć 1.0-7 Brio 1.1.3 miotła 0.7.12
bslib 0.3.1 cachem 1.0.6 dzwoniący 3.7.0
caret 6.0-91 cellranger 1.1.0 chron 2.3-56
klasa 7.3-20 cli 3.2.0 clipr 0.8.0
klaster 2.1.3 codetools 0.2-18 przestrzeń kolorów 2.0-3
commonmark 1.8.0 — kompilator 4.1.3 konfiguracja 0.3.1
cpp11 0.4.2 kredka 1.5.1 Poświadczenia 1.3.2
skręt 4.3.2 tabela danych 1.14.2 zbiory danych 4.1.3
DBI 1.1.2 dbplyr 2.1.1 Opis 1.4.1
devtools 2.4.3 diffobj 0.3.5 streszczenie 0.6.29
dplyr 1.0.8 dtplyr 1.2.1 e1071 1.7-9
wielokropek 0.3.2 oceniać 0,15 fani 1.0.3
kolory 2.1.0 szybka mapa 1.1.0 fontawesome 0.2.2
forcats 0.5.1 foreach 1.5.2 zagraniczny 0.8-82
kuźnia 0.2.0 fs 1.5.2 przyszłość 1.24.0
future.apply 1.8.1 płukać gardło 1.2.0 Generyczne 0.1.2
Gert 1.5.0 ggplot2 3.3.5 Gh 1.3.0
gitcreds 0.1.1 glmnet 4.1-3 globalna 0.14.0
klej 1.6.2 googledrive 2.0.0 googlesheets4 1.0.0
Gower 1.0.0 grafika 4.1.3 grDevices 4.1.3
siatka 4.1.3 gridExtra 2.3 gsubfn 0,7
gtable 0.3.0 hardhat 0.2.0 przystań 2.4.3
wyższy 0,9 HMS 1.1.1 htmltools 0.5.2
htmlwidgets 1.5.4 httpuv 1.6.5 httr 1.4.2
hwriter 1.3.2 hwriterPlus 1.0-3 Identyfikatory 1.0.1
ini 0.3.1 ipred 0.9-12 isoband 0.2.5
Iteratory 1.0.14 jquerylib 0.1.4 jsonlite 1.8.0
KernSmooth 2.23-20 knitr 1.38 Etykietowanie 0.4.2
później 1.3.0 krata 0.20-45 lawa 1.6.10
cykl życia 1.0.1 nasłuchiwanie 0.8.0 lubridate 1.8.0
magrittr 2.0.2 Markdown 1.1 MASA 7.3-56
Macierz 1.4-1 zapamiętywanie 2.0.1 metody 4.1.3
mgcv 1.8-40 mim 0,12 Metryki modelu 1.2.2.2
modelr 0.1.8 munsell 0.5.0 nlme 3.1-157
nnet 7.3-17 numDeriv 2016.8-1.1 openssl 2.0.0
równoległy 4.1.3 równolegle 1.30.0 filar 1.7.0
pkgbuild 1.3.1 pkgconfig 2.0.3 pkgload 1.2.4
plogr 0.2.0 plyr 1.8.7 pochwała 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.5.3
prodlim 2019.11.13 Postęp 1.2.2 progressr 0.10.0
Obietnice 1.2.0.1 Proto 1.0.0 proxy 0.4-26
PS 1.6.0 purrr 0.3.4 r2d3 0.2.6
R6 2.5.1 randomForest 4.7-1 rappdirs 0.3.3
rcmdcheck 1.4.0 RColorBrewer 1.1-2 Rcpp 1.0.8.3
RcppEigen 0.3.3.9.1 readr 2.1.2 readxl 1.3.1
przepisy 0.2.0 rewanż 1.0.1 rewanż2 2.1.2
Piloty 2.4.2 reprex 2.0.1 zmień kształt2 1.4.4
rlang 1.0.2 rmarkdown 2.13 RODBC 1.3-19
roxygen2 7.1.2 rpart 4.1.16 rprojroot 2.0.2
Rserve 1.8-10 RSQLite 2.2.11 rstudioapi 0,13
rversions 2.1.1 rvest 1.0.2 Sass 0.4.1
wagi 1.1.1 selektor 0.4-2 informacje o sesji 1.2.2
kształt 1.4.6 błyszczący 1.7.1 sourcetools 0.1.7
sparklyr 1.7.5 SparkR 3.2.0 przestrzenny 7.3-11
splajny 4.1.3 sqldf 0.4-11 SQUAREM 2021.1
Statystyki 4.1.3 stats4 4.1.3 stringi 1.7.6
stringr 1.4.0 przetrwanie 3.2-13 sys 3.4
tcltk 4.1.3 Demonstracje nauczania 2.10 testthat 3.1.2
tibble 3.1.6 tidyr 1.2.0 tidyselect 1.1.2
tidyverse 1.3.1 czasData 3043.102 tinytex 0,37
narzędzia 4.1.3 tzdb 0.2.0 użyjtotego 2.1.5
utf8 1.2.2 moduły pomocnicze 4.1.3 uuid 1.0-4
vctrs 0.3.8 viridisLite 0.4.0 Vroom 1.5.7
Waldo 0.4.0 wąs 0,4 withr 2.5.0
xfun 0,30 xml2 1.3.3 xopen 1.0.0
xtable 1.8-4 yaml 2.3.5 zamek 2.2.0

Zainstalowane biblioteki Java i Scala (wersja klastra Scala 2.12)

Identyfikator grupy Identyfikator artefaktu Wersja
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws aws-java-sdk-cloudsearch 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws AWS Java SDK dla Glacier 1.12.189
com.amazonaws aws-java-sdk-glue 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-importexport 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws aws-java-sdk-machinelearning 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws aws-java-sdk-support 1.12.189
com.amazonaws aws-java-sdk-biblioteki-swf 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics strumień 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-cieniowane 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml kolega z klasy 1.3.4
com.fasterxml.jackson.core adnotacje Jackson 2.12.3
com.fasterxml.jackson.core jackson-core 2.12.3
com.fasterxml.jackson.core jackson-databind 2.12.3
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.3
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.3
com.fasterxml.jackson.module jackson-module-paranamer 2.12.3
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.3
com.github.ben-manes.kofeina kofeina 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib rdzeń 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava guawa 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.1.210
com.helger Profilator 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1.0.3
com.sun.istack istack-commons-runtime 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe konfiguracja 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity parsery jednoznaczności 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.2
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib lapack 2.2.1
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift sprężarka powietrza 0.21
io.delta delta-sharing-spark_2.12 0.4.0
io.dropwizard.metrics metryki —rdzeń 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metryki-kontrole zdrowia 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics serwlety metryk 4.1.1
io.netty netty-all 4.1.68.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx kolekcjoner 0.12.0
jakarta.adnotacja jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktywacja 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.10
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
drzewa maven hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine pirolit 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr stringtemplate 3.2.1
org.apache.ant mrówka 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow format strzałki 2.0.0
org.apache.arrow strzałka-pamięć-rdzeń 2.0.0
org.apache.arrow arrow-memory-netty 2.0.0
org.apache.arrow wektor strzałki 2.0.0
org.apache.avro avro 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro-mapred 1.10.2
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator kurator-klient 2.13.0
org.apache.curator struktura kuratora 2.13.0
org.apache.curator przepisy kuratora 2.13.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop API klienta Hadoop 3.3.2-databricks
org.apache.hadoop hadoop-client-runtime 3.3.2
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive podkładki hive 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy bluszcz 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.13
org.apache.orc orc-mapreduce 1.6.13
org.apache.orc podkładki orc-shims 1.6.13
org.apache.parquet parquet-kolumna 1.12.0-databricks-0004
org.apache.parquet parquet-common 1.12.0-databricks-0004
org.apache.parquet kodowanie parquet 1.12.0-databricks-0004
org.apache.parquet struktury formatu Parquet 1.12.0-databricks-0004
org.apache.parquet parquet-hadoop 1.12.0-databricks-0004
org.apache.parquet parquet-jackson 1.12.0-databricks-0004
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus adnotacje odbiorców 0.5.0
org.apache.zookeeper opiekun zwierząt 3.6.2
org.apache.zookeeper jute opiekuna zoo 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.43.v20210629
org.eclipse.jetty jetty-kontynuacja 9.4.43.v20210629
org.eclipse.jetty jetty-http 9.4.43.v20210629
org.eclipse.jetty jetty-io 9.4.43.v20210629
org.eclipse.jetty jetty-jndi 9.4.43.v20210629
org.eclipse.jetty jetty-plus 9.4.43.v20210629
org.eclipse.jetty jetty-proxy 9.4.43.v20210629
org.eclipse.jetty jetty-security 9.4.43.v20210629
org.eclipse.jetty jetty-server 9.4.43.v20210629
org.eclipse.jetty jetty-servlet 9.4.43.v20210629
org.eclipse.jetty jetty-servlets 9.4.43.v20210629
org.eclipse.jetty jetty-util 9.4.43.v20210629
org.eclipse.jetty jetty-util-ajax 9.4.43.v20210629
org.eclipse.jetty jetty-webapp 9.4.43.v20210629
org.eclipse.jetty jetty-xml 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-api 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-klient 9.4.43.v20210629
org.eclipse.jetty.websocket websocket —wspólne 9.4.43.v20210629
org.eclipse.jetty.websocket serwer WebSocket 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-servlet 9.4.43.v20210629
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 lokalizator hk2 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jaxb jaxb-runtime 2.3.2
org.glassfish.jersey.containers jersey-container-servlet 2.34
org.glassfish.jersey.containers jersey-container-servlet-core 2.34
org.glassfish.jersey.core jersey-client 2.34
org.glassfish.jersey.core jersey-common 2.34
org.glassfish.jersey.core jersey-server 2,34
org.glassfish.jersey.inject jersey-hk2 2.34
org.hibernate.validator moduł sprawdzania poprawności hibernacji 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Adnotacje 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap Podkładki 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt interfejs testowy 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark Nieużywane 1.0.0
org.threeten ThreeTen-Extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
Stax stax-api 1.0.1