Informacje o wersji Databricks SQL 2024
Poniżej przedstawiono ulepszenia i aktualizacje w usłudze Databricks SQL od stycznia do grudnia 2024 r.
21 listopada 2024 r.
tabele systemowe usługi SQL Warehouse (publiczna wersja zapoznawcza)
- Tabela
system.compute.warehouses
rejestruje, kiedy magazyny SQL zostały utworzone, edytowane lub usunięte. Tabela umożliwia monitorowanie zmian ustawień magazynu, w tym nazwy magazynu, typu, rozmiaru, kanału, tagów, automatycznego zatrzymywania i automatycznego skalowania. Zobacz odniesienie do tabeli systemu Warehouses .
odnajdywanie danych
- Karta pochodzenia w Eksploratorze Katalogu została przeprojektowana z ulepszonym interfejsem użytkownika do filtrowania jednostek.
13 listopada 2024 r.
starszych pulpitów nawigacyjnych:
- Rozwiązano problem, w wyniku którego szablonowe etykietki narzędzi nie wyświetlały szczegółowej zawartości wykresów z podwójną osią i osią z wieloma polami.
6 listopada 2024 r.
Obsługa harmonogramów czytelnych dla człowieka dla tabel SQL do przesyłania strumieniowego i zmaterializowanych widoków w usłudze Databricks
Użytkownicy mogą teraz uruchamiać, tworzyć i zmieniać harmonogramy dla tabel przesyłania strumieniowego i zmaterializowanych widoków z użyciem łatwo czytelnej składni zamiast planowania CRON. Zobacz ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEWi CREATE STREAMING TABLE.
Tabele przesyłania strumieniowego obsługują teraz zapytania dotyczące podróży w czasie
Teraz możesz użyć podróży czasowej, aby wykonać zapytanie o poprzednie wersje tabeli na podstawie sygnatury czasowej lub wersji tabeli (zgodnie z zapisem w dzienniku transakcji). Może być konieczne odświeżenie tabeli przesyłania strumieniowego przed użyciem zapytań dotyczących podróży czasowych. Zobacz Czym jest funkcja podróży w czasie w Delta Lake?.
Zapytania dotyczące podróży w czasie nie są obsługiwane w przypadku zmaterializowanych widoków.
31 października 2024 r.
Aktualizacje interfejsu użytkownika
nowy edytor SQL (publiczna wersja zapoznawcza)
- Teraz możesz uruchomić aktywne zapytanie SQL przy użyciu skrótu klawiaturowego
Command
(lubCtrl
) +Shift
+Enter
. - Obszar wejściowy parametrów pokazuje teraz pasek przewijania, gdy tekst rozciąga się poza oknem wyświetlania.
- Rozwiązano problem uniemożliwiający otwarcie w pełni strony szczegółów profilu zapytania.
- Teraz możesz zmienić nazwę zapytań, wpisując nową nazwę w tytule karty.
- Przycisk Zaplanuj jest teraz wyłączony dla zapytań, które nigdy wcześniej nie zostały zapisane.
24 października 2024 r.
Informacje o wersji dla narzędzi AI/BI
Informacje o wersji dla pulpitów nawigacyjnych AI/BI i AI/BI Genie zostały przeniesione do informacji o wersji AI/BI. Przyszłe wersje i aktualizacje zostaną tam udokumentowane.
17 października 2024 r.
Miejsca docelowe powiadomień są teraz ogólnie dostępne
Możesz tworzyć i konfigurować miejsca docelowe powiadomień, które użytkownicy obszaru roboczego mogą dodawać do określonych przepływów pracy, takich jak alerty, zadania usługi Databricks i harmonogramy pulpitów nawigacyjnych AI/BI, aby wysyłać wiadomości e-mail lub elementy webhook po uruchomieniu zdarzenia. Zobacz Zarządzanie miejscami docelowymi powiadomień.
10 października 2024 r.
Zmaterializowane widoki i tabele przesyłania strumieniowego są teraz ogólnie dostępne w usłudze Databricks SQL
Tabele przesyłania strumieniowego umożliwiają przyrostowe pobieranie danych z magazynu w chmurze i kolejek komunikatów, podczas gdy zmaterializowane widoki to wstępnie obliczone widoki, które są automatycznie i przyrostowo aktualizowane wraz z napływem nowych danych. Zobacz Używaj materializowanych widoków w Databricks SQL i Ładuj dane przy użyciu tabel strumieniowych w Databricks SQL.
Analiza zapytań
- Nowe kolumny
query_source
,executed_as
iexecuted_as_user_id
zostały dodane do tabeli systemu historii zapytań. Zobacz Odniesienie do tabeli systemowej historii zapytań.
3 października 2024 r.
Rozszerzono obsługę bezserwerowej usługi SQL Warehouse
Bezserwerowe magazyny SQL są teraz dostępne w regionie swedencentral
. Zobacz funkcje , które mają ograniczoną dostępność regionalną.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
Eksplorator wykazu
- Komentarze generowane przez sztuczną inteligencję są teraz obsługiwane w przypadku katalogów, schematów, woluminów, modeli i funkcji, a użytkownicy mogą używać wbudowanego Asystenta czatów, aby ułatwić edytowanie komentarzy.
funkcje sztucznej inteligencji SQL Funkcja vector_search()
jest teraz dostępna w publicznej wersji zapoznawczej. Zobacz funkcję vector_search
26 września 2024 r.
Rozszerzono obsługę bezserwerowej usługi SQL Warehouse
Bezserwerowe magazyny SQL są teraz dostępne w regionie francecentral
. Zobacz funkcje z ograniczoną dostępnością regionalną.
11 września 2024 r.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
Edytor SQL
Teraz możesz użyć nazwanej składni znacznika parametrów w edytorze SQL. Składni znaczników nazwanych parametrów można używać w edytorze SQL, notesach oraz na pulpitach nawigacyjnych AI i analizy biznesowej. Zobacz Pracuj z parametrami zapytania.
Zapytania i starsze pulpity nawigacyjne
W przypadku zapytań SQL i starszych pulpitów nawigacyjnych usunięte elementy nie są już wyświetlane na stronach listy. Znajdź usunięte elementy w koszu obszaru roboczego. Administratorzy obszaru roboczego mogą wyświetlać usunięte elementy we wszystkich folderach kosza użytkowników.
5 września 2024 r.
Zmiany w wersji 2024.40
Usługa Databricks SQL w wersji 2024.40 zawiera następujące zmiany zachowania, nowe funkcje i ulepszenia.
Zmiany zachowania
Zmień na domyślny tryb powiązania schematu dla widoków
Widoki są teraz dostosowywane do zmian schematu w zapytaniu źródłowym przy użyciu kompensacji schematu z regularnymi regułami rzutowania. Stanowi to zmianę w stosunku do wcześniejszego domyślnego trybu
BINDING
, który zgłaszał błędy, gdy nie można było wykonać bezpiecznego rzutowania podczas odwoływania się do widoku.Zobacz CREATE VIEW oraz
cast
w funkcji.Zakazuj używania nieudokumentowanej składni
!
zamiastNOT
poza wyrażeniami boolowskimiW tej wersji użycie
!
jako synonimu dlaNOT
poza wyrażeniami logicznymi nie jest już dozwolone. Na przykład instrukcje, takie jak następujące:CREATE ... IF ! EXISTS
, IS ! NULL, kolumna! NULL
lub właściwość pola,! IN
i ! BETWEEN, należy zastąpić elementami:CREATE ... IF NOT EXISTS
,IS NOT NULL
, kolumnąNOT NULL
lub właściwością pola,NOT IN
iNOT BETWEEN
.Ta zmiana zapewnia spójność, jest zgodna ze standardem SQL i sprawia, że twój program SQL jest bardziej przenośny.
Ta zmiana nie ma wpływu na operator prefiksu logicznego
!
(na przykład!is_mgr
lub!(true AND false)
).Nie zezwalaj na nieudokumentowaną składnię definicji kolumn w widokach
Databricks obsługuje CREATE VIEW z nazwanymi kolumnami i komentarzami do kolumn. Wcześniej dozwolone było określenie typów kolumn, ograniczeń
NOT NULL
lubDEFAULT
. W tej wersji nie można już używać tej składni.Ta zmiana zapewnia spójność, jest zgodna ze standardem SQL i obsługuje przyszłe ulepszenia.
dodanie ograniczenia
CHECK
dla nieprawidłowej kolumny zwraca teraz klasę błędówUNRESOLVED_COLUMN.WITH_SUGGESTION
Aby zapewnić bardziej przydatne komunikaty o błędach, w Databricks Runtime 15.3 i wyżej instrukcja
ALTER TABLE ADD CONSTRAINT
, zawierająca ograniczenieCHECK
odwołujące się do nieprawidłowej nazwy kolumny, generuje błąd w klasie UNRESOLVED_COLUMN.WITH_SUGGESTION. Wcześniej zwróconoINTERNAL_ERROR
.
Nowe funkcje i ulepszenia
włączanie góry lodowej UniForm przy użyciu ALTER TABLE
Teraz możesz włączyć UniForm Iceberg na istniejących tabelach bez ponownego zapisywania plików danych. Zobacz Włączanie odczytów Iceberg w istniejącej tabeli.
funkcji weryfikacji UTF-8
W tej wersji wprowadzono następujące funkcje do sprawdzania poprawności ciągów UTF-8:
- is_valid_utf8 zweryfikował, czy ciąg jest prawidłowym ciągiem UTF-8.
- make_valid_utf8 konwertuje ciąg UTF-8, który może być nieprawidłowy, na prawidłowy ciąg UTF-8 przy użyciu znaków podstawienia
- validate_utf8 zgłasza błąd, jeśli dane wejściowe nie są prawidłowym ciągiem UTF-8.
-
try_validate_utf8 zwraca
NULL
, jeśli dane wejściowe nie są prawidłowym ciągiem UTF-8.
funkcje "to_avro" i "from_avro"
Funkcje to_avro i from_avro umożliwiają konwersję typów SQL na dane binarne Avro i z powrotem.
try_url_decode funkcji
W tej wersji wprowadzono funkcję try_url_decode, która dekoduje ciąg zakodowany w adresie URL. Jeśli ciąg nie ma poprawnego formatu, funkcja zwraca
NULL
zamiast zgłaszać błąd.opcjonalnie zezwala optymalizatorowi na korzystanie z niewymuszonych ograniczeń klucza obcego
Aby zwiększyć wydajność zapytań, można teraz określić słowo kluczowe
RELY
wFOREIGN KEY
ograniczeniach podczas CREATE lub ALTER tabeli.Obsługa usuwania funkcji tabeli ograniczeń sprawdzania
Selektywne nadpisywanie przy użyciu
replaceWhere
teraz uruchamia procesy, które równolegle usuwają dane i wstawiają nowe dane, zwiększając wydajność zapytań i wykorzystanie klastra.równoległe przebiegi zadań dla selektywnego zastępowania
Selektywne zastępowanie przy użyciu
replaceWhere
teraz uruchamia zadania, które równolegle usuwają i wstawiają nowe dane, zwiększając wydajność zapytań i efektywne wykorzystanie klastra.Zwiększona wydajność strumienia danych o zmianach dzięki selektywnemu nadpisywaniu
Selektywne zastępowanie przy użyciu
replaceWhere
w tabelach ze zmianą źródła danych nie zapisuje już oddzielnych plików danych zmian dla wstawionych danych. Te operacje używają ukrytej kolumny_change_type
obecnej w źródłowych plikach danych Parquet do rejestrowania zmian bez wzmacniania zapisu.ulepszone opóźnienie zapytań dla polecenia COPY INTO
Ta wersja zawiera zmianę, która poprawia opóźnienie zapytań dla polecenia
COPY INTO
. To ulepszenie wprowadzono przez asynchroniczne ładowanie stanu przy użyciu magazynu stanów Bazy danych RocksDB. Dzięki tej zmianie powinna być zauważalna poprawa czasu rozpoczęcia zapytań z dużymi zbiorami danych, takich jak zapytania, które mają dużą liczbę już zaimportowanych plików.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
Wizualizacje
- Sumy podpowiedzi są teraz wyświetlane tylko dla łącznych wykresów.
22 sierpnia 2024 r.
Wizualizacje
W przypadku konfiguracji grupowanych i wielopolowych podpowiedzi pokazują teraz sumy przy najechaniu na elementy wykresu.
15 sierpnia 2024 r.
Wizualizacje
Rozwiązano problem polegający na tym, że numery wierszy w wizualizacjach tabeli nie zostały zaktualizowane po zmianie rozmiaru strony.
odnajdywanie danych
Możliwość rozszerzania i zwijania zagnieżdżonych złożonych typów kolumn w tabelach Unity Catalog jest teraz obsługiwana.
1 sierpnia 2024 r.
Wizualizacje:
- Sortowanie tabel jest teraz zachowywane, gdy dane zmieniają się z powodu filtrowania.
edytor SQL:
- Zwiększona czytelność przez dodanie dodatkowego wypełnienia między ostatnim wierszem zapytania a danymi wyjściowymi wyniku.
25 lipca 2024 r.
Databricks API REST:
- Interfejsy API do zarządzania zapytaniami, alertami, źródłami danych i uprawnieniami uległy zmianie. Starsza wersja będzie nadal obsługiwana przez sześć miesięcy. Ten okres przejściowy ma na celu zapewnienie wystarczającego czasu na migrowanie aplikacji i integracji do nowej wersji, zanim starsza wersja zostanie wycofana. Zobacz Update to the latest Databricks SQL API version (Aktualizacja do najnowszej wersji interfejsu API SQL usługi Databricks)
18 lipca 2024 r.
Aktualizacje interfejsu użytkownika
eksplorator katalogu :
- Nowy kreator konfiguracji katalogu jest dostępny do ustawiania powiązań obszaru roboczego, uprawnień katalogu i metadanych podczas tworzenia katalogu.
Monitorowanie SQL Warehouse:
- Uprawnienie CAN MONITOR jest teraz ogólnie dostępne. Umożliwia uprzywilejowanym użytkownikom monitorowanie magazynów SQL, w tym skojarzonej historii zapytań i profilów zapytań. Zobacz uprawnienia ACL magazynu SQL.
11 lipca 2024 r.
Usługa Databricks SQL w wersji 2024.35 jest dostępna
harmonogram wdrożenia: wydanie wersji próbnej 2024.35 w dniach od 9 lipca do 15 lipca
Zmiany w 2024.35
Wyłącz mapowanie kolumn przy użyciu funkcji usuwania
Teraz możesz użyć DROP FEATURE
, aby wyłączyć mapowanie kolumn w tabelach delty i obniżyć protokół tabeli. Zobacz Wyłącz mapowanie kolumn.
Składnia typów wariantów i funkcje w publicznej wersji zapoznawczej
Wbudowana obsługa Apache Spark do pracy z danymi częściowo ustrukturyzowanymi jako typ VARIANT
jest teraz dostępna w ramkach danych Spark i w języku SQL. Zobacz dane wariantu zapytania .
Obsługa typu zmiennego dla Delta Lake w publicznej wersji zapoznawczej
Teraz można użyć VARIANT
do przechowywania częściowo ustrukturyzowanych danych w tabelach wspieranych przez usługę Delta Lake. Zapoznaj się z obsługą wariantów w systemie Delta Lake.
Obsługa różnych trybów ewolucji schematu w widokach
CREATE VIEW i ALTER VIEW teraz umożliwiają ustawienie trybu wiązań schematu, ulepszając sposób, w jaki widoki obsługują zmiany schematu w obiektach bazowych. Ta funkcja umożliwia widokom tolerowanie lub dostosowywanie się do zmian schematu w obiektach bazowych. Adresuje on zmiany w schemacie zapytania wynikające z modyfikacji definicji obiektów.
Poprawa wydajności niektórych funkcji okna
Ta wersja zawiera zmianę, która poprawia wydajność niektórych funkcji okna platformy Spark, w szczególności funkcji, które nie zawierają klauzuli ORDER BY
ani parametru window_frame
. W takich przypadkach system może ponownie napisać zapytanie, aby uruchomić je przy użyciu funkcji agregującej. Ta zmiana umożliwia szybsze wykonanie zapytania dzięki użyciu częściowej agregacji i unikaniu narzutu związanego z uruchamianiem funkcji okienkowych. Parametr konfiguracji platformy Spark spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
kontroluje tę optymalizację i jest domyślnie ustawiony na true
. Aby wyłączyć tę optymalizację, ustaw spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
na wartość false
.
Dodano obsługę funkcji try_mod
W tej wersji dodano obsługę funkcji PySpark try_mod()
. Ta funkcja obsługuje obliczenia zgodne ze standardem ANSI SQL pozostałej liczby całkowitej przez podzielenie dwóch wartości liczbowych. Jeśli argument dzielnika wynosi 0, funkcja try_mod()
zwraca wartość null zamiast zgłaszać wyjątek. Można użyć funkcji try_mod()
zamiast mod
lub %
, która zgłasza wyjątek, jeśli argument dzielnika to 0, a usługa ANSI SQL jest włączona.
Aktualizacje interfejsu użytkownika
edytor SQL:
Asystent wbudowany jest teraz dostępny w edytorze SQL. Kliknij ikonę asystenta w polu edytora, aby zmienić dane wejściowe. Wpisz pytanie lub komentarz w języku angielskim, a następnie naciśnij Enter (a nie Shift+Enter, który uruchamia zapytanie), aby wygenerować odpowiedź z innym widokiem bezpośrednio w edytorze.
Platform:
Interfejs API dla miejsc docelowych powiadomień jest teraz dostępny. Teraz można zarządzać za pomocą programowania elementami webhook oraz adresami e-mail dla alertów i powiadomień uruchamiania zadania. Zobacz cele powiadomień.
4 lipca 2024 r.
Usługa Databricks SQL w wersji 2024.30 jest dostępna
harmonogram wdrażania : wersja zapoznawcza na rok 2024.30: od 9 lipca do 15 lipca
Zmiany w wersji 2024.30
Federacja lakehouse jest ogólnie dostępna (GA)
Łączniki federacyjne usługi Lakehouse w następujących typach baz danych są teraz ogólnie dostępne (ogólna dostępność):
- MySQL
- PostgreSQL
- Amazon Redshift
- Płatek śniegu
- Microsoft SQL Server
- Azure Synapse (SQL Data Warehouse)
- Databricks
W tej wersji wprowadzono również następujące ulepszenia:
- Obsługa uwierzytelniania jednokrotnego logowania (SSO) w łącznikach Snowflake i Microsoft SQL Server.
- Obsługa Azure Private Link w łączniku SQL Server z środowisk obliczeniowych bezserwerowych. Zobacz Krok 3. Tworzenie reguł prywatnego punktu końcowego.
- Obsługa dodatkowych przetwarzań (ciągi znaków, funkcje matematyczne, inne funkcje).
- Ulepszony współczynnik skuteczności optymalizacji zapytań w różnych formach ich zapisu.
- Dodatkowe możliwości debugowania wypychania:
- Dane wyjściowe
EXPLAIN FORMATTED
wyświetla wypchnięty tekst zapytania. - Interfejs użytkownika profilu zapytania wyświetla tekst zapytania obniżonego, identyfikatory węzłów federacyjnych i czas wykonywania zapytań JDBC (w trybie szczegółowym). Zobacz Wyświetl wygenerowane przez system zapytania federacyjne.
- Dane wyjściowe
DESCRIBE HISTORY
teraz pokazuje kolumny klastrowania dla tabel korzystających z klastrowania płynnego
Po uruchomieniu zapytania DESCRIBE HISTORY
kolumna operationParameters
domyślnie wyświetla pole clusterBy
dla operacji CREATE OR REPLACE
i OPTIMIZE
. W przypadku tabeli delty korzystającej z klastrowania płynnego pole clusterBy
jest wypełniane kolumnami klastrowania tabeli. Jeśli tabela nie używa klastrowania płynnego, pole jest puste.
Obsługa kluczy podstawowych i obcych jest ogólnie dostępna
Obsługa kluczy podstawowych i obcych w środowisku Databricks Runtime jest ogólnie dostępna. Wersja ogólnie dostępna zawiera następujące zmiany uprawnień wymaganych do używania kluczy podstawowych i obcych:
- Aby zdefiniować klucz obcy, musisz mieć uprawnienia
SELECT
w tabeli z kluczem podstawowym, do którego odwołuje się klucz obcy. Nie musisz posiadać tabeli z kluczem podstawowym, którego wymóg wcześniej obowiązywał. - Usunięcie klucza podstawowego przy użyciu klauzuli
CASCADE
nie wymaga uprawnień w tabelach, które definiują klucze obce odwołujące się do klucza podstawowego. Wcześniej trzeba było posiadać tabele referencyjne. - Usunięcie tabeli zawierającej ograniczenia wymaga teraz tych samych uprawnień, co porzucanie tabel, które nie zawierają ograniczeń.
Aby dowiedzieć się, jak używać kluczy podstawowych i obcych z tabelami lub widokami, zobacz klauzula CONSTRAINT, klauzula ADD CONSTRAINT, i klauzula DROP CONSTRAINT.
Klastrowanie cieczy jest ogólnie dostępne
Obsługa klastrowania liquid jest już powszechnie dostępna przy użyciu środowiska Databricks Runtime 15.2 lub nowszego. Zobacz Użyj grupowania typu liquid dla tabel Delta.
Rozszerzanie typu jest w publicznej wersji próbnej
Teraz można włączyć rozszerzanie typów w tabelach wspieranych przez usługę Delta Lake. Tabele z włączonym rozszerzaniem typu umożliwiają zmianę typu kolumn na szerszy typ danych bez ponownego zapisywania bazowych plików danych. Zobacz Rozszerzanie typu.
Klauzula ewolucji schematu dodana do składni scalania SQL
Teraz możesz dodać klauzulę WITH SCHEMA EVOLUTION
do instrukcji scalania SQL, aby umożliwić ewolucję schematu dla operacji. Zobacz Składnia ewolucji schematu, aby scalić.
Obsługa inwentaryzacji próżniowej
Teraz można określić spis plików do rozważenia podczas uruchamiania polecenia VACUUM
w tabeli delty. Zobacz dokumentację 'OSS Delta' .
Obsługa funkcji kompresji Zstandard
Teraz możesz użyć funkcji zst_compress, zstd_decompressi try_zstd_decompress do kompresowania i dekompresowania danych BINARY
.
Plany zapytań w SQL UI są teraz poprawnie wyświetlane jako PhotonWriteStage
.
Podczas wyświetlania w interfejsie użytkownika SQL, polecenia write
w planach zapytań były niepoprawnie pokazywane jako operator PhotonWriteStage
. W tej wersji interfejs użytkownika jest aktualizowany w celu wyświetlania PhotonWriteStage
jako etapu. Jest to tylko zmiana interfejsu użytkownika i nie ma wpływu na sposób uruchamiania zapytań.
Aktualizacje interfejsu użytkownika
Obsługa interfejsu API
- Teraz można zarządzać miejscami docelowymi powiadomień przy użyciu interfejsu API REST. Zobacz lokalizacje docelowe powiadomień .
27 czerwca 2024 r.
Filtry wierszy i maski kolumn w zmaterializowanych widokach SQL i tabelach przesyłania strumieniowego w usłudze Databricks SQL są w publicznej wersji zapoznawczej.
Filtry wierszy i maski kolumn w zmaterializowanych widokach i tabelach przesyłania strumieniowego w Databricks SQL są w publicznej wersji zapoznawczej. Wersja publiczna w wersji zapoznawczej zawiera następujące zmiany:
Można dodawać filtry wierszy i maski kolumn do zmaterializowanego widoku SQL Databricks lub tabeli strumieniowej SQL Databricks.
- Możesz zdefiniować zmaterializowane widoki SQL usługi Databricks lub tabele przesyłania strumieniowego na bazie tabel zawierających filtry wierszy i maski kolumn.
Aktualizacje interfejsu użytkownika
Wizualizacje:
- Ulepszona interakcyjność przy wyświetlaniu etykiet narzędziowych po najechaniu kursorem na wykresy kołowe, rozrzutu i cieplne z wieloma punktami danych.
Eksplorator Katalogów:
- Odnowiony interfejs użytkownika Eksploratora wykazu ułatwia odnajdywanie i oznaczanie jako ulubione ostatnich zasobów w Unity Catalog z widoku Szybki dostęp . Środowisko nawigacji zostało również uproszczone, co pozwala na eksplorowanie zasobów obliczeniowych, magazynu, poświadczeń, połączeń, systemu plików DBFS i szczegółów zarządzania przy użyciu ikony ustawienia
Ustawienia w lewym górnym rogu ekranu. Delta Sharing, Clean Rooms i dane zewnętrzne mają teraz osobne strony.
6 czerwca 2024 r.
Poprawka dla Databricks SQL dotycząca zmaterializowanych widoków i tabel przesyłania strumieniowego
Problem powodujący, że zapytania ALTER SCHEDULE
dotyczące zmaterializowanych widoków i tabel przesyłania strumieniowego SQL w usłudze Databricks zaczęły obowiązywać dopiero po wykonaniu następnej operacji REFRESH, został naprawiony. Teraz zapytania ALTER SCHEDULE
są stosowane natychmiast. Zobacz Harmonogram zmaterializowanych odświeżeń widoku.
Zmaterializowane widoki i tabele przesyłania strumieniowego w usłudze Databricks SQL to publiczna wersja zapoznawcza
Zmaterializowane widoki i tabele przesyłania strumieniowego w usłudze Databricks SQL to publiczna wersja zapoznawcza i dostępna dla wszystkich klientów. Publiczna wersja zapoznawcza zawiera następujące zmiany:
REFRESH
widoków materializowanych i tabel strumieniowych w usłudze Databricks SQL są teraz synchronizowane domyślnie. Zobacz REFRESH (MATERIALIZED VIEW lub STREAMING TABLE).- Błędy występujące podczas operacji odświeżania zmaterializowanego widoku SQL lub tabeli przesyłania strumieniowego usługi Databricks są zwracane w edytorze SQL.
Aby dowiedzieć się, jak używać zmaterializowanych widoków i tabel przesyłania strumieniowego w usłudze Databricks SQL, zobacz Użyj zmaterializowanych widoków w Databricks SQL oraz Załaduj dane przy użyciu tabel przesyłania strumieniowego w Databricks SQL.
Aktualizacje interfejsu użytkownika
Pulpity nawigacyjne:
- Użytkownicy konta mogą teraz pobierać dane wizualizacji z opublikowanych pulpitów nawigacyjnych
- Nieopublikowane pulpity nawigacyjne można teraz publikować przy użyciu listy rozwijanej Draft/Publish w górnej części pulpitu nawigacyjnego.
- Rozwiązano problem polegający na tym, że nie wykryto parametrów o nazwie limit .
Wizualizacje:
- Ulepszone renderowanie wykresu pudełkowego w trybie ciemnym.
Analiza zapytań:
- W przypadku wszystkich notesów dołączonych do usługi SQL Warehouse można uzyskać dostęp do profilu zapytania, klikając pozycję Zobacz wydajność w komórce zawierającej zapytanie. Jeśli komórka zawiera wiele zapytań, zostanie podany link do profilu zapytania dla każdej instrukcji.
30 maja 2024 r.
Nowy poziom uprawnień dla magazynów SQL
Może monitorować uprawnienia umożliwia użytkownikom monitorowanie magazynów SQL, w tym skojarzonej historii zapytań i profilów zapytań. Uprawnienie Może monitorować jest teraz dostępne w wersji zapoznawczej publicznej . Zobacz listy ACL magazynu SQL.
Aktualizacje interfejsu użytkownika
Ulepszenia pulpitu nawigacyjnego :
- Dodano menu kebab do widżetów pulpitu nawigacyjnego na potrzeby pobierania obrazów i danych.
- Użytkownicy mogą migrować starsze parametry pulpitu nawigacyjnego oparte na zapytaniach i parametry listy rozwijanej do pulpitów nawigacyjnych.
23 maja 2024 r.
Aktualizacje interfejsu użytkownika
- Teraz możesz wybrać wiele elementów w obszarze roboczym, aby przenieść lub usunąć. Po wybraniu wielu obiektów zostanie wyświetlony pasek akcji i udostępnia opcje przenoszenia lub usuwania elementów. Ponadto możesz wybrać wiele elementów przy użyciu myszy i przeciągnąć je do nowej lokalizacji. Istniejące uprawnienia do obiektów są nadal stosowane podczas operacji przenoszenia zbiorczego i usuwania.
- Możesz teraz oznaczyć zasoby Unity Catalog jako ulubione w Eksploratorze Katalogu i Przeglądarce Schematów. Obejmuje to wykazy, schematy, tabele, modele, woluminy i funkcje. Zasoby Unity Catalog oznaczone jako ulubione są łatwo dostępne ze strony głównej Azure Databricks.
aktualizacje pulpitu nawigacyjnego:
- Wykresy kombi z dwiema osiami teraz prawidłowo wyświetlają legendy słupków na prawej osi i legendach linii odpowiednio.
- Wykresy dwuosiowe teraz poprawnie pokazują etykiety na słupkach.
aktualizacje wizualizacji :
- Etykiety formatu warunkowego edytora tabel dla teraz obsługują tryb ciemny, jeśli i , to.
- Nadmiarowy otwórz link ikona została usunięta z etykietek narzędzi formatu edytora tabel.
- W edytorze tabel etykieta domyślnego koloru czcionki wyrównuje się automatycznie.
16 maja 2024 r.
harmonogram wdrażania
- Wprowadzenie wersji zapoznawczej 2024.25: Ukończono 1 maja
- Obecny plan wdrożenia na rok 2024.25: od 14 maja do 21 maja
Notatka
Aktualizacja biblioteki panda dla języka Python (w wersji 2.0.3) spowodowała zmianę powodującą niezgodność w usłudze Databricks SQL w wersji 2024.20. Usługa Azure Databricks nie wprowadziła wersji 2024.20 do bieżącego kanału. Zamiast tego kanał wersji zapoznawczej został uaktualniony do wersji 2024.25 w dniu 1 maja 2025 r. Bieżące wdrożenie kanału odbywa się bezpośrednio od 2024.15 do 2024.25.
zmiany w 2024.25 r.
Nadzór nad danymi
Przekazywanie poświadczeń oraz kontrole dostępu do tabel w metastore Hive zostały zaniechane.
Przekazywanie poświadczeń i kontrole dostępu do tabel magazynu metadanych Hive są starszymi modelami nadzoru nad danymi. Uaktualnij do Unity Catalog, aby uprościć zabezpieczenia i zarządzanie danymi, zapewniając centralne miejsce do zarządzania i audytu dostępu do danych w wielu obszarach roboczych na twoim koncie. Zobacz Co jest katalogiem Unity?.
Obsługa przekazywania poświadczeń i kontroli dostępu do tabel magazynu metadanych Hive zostanie usunięta w nadchodzącej wersji DBR.
Funkcje języka SQL
klauzula * (gwiazda) jest teraz obsługiwana w klauzuli WHERE.
Teraz możesz użyć klauzuli star (*
) w klauzuli WHERE
, aby odwołać się do wszystkich kolumn z listy SELECT
.
Na przykład SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*)
.
Obsługa magazynu Cloudflare R2 w celu uniknięcia opłat za ruch wychodzący między regionami od 2024.15
Teraz możesz użyć usługi Cloudflare R2 jako przechowalni w chmurze dla danych zarejestrowanych w Unity Catalog. Rozwiązanie Cloudflare R2 jest przeznaczone głównie dla przypadków użycia funkcji Delta Sharing, w których chcesz uniknąć opłat za ruch wychodzący danych pobieranych przez dostawców usług w chmurze, gdy dane przejdą między regionami.
Magazyn Cloudflare R2 obsługuje wszystkie zasoby danych i sztucznej inteligencji Databricks, które są obsługiwane w usłudze Azure Data Lake Storage Gen2.
Zobacz Użyj replik Cloudflare R2 lub zmigruj dane do R2 oraz Utwórz poświadczenie do przechowywania w celu połączenia z Cloudflare R2.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
Aktualizacje odnajdywania danych: Kreator aktualizacji magazynu metadanych Hive do Unity Catalog obsługuje uaktualnianie tabel zarządzanych magazynu metadanych Hive przy użyciu obliczeń ogólnego przeznaczenia lub magazynów SQL. Aktualizacja więcej niż 20 tabel tworzy nowy notatnik zawierający polecenia SYNC
i ALTER TABLE
do wykonania konwersji.
Aktualizacje pulpitu nawigacyjnego :
- Funkcje podwójnej osi są teraz dostępne dla typów wykresów obszarowych, kolumnowych, liniowych i rozrzutu.
- Po włączeniu wykresu z podwójną osią tytuł osi i zakres nie są już kopiowane do osi pomocniczej.
- Ostatnie pole zidentyfikowane w konfiguracji wizualizacji jest automatycznie przenoszone do prawej osi y.
9 maja 2024 r.
Edytor SQL naprawia:
- Ustawienie administratora funkcje schowka tabeli Wyników teraz dotyczy nowej tabeli wyników edytora SQL.
Ulepszenia pulpitu nawigacyjnego :
- Parametry oparte na zapytaniach umożliwiają autorom zdefiniowanie listy wybranych wartości, których osoby przeglądające mogą używać jako parametrów dla innych wizualizacji na kanwie pulpitu nawigacyjnego. Zobacz Używaj parametrów opartych na zapytaniach.
- Kolejność kolumn w plikach pobranych z widżetu tabeli jest teraz zachowywana.
- Edytor tabel zawiera teraz etykietki narzędzi aktywowania, które wyświetlają nazwy kolumn.
- Podczas przełączania z innych typów wizualizacji na histogram kodowanie informacji jest teraz lepiej zachowywane.
Naprawy dashboardu:
- Rozwiązano problem polegający na tym, że jeden filtr wysokości siatki wyświetlał niepotrzebny nadmiarowy pasek przewijania.
- Rozwiązano problem powodujący niepoprawne renderowanie wizualizacji na opublikowanych dashboardach, gdy usunięto odwoływaną kolumnę zestawu danych.
2 maja 2024 r.
aktualizacje pulpitu nawigacyjnego:
- Zapytania i wizualizacje można teraz skopiować do nowego pulpitu nawigacyjnego z edytora SQL. Nadal można dodawać wizualizacje do starszych pulpitów nawigacyjnych z poziomu edytora SQL. Zobacz Edytowanie, pobieranie lub dodawanie do pulpitu nawigacyjnego.
- Pulpity nawigacyjne będą teraz obsługiwać 24-godzinną pamięć podręczną wyników w celu zoptymalizowania początkowych czasów ładowania. Zobacz Optymalizacja i buforowanie zestawów danych.
- Wykresy słupkowe o osi X z wartościami kategorycznymi i osi Y z wartościami ilościowymi są teraz sortowane w odpowiedziach asystenta Databricks.
- Rozwiązano problem z migracją ze starszej wersji histogramu
COUNT (*)
, aby zapewnić jej dokładność. - Zaimplementowano możliwość łączenia typów liczbowych i typów dat w widżecie filtru.
- Podczas tworzenia wykresów asystent usługi Databricks automatycznie sugeruje odpowiednie kolumny podczas wpisywania.
Aktualizacje wizualizacji:
- Wybrany przez użytkownika kolor tabel jest teraz utrwalany w trybach jasnych i ciemnych na starszych wykresach.
- Ulepszono logikę obcinania danych w celu zwiększenia wydajności wykresów kombi, kołowych, cieplnych i histogramowych.
- Znacznik jest teraz zawsze wyświetlany na górze osi wartości na podstawowych wykresach.
23 kwietnia 2024 r.
aktualizacje interfejsu użytkownika :
- Dla wszystkich okien dialogowych w interfejsie użytkownika, grupa
All Users
została przemianowana naAll Workspace Users
. Nowa nazwa dokładniej odzwierciedla zakres grupy, która zawsze zawierała użytkowników przypisanych do obszaru roboczego. Nie wprowadzono żadnych zmian w członkostwie w grupie w ramach tej zmiany nazwy.
Ulepszenia pulpitu nawigacyjnego :
- Gdy usługa SQL Warehouse pulpitu nawigacyjnego jest uruchamiana, zostanie wyświetlone okno dialogowe objaśnienia czasu oczekiwania.
- Pozycja przewijania jest zachowywana podczas przełączania między kartami kanwy i dane.
- Klonowanie starszego pulpitu nawigacyjnego w celu utworzenia pulpitu nawigacyjnego Lakeview obsługuje teraz pewną konwersję parametrów. Zobacz Dostosowywanie starszych parametrów.
- Daty względne, jak na przykład Today, Tomorrowi 7 dni temu, są teraz obsługiwane dla parametrów daty i czasu.
- Suwaki zakresu liczb można dodawać jako filtry na pulpicie nawigacyjnym.
- Histogramy mogą teraz wyświetlać rozagregowane dane.
- Wykresy punktowe obsługują teraz kodowanie wielkości.
Poprawki w panelu kontrolnym:
- Kodowanie kolorów czasowych może teraz poprawnie zmieniać przypisania kolorów.
Aktualizacje wizualizacji:
- Niestandardowe formaty list narzędzi działają teraz poprawnie dla wykresów wieloosiowych.
- Znacznik Nowe wykresy podglądu jest usuwany, gdy użytkownicy nie zmienili przełącznika w ciągu ostatnich 14 dni.
18 kwietnia 2024 r.
Pulpity nawigacyjne usługi Lakeview są ogólnie dostępne
Dashboardy Lakeview są teraz domyślnym narzędziem do tworzenia pulpitów nawigacyjnych. Zmieniono ich nazwę na pulpity nawigacyjne w interfejsie użytkownika. Pulpity SQL w Databricks są teraz nazywane Legacy dashboards. Nazwy powiązanych narzędzi interfejsu API nie uległy zmianie.
- Ulepszenia pulpitu nawigacyjnego :
- Dzienniki audytu są dostępne dla dashboardów Lakeview. Zobacz zdarzenia pulpitu nawigacyjnego AI/BI.
- Dane pobierane z pulpitów nawigacyjnych są zgodne z zastosowanymi parametrami.
- Asystent usługi Databricks jest włączony na karcie Data bez wcześniejszego dodawania zestawów danych.
- Skumulowane wykresy słupkowe z wieloma polami Y mogą obsługiwać sortowanie osi X na podstawie sumy wartości osi Y.
- Przełącz między funkcjami skalowania Linear a Log (Symetryczne) w menu osi wizualizacji.
- Domyślny rozmiar widżetu filtru jest teraz bardziej kompaktowy.
- Czas początkowego ładowania widżetu filtru wprowadzania tekstu został skrócony.
- Ulepszono automatyczne konwersje wykresów podczas migracji ze starszych pulpitów nawigacyjnych.
-
Poprawki w Dashboardzie:
- Ostrzeżenie o ustawieniach wyświetlania z ograniczeniami nie jest wyświetlane, jeśli pulpit nawigacyjny został udostępniony innym osobom.
- Komunikaty o błędach w karcie "Dane" edytora SQL teraz obsługują tryb ciemny.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
Ulepszenia :
- Podpowiedzi na wykresach słupkowych teraz domyślnie wyświetlają wartość całkowitą i wartość procentową.
- Podpowiedzi dla wykresów wieloosiowych teraz podświetlają element, nad którym najechano.
- wizualizacje tabel dla usługi Databricks SQL teraz dostosowują typ danych nowego wyniku zapytania podczas edycji w edytorze SQL.
- W tabeli historii zapytań Eksploratora wykazu przedstawiono widok podobny do drzewa dla autorstwa źródła zapytań. Można użyć tego, aby zobaczyć, które jednostki wywołały wykonanie zapytania.
11 kwietnia 2024 r.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
Ulepszenia :
- Teraz możesz grupować według wartości procentowej podczas tworzenia wizualizacji w usłudze Databricks SQL i notesach.
- W przypadku nowych wykresów (w publicznej wersji zapoznawczej) można powiększyć jedną oś, klikając i przeciągając prostą linię równoległą do osi.
- Interfejs użytkownika klastru Unity Catalog Allowlist jest teraz ogólnie dostępny. Dostęp do niego można uzyskać na stronie szczegółów Metastore w Eksploratorze Katalogu. Zobacz Jak dodać elementy do listy dozwolonych.
- Formularze do tworzenia i edytowania lokalizacji zewnętrznych są teraz otwierane jako pełna strona. Obejmują one opcję dołączenia poświadczeń przechowywania.
poprawki:
- Rozwiązano problem dotyczący wykresów Histogramu, w którym wartości ujemne zostały błędnie oznaczone jako dodatnie.
4 kwietnia 2024 r.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
Ulepszenia :
- Ulepszenia wykresów histogramu na pulpitach nawigacyjnych Lakeview.
- Dodano obsługę etykiet.
- Ustawienia pojemnika są teraz zachowywane podczas przełączania między różnymi polami.
- Galeria próbek na stronie listy pulpitu nawigacyjnego teraz tworzy pulpity nawigacyjne Lakeview. Zobacz samouczek : korzystanie z przykładowych dashboardów.
- Kliknięcie prawym przyciskiem myszy obramowania widżetu na pulpicie nawigacyjnym usługi Lakeview powoduje otwarcie menu kontekstowego.
- Pasek nawigacyjny po lewej stronie jest zachowywany dla użytkowników obszaru roboczego wyświetlających opublikowane pulpity nawigacyjne Lakeview.
- Opcje filtrów są zachowywane podczas nawigowania między opublikowanymi i roboczymi pulpitami nawigacyjnymi usługi Lakeview.
- Nazwy kolumn można teraz wstawić do edytora SQL podczas edytowania zapytania z karty Dane w wersji roboczej pulpitu nawigacyjnego usługi Lakeview.
- Zastąpienie pulpitu nawigacyjnego usługi Lakeview powoduje zachowanie istniejącej nazwy pulpitu nawigacyjnego i zastąpienie zawartości.
- Przełączanie wizualizacji między mapami cieplnymi a innymi typami wykresów teraz skuteczniej zachowuje odpowiednie pola.
Poprawki:
- Wykresy słupkowe z kodowaniem kolorów teraz poprawnie ograniczają dodawanie wielu pól osi Y.
- Rozwiązano problem polegający na tym, że w niektórych wizualizacjach brakuje przycisku Pobierz jako plik PNG.
- Poprawiono formatowanie dla ujemnych dużych liczb całkowitych, którym wcześniej brakowało tysięcy separatorów.
- Naprawiono nieprawidłowe umiejscowienie linii podświetlenia przy najeżdżaniu kursorem na etykiety na wykresach liniowych.
28 marca 2024 r.
Usługa Databricks SQL w wersji 2024.15 jest dostępna
Harmonogram wdrażania
- Wdrożenie wersji zapoznawczej 2024.15: od 14 lutego do 4 marca
- Bieżące wdrożenie na rok 2024.15: Od 25 marca do 8 kwietnia
zmiany w wersji 2024.15
Aktualizacje różnicowe
- funkcja Delta UniForm jest teraz ogólnie dostępna: Aplikacja UniForm jest teraz ogólnie dostępna i używa funkcji tabeli IcebergCompatV2. Teraz można włączyć lub uaktualnić aplikację UniForm w istniejących tabelach. Zobacz Odczytywanie tabel Delta za pomocą klientów Iceberg.
- Przelicz statystyki pomijania danych dla tabel Delta: można teraz ponownie przeliczyć statystyki przechowywane w dzienniku Delta po zmianie kolumn używanych do pomijania danych. Zobacz Określanie kolumn statystyk różnicowych.
Aktualizacje języka SQL
- Deklarowanie zmiennych tymczasowych w sesji SQL: W tej wersji wprowadzono możliwość deklarowania zmiennych tymczasowych w sesji, którą można ustawić, a następnie odwoływać się z w zapytaniach. Zobacz zmienne .
-
obsługa natywnego formatu pliku XML (publiczna wersja zapoznawcza): obsługa natywnego formatu pliku XML jest teraz dostępna w publicznej wersji zapoznawczej. Obsługa formatu pliku XML umożliwia pozyskiwanie, wykonywanie zapytań i analizowanie danych XML na potrzeby przetwarzania wsadowego lub przesyłania strumieniowego. Może automatycznie wnioskować i rozwijać schemat i typy danych, obsługuje wyrażenia SQL, takie jak
from_xml
, i mogą generować dokumenty XML. Nie wymaga on zewnętrznych plików JAR i bezproblemowo współpracuje z modułem automatycznego ładowania,read_files
,COPY INTO
i DLT. Zobacz Odczytywanie i zapisywanie plików XML.
Aktualizacje usługi Apache Spark SQL
Usługa Databricks SQL 2024.15 obejmuje platformę Apache Spark 3.5.0. Dodatkowe poprawki błędów i ulepszenia bazy danych SQL są wyświetlane w uwagach o wersji środowiska Databricks Runtime 14.3. Zobacz Apache Spark i poszukaj tagu [SQL]
, aby uzyskać pełną listę.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
- Nowa zakładka przeglądu na stronie jednostki Eksploratora Katalogu zawiera ważne metadane, takie jak rozmiar pliku, źródło danych, właściciel, schemat tabeli i komentarze.
- Aktualizacje dla pulpitu nawigacyjnego Lakeview :
- Pulpity nawigacyjne usługi Lakeview obsługują teraz parametry. Autorzy mogą dodawać parametry do zapytań dotyczących zestawów danych z karty Dane, a następnie ustawiać parametry na kanwie przy użyciu selektorów pojedynczej wartości i selektorów dat. Zobacz Praca z parametrami pulpitu nawigacyjnego.
- Pulpity nawigacyjne usługi Lakeview są teraz obsługiwane w interfejsie API uprawnień obszaru roboczego. Zobacz PATCH /api/workspace/workspace/updatepermissions w dokumentacji interfejsu API REST.
- Widżety kontrolne na kanwie zostały przemianowane na widżety filtru.
- Wykresy kombi nie zezwalają już na rozagregowane pola na osi x.
- Przycisk Kopiuj link w oknie dialogowym udostępniania zawiera teraz parametry przechowywane w adresie URL.
- Widżety na opublikowanych pulpitach nawigacyjnych nie pokazują już obramowań po najechaniu myszą.
- Rozwiązano problem polegający na tym, że przyciski Databricks Assistant i Download PNG nakładają się na wizualizacje wykresu.
- Przełączanie wizualizacji między mapami cieplnymi i innymi typami wykresów teraz lepiej zachowuje odpowiednie pola.
- Wykresy słupkowe z kodowaniem kolorów teraz poprawnie ograniczają dodawanie wielu pól osi Y.
21 marca 2024 r.
- Linia pochodzenia modelu w Unity Catalog jest teraz w wersji publicznej zapoznawczej.
Widok tabeli w Eksploratorze katalogu teraz ma kartę Przegląd opisującą jego podstawowe metadane.
- Magazyny SQL dla notesów, które są teraz ogólnie dostępne, umożliwiają korzystanie z w pełni zarządzanych, błyskawicznych i skalowalnych obliczeń dla obciążeń SQL w rozbudowanym, wspólnym środowisku tworzenia notesu. Zobacz Użyj notatnika z magazynem SQL.
Następujące poprawki i ulepszenia dotyczą pulpitów usług Lakeview:
- Rozszerzona obsługa interfejsu API dla Lakeview dodaje możliwość tworzenia, uzyskiwania, aktualizowania i usuwania pulpitów nawigacyjnych. Zobacz Lakeview w dokumentacji API REST.
- Dodano przycisk odświeżania przeglądarki katalogu na karcie danych.
- Pulpity nawigacyjne usługi Lakeview są teraz wyświetlane przed Pulpity nawigacyjne w menu Nowy na pasku bocznym obszaru roboczego. Na stronie listy kokpitów karta "Lakeview" jest widoczna po lewej stronie karty "Kokpity" .
- Środowisko Asystenta usługi Databricks dla usługi Lakeview zostało zaktualizowane za pomocą pola wejściowego i sugestii w celu zwiększenia możliwości odnajdywania i ułatwienia użytkownikom zrozumienia monitów, które mogą stanowić.
- Wizualizacje usługi Lakeview obsługują teraz agregacje mediany.
- Zaktualizowano selektor kolorów w edytorze wizualizacji pulpitu nawigacyjnego usługi Lakeview, aby usprawnić środowisko użytkownika podczas tworzenia tabel.
- Ulepszona migracja wykresu kołowego w celu obsługi wyłącznie scenariuszy z definicjami kątów lub kolorów.
- Usunięto usterkę uniemożliwiającą grupowanie według wykresów o nazwie count. Wykresy można teraz grupować według pól o nazwie count.
- W przypadku wykresów słupkowych kontrolki układu grupowania i stosu są teraz ukryte, gdy nie są stosowne dla konfiguracji wybranej przez użytkownika.
14 marca 2024 r.
Dla pulpitów nawigacyjnych Lakeview:
- Histogramy obsługują teraz niestandardowe kolory dla kategorii.
- Mapy cieplne teraz obsługują skale ilościowe.
- Tytuły i opisy są zachowywane podczas przełączania między typami wizualizacji, w tym wykresami kombi.
- Teraz możesz otworzyć bazowy zestaw danych skojarzony z widżetem roboczym pulpitu nawigacyjnego, klikając go prawym przyciskiem myszy. Zestaw danych otwiera się na karcie danych .
- Nowe wykresy teraz stosują aliasy i kolory niestandardowe dla wartości null w kolumnach liczbowych.
- Nowe wykresy renderują znaczniki, aby ukazać górną część osi y.
7 marca 2024 r.
- Podczas wyświetlania tabeli w Eksploratorze wykazu przycisk Utwórz zawiera opcję utworzenia pulpitu nawigacyjnego usługi Lakeview zamiast pulpitu nawigacyjnego SQL usługi Databricks.
- Histogramy są teraz dostępne dla pulpitów Lakeview. Histogramy są często używane do wizualizowania rozkładu pola liczbowego.
- Podczas klonowania pulpitu SQL usługi Databricks w celu utworzenia pulpitu usługi Lakeview, problemy z konwersją zestawu danych pojawiają się teraz jako błędy w nowym widżecie na pulpicie Lakeview.
- Gradienty kolorów są dostępne, gdy pole liczbowe jest używane do wizualizacji na pulpicie nawigacyjnym usługi Lakeview.
- Gradienty kolorów są teraz widoczne w edytorze wizualizacji pulpitu nawigacyjnego Lakeview, gdy określono pole do kolorowania.
- Tytuł i opis skojarzony z wizualizacją nie są już widoczne do edycji, jeśli osoba przeglądająca nie ma uprawnień do edycji na pulpicie nawigacyjnym wersji roboczej usługi Lakeview.
- Rozwiązano problem polegający na tym, że etykietki narzędzi na wykresach z ponad 100 seriami niepoprawnie pokazywały wszystkie serie. Teraz jest pokazywana tylko seria skoncentrowana.
- Zmniejszenie opóźnienia wpisywania w edytorze SQL o 30% dzięki optymalizacjom wydajności.
- Podczas zarządzania zapytaniami w edytorze SQL przeniesienie zapytania do kosza powoduje automatyczne zamknięcie zakładki.
- Rozwiązano problem w edytorze SQL, który polegał na tym, że tekst został przypadkowo wybrany podczas dostosowywania szerokości panelu bocznego.
29 lutego 2024 r.
- Przeglądarka schematu w Eksploratorze Katalogu wyświetla teraz ograniczenia w kolumnach kluczowych podstawowych i obcych.
- Okres przechowywania wyświetlany na karcie Pochodzenie w Eksploratorze katalogu został zwiększony do jednego roku.
- Podpowiedzi na nowych wykresach w notatnikach są teraz zawsze wyświetlane wewnątrz granicy wizualizacji.
- Dowiedz się, jak programowo zarządzać pulpitami nawigacyjnymi usługi Lakeview przy użyciu interfejsu API REST. Zobacz Zarządzanie panelami sterowania za pomocą interfejsów API Workspaces.
- Pulpity nawigacyjne usługi Lakeview obsługują teraz histogramy.
- Ulepszone udostępnianie i publikowanie w pulpitach nawigacyjnych Lakeview:
- Ulepszone okna dialogowe udostępniania i publikowania, dzięki czemu można bezpiecznie i łatwo udostępniać dowolnemu użytkownikowi konta.
- Pulpity nawigacyjne otwierane w przeglądarce obszaru roboczego pokazują opublikowany pulpit nawigacyjny, jeśli istnieje. Osoby przeglądające mogą teraz również zobaczyć szczegóły najnowszej opublikowanej wersji, w tym wydawcę, czas i poświadczenia.
- W przypadku edytorów nowy przełącznik listy rozwijanej w interfejsie użytkownika pulpitu nawigacyjnego usługi Lakeview umożliwia szybkie przechodzenie między wersjami roboczymi i opublikowanymi.
Feburary 22, 2024
- Ulepszenia karty Przykładowych Danych w widoku tabeli Eksploratora Katalogu umożliwiają sortowanie kolumn, kopiowanie wybranych danych do schowka oraz wyświetlanie numerów wierszy. Teraz można lepiej wyświetlać wartości specjalne, takie jak obiekty JSON, daty, wartości liczbowe i null.
- Pulpity nawigacyjne usługi Lakeview obsługują teraz wysyłanie okresowych migawek plików PDF pulpitu nawigacyjnego do użytkowników obszaru roboczego i miejsc docelowych powiadomień. Zobacz Harmonogramy i subskrypcje.
- Lista opcji wizualizacji w selektorze listy rozwijanej Lakeview jest teraz sortowana alfabetycznie.
- Podczas kopiowania pulpitów nawigacyjnych SQL usługi Databricks do pulpitów nawigacyjnych usługi Lakeview widżety, których nie można teraz przekonwertować, pokazują selektor konfiguracji wizualizacji zamiast komunikatu o błędzie.
15 lutego 2024 r.
- Dokumentacja filtrów zapytań opartych na kodzie, takich jak
SELECT action AS 'action::filter'
, została usunięta. Usługa Databricks zaleca aktualizowanie zapytań w celu usunięcia tego wzorca.
- W przypadku pulpitów nawigacyjnych usługi Lakeview wykresy kołowe wyświetlają teraz wycinki o równym rozmiarze, gdy nie określono pola kąta.
- Usługa Lakeview obsługuje teraz wykresy kombi, które łączą wykresy słupkowe i liniowe, aby pokazać dwie różne wartości na tym samym wykresie.
- Wykresy mapy cieplnej, które używają intensywności kolorów, aby pokazać wielkość korelacji między dwiema zmiennymi dyskretnymi, są teraz dostępne w usłudze Lakeview.
8 lutego 2024 r.
- Teraz możesz zażądać dostępu podczas otwierania linku do pulpitu nawigacyjnego usługi Lakeview, na którym nie masz uprawnień.
- Filtry pulpitu nawigacyjnego usługi Lakeview mają teraz jawne opcje Wszystkie i Brak. Autorzy mogą ukryć opcję Wszystkie w filtrach pojedynczego wyboru.
- Teraz można ustawić wartości minimalne i maksymalne dla osi na wykresach pulpitu nawigacyjnego usługi Lakeview.
1 lutego 2024 r.
Usługa Databricks SQL w wersji 2024.10 jest dostępna
Harmonogram wdrażania
- Wprowadzenie wersji zapoznawczej 2024.10: między 30 stycznia 2024 r. i 5 lutego 2024 r.
- Bieżące wdrożenie na 2024.10: Od 13 lutego 2023 r. do 20 lutego 2024 r.
zmiany w wersji 2024.10
-
Naprawiono uszkodzoną obsługę plików w poleceniach DML: polecenia DML
DELETE
,UPDATE
iMERGE INTO
nie są już zgodne z opcjami odczytuignoreCorruptFiles
iignoreMissingFiles
. W przypadku napotkania nieczytelnego pliku w tabeli te polecenia kończą się teraz niepowodzeniem, nawet jeśli określono te opcje. - pl-PL: Współbieżność na poziomie wiersza jest dostępna ogólnie i domyślnie włączona: Współbieżność na poziomie wiersza zmniejsza konflikty pomiędzy współbieżnymi operacjami zapisu, wykrywając zmiany na poziomie wiersza. Współbieżność na poziomie wiersza jest obsługiwana tylko w tabelach bez partycjonowania, w tym tabele z klastrowaniem płynnym. W tabelach Delta, z włączonymi wektorami usuwania, współbieżność na poziomie wiersza jest domyślnie aktywowana. Zobacz Konflikty zapisu z współbieżnością na poziomie wiersza.
- Płytkie klonowanie zewnętrznych tabel Unity Catalog (publiczna wersja zapoznawcza): Teraz można używać płytkiego klonowania z zewnętrznymi tabelami Unity Catalog. Zobacz Płytkie klonowanie tabel wykazu aparatu Unity.
-
Szybsze zbieranie statystyk wielowątkowy: zbieranie statystyk jest do 10 razy szybsze w przypadku małych klastrów podczas uruchamiania
CONVERT TO DELTA
lub klonowania z tabel Iceberg i Parquet. Zobacz Przekształcanie do Delta Lake oraz Stopniowe klonowanie tabel Parquet i Iceberg do Delta Lake. - filtry wypychania w usłudze DeltaSource w plikach delty: Aby uzyskać lepsze wykorzystanie, filtry partycji w zapytaniach przesyłanych strumieniowo tabel delty są teraz wypychane do funkcji Delta przed ograniczeniem szybkości.
Aktualizacje interfejsu użytkownika
Funkcje wymienione w tej sekcji są niezależne od wersji obliczeniowych usługi SQL Warehouse opisanych powyżej.
- Usunięto kartę z widoku administratora na stronach listowania obiektów usługi Databricks SQL (zapytań, pulpitów nawigacyjnych i alertów). Administratorzy obszaru roboczego mogą wyświetlać wszystkie obiekty na odpowiednich stronach z listami. Zobacz Access i zarządzaj zapisanymi zapytaniami, starszych pulpitów nawigacyjnychi Co to są alerty SQL usługi Databricks?.
- Na stronie historii zapytań domyślnie są wyświetlane zapytania z ostatnich 24 godzin. Proszę spojrzeć na historię zapytań.
- Opcja menu "Klonuj do pulpitu nawigacyjnego Lakeview"została dodana do interfejsu użytkownika pulpitu nawigacyjnego Databricks SQL. To narzędzie umożliwia utworzenie nowego pulpitu nawigacyjnego usługi Lakeview zawierającego te same zapytania i wizualizacje na istniejących pulpitach nawigacyjnych SQL usługi Databricks. Zobacz Sklonuj starszy pulpit nawigacyjny do pulpitu nawigacyjnego AI/BI.
- Wykresy słupkowe na kokpitach usługi Lakeview obsługują układanie w stosy w celu normalizacji do wartości 100%.
- Rozwiązano problem polegający na tym, że powiększanie opublikowanego pulpitu nawigacyjnego usługi Lakeview powodowało skupienie się na nieprawidłowych interwałach powiększenia.
24 stycznia 2024 r.
- Kanwa pulpitu nawigacyjnego usługi Lakeview automatycznie dostosowuje położenie widżetu, aby usunąć puste pionowe odstępy między wierszami, gdy jest to możliwe.
- Zmniejszenie odstępu między tekstem tytułu i opisu w wizualizacjach pulpitu nawigacyjnego usługi Lakeview.
18 stycznia 2024 r.
- Rozwiązano problem z renderowaniem wizualizacji polegający na tym, że wykresy słupkowe pokazujące jedną datę na osi x powodowały bardzo cienki pasek. Nowe wizualizacje wykresów są renderowane zgodnie z oczekiwaniami.
- Na stronie z listą pulpitów nawigacyjnych Lakeview domyślnie widoczne są twoje pulpity. Filtry na tej stronie umożliwiają dostęp do pulpitów nawigacyjnych usługi Lakeview należących do innych użytkowników obszaru roboczego.
11 stycznia 2024 r.
- Interfejsy API zapytań Databricks SQL i pulpitów nawigacyjnych obsługują programową zmianę ustawienia roli Uruchom jako .
- Usługa Lakeview obsługuje eksportowanie i importowanie pulpitów nawigacyjnych jako plików w celu ułatwienia odtwarzania wersji roboczych pulpitów nawigacyjnych w obszarach roboczych. Zobacz Eksportowanie, importowanie lub zastępowanie pulpitu nawigacyjnego
4 stycznia 2024 r.
- Wprowadzono diagramy relacji między kluczem podstawowym i kluczem obcym w Eksploratorze wykazu. Zobacz Wyświetl diagram relacji jednostki.