Poznámky k verzi SQL pro Databricks 2024
Následující informace popisují vylepšení a aktualizace v Databricks SQL od ledna do prosince 2024.
21. listopadu 2024
SQL Warehouse systémových tabulek (Public Preview)
- Tabulka
system.compute.warehouses
zaznamenává, kdy jsou datové sklady SQL vytvořeny, upraveny a smazány. Pomocí tabulky můžete monitorovat změny nastavení skladu, včetně názvu skladu, typu, velikosti, kanálu, značek, automatického zastavení a automatického škálování. Viz referenční tabulku systému Warehouses podle odkazu.
zjišťování dat
- Karta Rodokmen v Průzkumníku katalogů byla přepracovaná s vylepšeným uživatelským rozhraním pro filtrování entit.
13. listopadu 2024
Zastaralé řídicí panely:
- Vyřešili jsme problém, kdy se popisy šablon nezobrazovaly podrobný obsah pro grafy os s duální osou a více polí.
6. listopadu 2024
podpora pro plány srozumitelné lidem pro streamované tabulky a materializovaná zobrazení Databricks SQL
Uživatelé nyní mohou spouštět, vytvářet a měnit rozvrhy pro streamingové tabulky a materializovaná zobrazení pomocí snadno čitelné syntaxe namísto plánování s CRON. Viz ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEWa CREATE STREAMING TABLE.
Streamované tabulky teď podporují dotazy na časové cestování.
Nyní můžete použít časové cestování k dotazování předchozích verzí tabulek na základě časového razítka nebo verze tabulky (jak je zaznamenáno v transakčním protokolu). Před použitím dotazů na časovou cestu možná budete muset aktualizovat streamovací tabulku. Podívejte se na Co je časová cesta Delta Lake?.
Dotazy na časovou cestu nejsou podporovány pro materializovaná zobrazení.
31. října 2024
Aktualizace uživatelského rozhraní
nový editor SQL (Public Preview)
- Nyní můžete spustit aktivní dotaz SQL pomocí klávesové zkratky
Command
(neboCtrl
) +Shift
+Enter
. - Vstupní oblast parametrů teď zobrazuje posuvník, když se text rozšíří mimo okno zobrazení.
- Opravili jsme problém, který bránil úplnému otevření stránky podrobností profilu dotazu.
- Dotazy teď můžete přejmenovat zadáním nového názvu do záhlaví karty.
- Tlačítko Plán je nyní zakázáno pro dotazy, které nikdy předtím nebyly uloženy.
24. října 2024
Poznámky k verzi pro nástroje AI/BI
Poznámky k vydání pro řídicí panely AI/BI a AI/BI Genie se přesunuly do poznámek k vydání AI/BI. Budoucí verze a aktualizace tam budou zdokumentovány.
17. října 2024
Cíle oznámení jsou teď obecně dostupné.
Můžete vytvářet a konfigurovat cíle oznámení, které můžou uživatelé pracovního prostoru přidávat do určitých pracovních postupů, jako jsou upozornění, úlohy Databricks a plány řídicích panelů AI/BI, a odesílat e-maily nebo webhooky při spuštění události. Viz Správa cílů oznámení.
10. října 2024
Materializovaná zobrazení a streamované tabulky jsou teď obecně dostupné v Databricks SQL.
Streamované tabulky umožňují přírůstkový příjem dat z cloudového úložiště a front zpráv, zatímco materializovaná zobrazení jsou předem vypočítaná zobrazení, která se automaticky a přírůstkově aktualizují při příchodu nových dat. Viz Použití materializovaných zobrazení v Databricks SQL a Načtení dat pomocí streamovaných tabulek v Databricks SQL.
Přehledy dotazů
- Nové sloupce
query_source
,executed_as
aexecuted_as_user_id
byly přidány do systémové tabulky historie dotazů. Viz odkaz na systémovou tabulku historie dotazů.
3. října 2024
Rozšířená podpora bezserverového SQL Warehouse
Bezserverové sklady SQL jsou teď dostupné v swedencentral
oblasti. Viz funkce s omezenou regionální dostupností.
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
Průzkumník katalogu
- Komentáře generované AI jsou nyní podporovány pro katalogy, schémata, svazky, modely a funkce a uživatelé mohou používat integrovaného chatovacího asistenta k úpravě svých komentářů.
funkce SQL AI Funkce vector_search()
je nyní dostupná ve verzi Public Preview. Viz vector_search
funkce
26. září 2024
Rozšířená podpora bezserverového SQL Warehouse
Bezserverové sklady SQL jsou teď dostupné v francecentral
oblasti. Viz funkce s omezenou regionální dostupností.
11. září 2024
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
SQL editor
V editoru SQL teď můžete použít syntaxi značek pojmenovaných parametrů. Syntaxi pojmenovaných značek parametrů je možné použít v editoru SQL, poznámkových blocích a řídicích panelech AI/BI. Viz Práce s parametry dotazu.
dotazy a starší řídicí panely
U dotazů SQL a starších řídicích panelů se odstraněné položky už na stránkách výpisu nezobrazují. Vyhledejte odstraněné položky ve složce koše pracovního prostoru. Správci pracovního prostoru můžou zobrazit odstraněné položky ve složkách koše všech uživatelů.
5. září 2024
změny v roce 2024.40
Databricks SQL verze 2024.40 obsahuje následující změny chování, nové funkce a vylepšení.
Změny chování
Změnit na výchozí režim vazby schématu pro zobrazení
Zobrazení se nyní přizpůsobují změnám schématu v základním dotazu pomocí kompenzace schématu běžnými pravidly přetypování. Jedná se o změnu oproti předchozímu výchozímu nastavení režimu
BINDING
, která způsobovala chyby v případě, že při odkazování na zobrazení nebylo možné provést bezpečné přetypování.Viz CREATE VIEW a
cast
, funkce.zakázat použití nezdokumentované syntaxe
!
místoNOT
mimo logické výrazyV této verzi už není povolené použití
!
jako synonyma proNOT
mimo logické výrazy. Například příkazy jako:CREATE ... IF ! EXISTS
, IS ! NULL,! NULL
sloupec nebo vlastnost pole,! IN
a ! BETWEENmusí být nahrazeny:CREATE ... IF NOT EXISTS
,IS NOT NULL
,NOT NULL
sloupcem nebo vlastností pole,NOT IN
aNOT BETWEEN
.Tato změna zajišťuje konzistenci, odpovídá standardu SQL a usnadňuje přenosnost SQL.
Změna nemá vliv na booleovský předponový operátor
!
(například!is_mgr
nebo!(true AND false)
).Zakázat syntaxi definice nedokumentovaného sloupce v zobrazeních
Databricks podporuje funkci CREATE VIEW s pojmenovanými sloupci a komentáři sloupců. Dříve byla povolena specifikace typů sloupců, omezení
NOT NULL
neboDEFAULT
. V této verzi už tuto syntaxi nemůžete použít.Tato změna zajišťuje konzistenci, odpovídá standardu SQL a podporuje budoucí vylepšení.
Přidání omezení
CHECK
u neplatného sloupce teď vrátí chybu třídyUNRESOLVED_COLUMN.WITH_SUGGESTION
Aby byly chybové zprávy užitečnější, vrátí se v Databricks Runtime 15.3 a vyšší příkaz
ALTER TABLE ADD CONSTRAINT
, který obsahuje omezeníCHECK
odkazující na neplatný název sloupce, chybu třídy UNRESOLVED_COLUMN.WITH_SUGGESTION. Dříve byl vrácenINTERNAL_ERROR
.
Nové funkce a vylepšení
Povolte UniForm Iceberg pomocí ALTER TABLE
UniForm Iceberg teď můžete povolit u existujících tabulek bez přepsání datových souborů. Viz Povolit čtení pomocí Iceberg na existující tabulce.
Ověřovací funkce UTF-8
Tato verze zavádí následující funkce pro ověřování řetězců UTF-8:
- is_valid_utf8 ověřovalo, jestli je řetězec platným řetězcem UTF-8.
- make_valid_utf8 převede potenciálně neplatný řetězec UTF-8 na platný řetězec UTF-8 pomocí náhradních znaků.
- validate_utf8 vyvolá chybu, pokud vstup není platným řetězcem UTF-8.
-
try_validate_utf8 vrátí
NULL
, pokud vstup není platným řetězcem UTF-8.
funkce to_avro a from_avro
Funkce to_avro a from_avro umožňují převod typů SQL na binární data Avro a zpět.
funkce try_url_decode
Tato verze představuje funkci try_url_decode, která dekóduje řetězec kódovaný adresou URL. Pokud řetězec není ve správném formátu, vrátí funkce místo vyvolání chyby
NULL
.Volitelně umožnit optimalizátoru spoléhat se na nevynucená omezení cizího klíče
Pokud chcete zlepšit výkon dotazů, můžete nyní u omezení
FOREIGN KEY
zadat klíčové slovoRELY
při vytváření (CREATE) nebo upravování (ALTER) tabulky.Podpora odstranění funkce tabulky kontrolních omezení
Selektivní přepsání pomocí
replaceWhere
teď spouští úlohy, které odstraňují data a vkládají nová data paralelně, což zlepšuje výkon dotazů a využití clusteru.Paralelizované běhy úloh pro selektivní přepsání
Selektivní přepsání pomocí
replaceWhere
teď spouští úlohy, které odstraňují data a vkládají nová data paralelně, což zlepšuje výkon dotazů a využití clusteru.vylepšený výkon záznamu změn dat se selektivním přepisem
Selektivní přepsání pomocí
replaceWhere
u tabulek s datovým kanálem změn už pro vložená data nezapisuje samostatné datové soubory změn. Tyto operace používají skrytý sloupec_change_type
v podkladových datových souborech Parquet k zaznamenávání změn bez amplifikace zápisu.vylepšená latence dotazů pro příkaz COPY INTO
Tato verze zahrnuje změnu, která zlepšuje latenci dotazu pro příkaz
COPY INTO
. Toto vylepšení je implementováno tak, že načtení stavu úložištěm stavů RocksDB je asynchronní. Při této změně byste měli vidět vylepšení počátečních časů pro dotazy s velkými stavy, jako jsou dotazy s velkým počtem již přijatých souborů.
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
vizualizace
- Nyní se součty zobrazují pouze pro skládané grafy.
22. srpna 2024
vizualizace
U seskupených a vícepoložkových konfigurací nyní bubliny nápovědy ukazují součty, když přejedete myší přes prvky grafu.
15. srpna 2024
vizualizace
Opravili jsme problém, kdy se po změně velikosti stránky neaktualizují čísla řádků ve vizualizacích tabulek.
zjišťování dat
Možnost rozbalení a sbalení vnořených složitých typů sloupců v tabulkách katalogu Unity je teď podporovaná.
1. srpna 2024
Vizualizace:
- Řazení tabulek se teď zachová, když se data změní kvůli filtrování.
editoru SQL:
- Zvýšení čitelnosti přidáním dalšího odsazení mezi poslední řádek dotazu a výstupem výsledku.
25. července 2024
rozhraní REST APIDatabricks:
- Rozhraní API pro správu dotazů, výstrah, zdrojů dat a oprávnění se změnilo. Starší verze bude nadále podporována po dobu šesti měsíců. Toto přechodné období vám poskytne dostatek času na migraci aplikací a integrací do nové verze před ukončením starší verze. Viz Aktualizace na nejnovější verzi rozhraní SQL API služby Databricks
18. července 2024
Aktualizace uživatelského rozhraní
Průzkumník katalogu:
- Při vytváření katalogu je teď k dispozici nový průvodce konfigurací katalogu pro nastavení vazeb pracovního prostoru, oprávnění katalogu a metadat.
monitorování služby SQL Warehouse:
- Oprávnění CAN MONITOR je nyní obecně dostupné. Umožňuje privilegovaným uživatelům monitorovat SQL sklady, včetně historie a profilů přidružených dotazů. Viz seznamů ACL služby SQL Warehouse.
11. července 2024
Databricks SQL verze 2024.35 k dispozici
plán uvedení: Uvedení verze Preview pro verzi 2024.35: Od 9. července do 15. července
změny v roce 2024.35
Zakázání mapování sloupců pomocí funkce drop
Teď můžete pomocí DROP FEATURE
zakázat mapování sloupců u tabulek Delta a downgradovat protokol tabulky. Viz Zakázání mapování sloupců.
Syntaxe a funkce variantního typu ve veřejné náhledové verzi
Integrovaná podpora Apache Sparku pro práci s částečně strukturovanými daty jako typ VARIANT
je teď dostupná v datových rámcích Sparku a SQL. Viz variantní data dotazu.
Podpora typů variant pro Delta Lake ve verzi Public Preview
Nyní můžete použít VARIANT
k ukládání částečně strukturovaných dat do tabulek podporovaných Delta Lake. Podívejte se na podporu variant v Delta Lake.
Podpora různých režimů vývoje schématu v zobrazeních
CREATE VIEW a ALTER VIEW teď umožňují nastavit režim vazby schématu a vylepšit způsob zpracování změn schématu v podkladových objektech. Tato funkce umožňuje zobrazení tolerovat nebo přizpůsobit změny schématu v podkladových objektech. Řeší změny ve schématu dotazu, které jsou výsledkem úprav definic objektů.
Vylepšení výkonu některých funkcí oken
Tato verze zahrnuje změnu, která zlepšuje výkon některých funkcí okna Sparku, konkrétně funkce, které neobsahují klauzuli ORDER BY
nebo parametr window_frame
. V těchto případech může systém přepsat dotaz, aby ho spustil pomocí agregační funkce. Tato změna umožňuje, aby dotaz běžel rychleji díky částečné agregaci a vyhnul se režijním nákladům spojeným se spouštěním okenních funkcí. Parametr konfigurace Sparku spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
tuto optimalizaci řídí a je ve výchozím nastavení nastavený na true
. Pokud chcete tuto optimalizaci vypnout, nastavte spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
na false
.
Podpora přidané funkce try_mod
Tato verze přidává podporu pro funkci PySpark try_mod()
. Tato funkce podporuje výpočet celočíselného zbytku kompatibilní s ANSI SQL tak, že vydělí dvě číselné hodnoty. Pokud je argument dělitele 0, vrátí funkce try_mod()
hodnotu null místo vyvolání výjimky. Funkci try_mod()
můžete použít místo mod
nebo %
, která vyvolá výjimku, pokud je argument dělitele 0 a je povolený ANSI SQL.
Aktualizace uživatelského rozhraní
editoru SQL:
Vložený asistent je nyní k dispozici v editoru SQL. Kliknutím na ikonu asistenta v poli editoru přepněte vstup. Zadejte dotaz nebo komentář v angličtině a stiskněte Enter (ne Shift+Enter, který spouští dotaz) a vygenerujte odpověď s jiným zobrazením přímo v editoru.
platforma:
Rozhraní API pro cílová místa pro oznámení je nyní k dispozici. Webhooky a e-mailové cíle nyní můžete spravovat programově pro upozornění a oznámení o spuštění úloh. Viz Cíle oznámení.
4. července 2024
Databricks SQL verze 2024.30 k dispozici
plánu uvedení: Uvedení verze Preview pro verzi 2024.30: Od 9. července do 15. července
změny v roce 2024.30
Federace Lakehouse je obecně dostupná (GA)
konektory Lakehouse Federation napříč následujícími typy databází jsou nyní obecně dostupné (GA):
- MySQL
- PostgreSQL
- Amazon Redshift
- Sněhová vločka
- Microsoft SQL Server
- Azure Synapse (SQL Data Warehouse)
- Databricks
Tato verze také přináší následující vylepšení:
- Podpora ověřování jednotného přihlašování (SSO) v konektorech Snowflake a microsoft SQL Server.
- Podpora služby Azure Private Link v konektoru SQL Serveru z bezserverových výpočetních prostředí Podívejte se na krok 3: Vytvoření pravidla pro privátní koncový bod.
- Podpora dalších rozšířených funkcí (řetězcové, matematické a různé funkce).
- Vylepšená míra úspěšnosti pushdown pro různé tvary dotazů.
- Další možnosti ladění pushdown:
- Výstup
EXPLAIN FORMATTED
zobrazuje text dotazu ve stavu "pushed-down". - V uživatelském rozhraní profilu dotazu se zobrazí text dotazu v režimu "pushed-down", identifikátory federovaných uzlů a časy provádění dotazů JDBC (v detailním režimu). Viz Zobrazení systémem generovaných federovaných dotazů.
- Výstup
DESCRIBE HISTORY
nyní zobrazuje klastrovací sloupce pro tabulky, které používají tekuté klastrování
Když spustíte dotaz DESCRIBE HISTORY
, ve sloupci operationParameters
se ve výchozím nastavení zobrazí pole clusterBy
pro operace CREATE OR REPLACE
a OPTIMIZE
. Pro tabulku Delta, která používá liquid clustering, je pole clusterBy
vyplněno klastrovacími sloupci tabulky. Pokud tabulka nepoužívá shlukování kapalin, pole je prázdné.
Podpora primárních a cizích klíčů je obecně dostupná
Podpora primárních a cizích klíčů v Databricks Runtime je obecně dostupná. Verze GA obsahuje následující změny oprávnění vyžadovaných k používání primárních a cizích klíčů:
- Pokud chcete definovat cizí klíč, musíte mít oprávnění
SELECT
na tabulce s primárním klíčem, na který cizí klíč odkazuje. Nemusíte vlastnit tabulku s primárním klíčem, což bylo dříve požadováno. - Vyřazení primárního klíče pomocí klauzule
CASCADE
nevyžaduje oprávnění k tabulkám definujícím cizí klíče, které odkazují na primární klíč. Dříve jste museli vlastnit odkazující tabulky. - Vyřazení tabulky, která obsahuje omezení, teď vyžaduje stejná oprávnění jako vyřazení tabulek, které neobsahují omezení.
Informace o použití primárních a cizích klíčů s tabulkami nebo zobrazeními najdete v tématu CONSTRAINT klauzule, ADD CONSTRAINT klauzulea DROP CONSTRAINT klauzule.
Liquid clustering je GA.
Podpora liquid clusterování je nyní obecně dostupná pro Databricks Runtime verze 15.2 a vyšší. Viz Použijte clustering liquid pro tabulky Delta.
Rozšíření typu je ve verzi Public Preview.
U tabulek založených na Delta Lake teď můžete povolit rozšíření typu. Tabulky s rozšířeným typem umožňují změnit typ sloupců na širší datový typ bez přepsání podkladových datových souborů. Viz Rozšíření typu.
Klauzule vývoje schématu přidaná do syntaxe sloučení SQL
Teď můžete do příkazu sloučení SQL přidat klauzuli WITH SCHEMA EVOLUTION
, která umožňuje vývoj schématu pro operaci. Viz syntaxe vývoje schématu pro sloučení.
Podpora vakuového inventáře
Teď můžete určit inventář souborů, které je potřeba vzít v úvahu při spuštění příkazu VACUUM
v tabulce Delta. Podívejte se do dokumentace k OSS Delta.
Podpora funkcí komprese Zstandard
Teď můžete pomocí funkcí zst_compress, zstd_decompressa try_zstd_decompress komprimovat a dekomprimovat BINARY
data.
Plány dotazů v uživatelském rozhraní SQL teď správně zobrazují PhotonWriteStage
Při zobrazení v uživatelském rozhraní SQL se v příkazech write
v plánech dotazů nesprávně zobrazoval operátor PhotonWriteStage
. V této verzi se uživatelské rozhraní aktualizuje tak, aby zobrazoval PhotonWriteStage
jako fázi. Toto je pouze změna uživatelského rozhraní a nemá vliv na způsob spouštění dotazů.
Aktualizace uživatelského rozhraní
podpora rozhraní API:
27. června 2024
Filtry řádků a masky sloupců v materializovaných zobrazeních Databricks SQL a streamovaných tabulkách jsou ve verzi Public Preview.
Filtry řádků a masky sloupců v materializovaných zobrazeních Databricks SQL a streamovaných tabulkách jsou public preview. Verze Public Preview obsahuje následující změny:
Do materializovaného zobrazení Databricks nebo tabulky streamování můžete přidat filtry řádků a masky sloupců.
- Databricks SQL můžete definovat materializovaná zobrazení nebo streamované tabulky u tabulek, které obsahují filtry řádků a masky sloupců.
Aktualizace uživatelského rozhraní
Vizualizace:
- Vylepšili jsme interaktivitu při zobrazování popisů při najetí myší na výsečový, bodový a heatmapový graf s mnoha datovými body.
Průzkumník katalogu
- Přepracované uživatelské rozhraní Průzkumníka katalogu usnadňuje objevování a označování oblíbených nedávných prvků z katalogu Unity ze zobrazení Rychlý přístup. Navigační prostředí je také zjednodušené, takže můžete prozkoumat podrobnosti o výpočetních prostředcích, úložišti, přihlašovacích údajích, připojeních, DBFS a správě pomocí ikony nastavení
Nastavení v levém horním rohu obrazovky. Delta sdílení, čisté místnosti a externí data teď mají vyhrazené stránky.
6. června 2024
Oprava materializovaných zobrazení SQL a streamovaných tabulek v Databricks.
Byl opraven problém způsobující, že dotazy ALTER SCHEDULE
na materializovaná zobrazení a streamovací tabulky Databricks SQL ovlivní výsledek až po provedení další operace REFRESH. Nyní se dotazy ALTER SCHEDULE
použijí okamžitě. Viz Plánování materializovaných aktualizací zobrazení.
Materializovaná zobrazení a streamované tabulky v Databricks SQL jsou ve verzi Public Preview.
Materializovaná zobrazení a streamované tabulky v Databricks SQL jsou ve verzi Public Preview a jsou k dispozici všem zákazníkům. Verze Public Preview obsahuje následující změny:
REFRESH
materializovaných zobrazení a streamovaných tabulek v Databricks SQL je teď ve výchozím nastavení synchronní. Viz REFRESH (MATERIALIZED VIEW nebo STREAMING TABLE).- Chyby, ke kterým dochází během operace aktualizace materializovaného zobrazení Databricks SQL nebo tabulky streamování, se vrátí v editoru SQL.
Informace o použití materializovaných zobrazení a streamovaných tabulek v Databricks SQL najdete v tématu Použití materializovaných zobrazení v Databricks SQL a Načtení dat pomocí streamovaných tabulek v Databricks SQL.
Aktualizace uživatelského rozhraní
Řídicí panely:
- Uživatelé účtu teď můžou stahovat data vizualizace z publikovaných řídicích panelů.
- Nepublikované řídicí panely lze nyní publikovat pomocí rozevíracího seznamu Koncept/Publikovat poblíž horní části řídicího panelu.
- Opravili jsme problém, kdy nebyly zjištěny parametry s názvem limit.
Vizualizace:
- Vylepšené vykreslování krabicového grafu v tmavém režimu
Poznatky z dotazů:
- U všech poznámkových bloků připojených k SQL skladům můžete získat přístup k profilu dotazu kliknutím na Zobrazit výkon pod buňkou, která obsahuje dotaz. Pokud buňka obsahuje více dotazů, je pro každý příkaz k dispozici odkaz na profil dotazu.
30. května 2024
Nová úroveň oprávnění pro sql warehouses
Může monitorovat oprávnění umožňuje uživatelům monitorovat služby SQL Warehouse, včetně přidružené historie dotazů a profilů dotazů. Oprávnění Může monitorovat je nyní ve verzi Public Preview. Vizte SQL warehouse ACLs.
Aktualizace uživatelského rozhraní
vylepšení řídicího panelu:
- Do widgetů dashboardu jsme přidali kebabovou nabídku pro stahování obrázků a dat.
- Uživatelé můžou migrovat starší parametry dotazu řídicího panelu a parametry rozevíracího seznamu na řídicí panely.
23. května 2024
Aktualizace uživatelského rozhraní
- Teď můžete vybrat více položek v pracovním prostoru, které chcete přesunout nebo odstranit. Když je vybráno více objektů, zobrazí se panel akcí a poskytuje možnosti pro přesunutí nebo odstranění položek. Kromě toho můžete pomocí myši vybrat více položek a přetáhnout je na nové místo. Stávající oprávnění k objektům se stále použijí během hromadných operací přesunu a odstranění.
- V Průzkumníku katalogu a prohlížeči schémat teď můžete prostředky katalogu Unity označit jako oblíbené. To zahrnuje katalogy, schémata, tabulky, modely, svazky a funkce. Prostředky katalogu Unity, které označíte jako oblíbené, jsou snadno dostupné na domovské stránce Azure Databricks.
aktualizace řídicího panelu:
- Kombinované grafy se dvěma osami teď správně zobrazují legendy pruhů na pravé ose a legendy čar odpovídajícím způsobem.
- Grafy se dvěma osami teď správně zobrazují popisky na pruhech.
Aktualizace vizualizací:
- Popisky podmíněného formátu editoru tabulek pro , pokud a , pak, teď podporují tmavý režim.
- Nadbytečná ikona otevřít odkaz byla odstraněna z popisů formátu editoru tabulek.
- Výchozí barva písma v editoru tabulek se nyní sama automaticky zarovná.
16. května 2024
Harmonogram uvedení
- Uvedení verze Preview pro verzi 2024.25: Dokončeno 1. května
- Aktuální zavedení pro 2024.25: Mezi 14. květnem a 21. květnem
Poznámka
Upgrade knihovny Python pandas (verze 2.0.3) způsobil zásadní změnu ve verzi Databricks SQL 2024.20. Azure Databricks nedal do aktuálního kanálu verzi 2024.20. Místo toho byl kanál Preview upgradován na verzi 2024.25 1. května 2025. Uvedení aktuálního kanálu probíhá přímo z verze 2024.15 do roku 2024.25.
Změny v roce 2024/25
Zásady správného řízení dat
Předávání přihlašovacích údajů a řízení přístupu k tabulce metastoru Hive jsou zastaralé.
Přenos přihlašovacích údajů a řízení přístupu k tabulkám Hive metastore jsou starší modely datové správy. Upgradujte na Unity Catalog, aby bylo možné zjednodušit zabezpečení a správu vašich dat poskytnutím centrálního místa pro správu a auditování přístupu k datům napříč více pracovními prostory ve vašem účtu. Podívejte se na Co je katalog Unity?.
Podpora pro předávání přihlašovacích údajů a řízení přístupu k tabulkám metastore Hive bude odstraněna v příští verzi DBR.
Funkce jazyka SQL
Klauzule * (hvězdička) je nyní podporována v klauzuli WHERE.
Nyní můžete pomocí klauzule hvězdička (*
) v klauzuli WHERE
odkazovat na všechny sloupce ze seznamu SELECT
.
Například SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*)
.
Podpora úložiště Cloudflare R2, aby se zabránilo poplatkům za výchozí přenos dat mezi oblastmi od roku 2024.15
Cloudflare R2 teď můžete použít jako cloudové úložiště pro data zaregistrovaná v katalogu Unity. Cloudflare R2 je určen především pro případy využití Delta Sharing, ve kterých se chcete vyhnout poplatkům za egress dat, které účtují poskytovatelé cloudu při přenosu dat mezi oblastmi.
Cloudflare R2 storage podporuje všechna data Databricks a prostředky AI podporované v Azure Data Lake Storage Gen2.
Viz Použití replik Cloudflare R2 nebo migrace úložiště na R2 a Vytvoření přihlašovacích údajů úložiště pro připojení ke Cloudflare R2.
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
aktualizace zjišťování dat: Průvodce aktualizací metastoru Hive na Unity Catalog podporuje upgrade spravovaných tabulek metastoru Hive pomocí výpočetních prostředků pro všechny účely nebo sql warehouse. Aktualizace více než 20 tabulek vytvoří nový poznámkový blok, který obsahuje příkazy SYNC
AND ALTER TABLE
, které provádějí převod.
aktualizace řídicího panelu:
- Funkce duální osy je nyní k dispozici pro typy plošných, pruhových, spojnicových a bodových grafů.
- Když povolíte graf s duální osou, název a rozsah osy se už nezkopíruje na vedlejší osu.
- Poslední pole identifikované v konfiguraci vizualizace se automaticky přemístí na osu y na pravé straně.
9. května 2024
opravy editoru SQL:
- Administrační nastavení nyní platí pro funkce schránky v tabulce výsledků v novém editoru SQL pro tabulku výsledků.
vylepšení řídicího panelu:
- Parametry založené na dotazech umožňují autorům definovat seznam vybraných hodnot, které můžou čtenáři používat jako parametry pro jiné vizualizace na plátně řídicího panelu. Viz Použití parametrů založených na dotazech.
- Pořadí sloupců v souborech stažených z widgetu tabulky je teď zachováno.
- Editor tabulky teď obsahuje popisy tlačítek, které zobrazují názvy sloupců.
- Při přechodu z jiných typů vizualizací na histogram je teď lepší zachovat kódování informací.
Aktualizace řídicího panelu:
- Opravili jsme problém, kdy se ve filtru výšky mřížky zobrazoval nepotřebný posuvník.
- Opravili jsme problém, který způsoboval nesprávně vykreslené vizualizace na publikovaných řídicích panelech, kdy byl odstraněn odkazovaný sloupec datové sady.
2. května 2024
aktualizace řídicího panelu:
- Dotazy a vizualizace se teď dají zkopírovat do nového řídicího panelu z editoru SQL. Vizualizace můžete dál přidávat do starších řídicích panelů z editoru SQL. Viz Upravit, stáhnout nebo přidat na řídicí panel.
- Řídicí panely teď udržují 24hodinovou mezipaměť výsledků pro optimalizaci počáteční doby načítání. Viz Optimalizace datové sady a ukládání do mezipaměti.
- Pruhové grafy s kategorií X a kvantitativní hodnotou Y jsou teď seřazené v odpovědích Databricks Assistant.
- Opravili jsme problém s migrací se starší verzí histogramu
COUNT (*)
, pro zajištění přesné migrace. - Implementovali jsme možnost kombinovat číselné typy a typy kalendářních dat ve widgetu filtru.
- Při vytváření grafů teď Nástroj Databricks Assistant při psaní automaticky navrhne relevantní sloupce.
aktualizace vizualizace :
- Uživatelsky vybraná barva pro tabulky se teď v starších grafech udržuje ve světlých a tmavých režimech.
- Vylepšili jsme logiku pro zkrácení dat, která zvyšuje výkon v kombinovaných, výsečových, teplotních mapách a histogramech.
- Značka zaškrtnutí se teď vždy zobrazuje v horní části kvantitativní osy pro základní grafy.
23. dubna 2024
aktualizace uživatelského rozhraní:
- U všech dialogů Sdílení v rozhraní uživatele byla skupina
All Users
přejmenována naAll Workspace Users
. Nový název přesněji odpovídá rozsahu skupiny, která vždy zahrnovala uživatele přiřazené k pracovnímu prostoru. V rámci tohoto přejmenování nedojde k žádné změně členství ve skupině.
vylepšení řídicího panelu:
- Když se spustí SQL Warehouse řídicího panelu, zobrazí se dialogové okno s vysvětlením doby čekání.
- Při přepínání mezi kartami Plátno a Data se zachovají pozice posunu.
- Klonování staršího řídicího panelu pro vytvoření řídicího panelu Lakeview teď podporuje převod parametrů. Viz Úprava starších parametrů.
- Relativní data, například Dnes, Tomorrowa před 7 dny, jsou nyní podporována pro parametry data a času.
- Posuvníky rozsahu čísel lze přidat jako filtry na řídicím panelu.
- Histogramy teď můžou zobrazovat členěná data.
- Bodové grafy teď podporují kódování velikosti.
opravy řídicího panelu:
- Dočasné kódování barev teď může správně změnit přiřazení barev.
aktualizace vizualizace :
- Vlastní formáty popisků teď fungují správně pro grafy s více osami.
- Značka Nové grafy náhledu se odebere, pokud uživatelé nezměnili přepínač v posledních 14 dnech.
18. dubna 2024
Řídicí panely Lakeview jsou obecně dostupné
Nástroj pro tvorbu řídicích panelů Lakeview je nyní výchozím nástrojem. Byly přejmenovány na řídicí panely v uživatelském rozhraní. Řídicí panely Databricks SQL jsou nyní označovány jako staré řídicí panely. Názvy souvisejících nástrojů rozhraní API se nezměnily.
-
vylepšení řídicího panelu:
- Protokoly auditu jsou k dispozici pro řídicí panely Lakeview. Viz události na řídicím panelu AI/BI.
- Data stažená z řídicích panelů respektují použité parametry.
- Databricks Assistant je aktivován na kartě Data bez toho, aby se nejdřív přidaly datové sady.
- Skládané pruhové grafy s více poli Y můžou podporovat řazení osy X na základě součtu hodnot osy Y.
- Přepínat mezi funkcemi Lineární a Logaritmické (symetrické) ve vizualizační nabídce osy.
- Výchozí velikost widgetu filtru je teď kompaktnější.
- Počáteční doba načítání widgetu filtru pro zadávání textu byla snížena.
- Vylepšili jsme automatické převody grafů při migraci ze starších řídicích panelů.
-
opravy ovládacího panelu:
- Upozornění nastavení omezeného zobrazení se nezobrazuje, pokud byl řídicí panel sdílen s ostatními.
- Chybové zprávy v editoru SQL na kartě Data nyní podporují tmavý režim.
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
Vylepšení:
- Popisy ve skládaných grafech nyní zobrazují ve výchozím nastavení hodnotu skládání a procenta.
- Nápovědní štítky pro grafy s více osami nyní zvýrazňují najetou položku.
- Vizualizace tabulek pro Databricks SQL se teď při úpravách v editoru SQL přizpůsobí datovému typu nového výsledku dotazu.
- Tabulka Historie dotazů v Průzkumníkovi katalogu zobrazuje stromovou strukturu pro přiřazení Zdroj dotazů. Pomocí tohoto příkazu můžete zjistit, které entity aktivovaly spuštění příkazu dotazu.
11. dubna 2024
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
Vylepšení:
- Při vytváření vizualizací v Databricks SQL a poznámkových blocích teď můžete seskupit podle procent.
- U nových grafů (ve verzi Public Preview) můžete přiblížit jednu osu kliknutím a přetažením rovnoběžné čáry na osu.
- Sdílené rozhraní seznamu povolení clusteru Katalogu Unity je teď obecně dostupné. Můžete k němu získat přístup na stránce podrobností metastoru v Průzkumníku katalogu. Viz Jak přidat položky do seznamu povolených.
- Formuláře pro vytvoření a úpravu externích umístění se teď otevřou jako celá stránka. Zahrnují možnost zahrnout přihlašovací údaje úložiště.
Opravy spojené s ze strany:
- Opravili jsme problém v grafech Histogramu, kdy byly záporné hodnoty chybně označeny jako kladné.
4. dubna 2024
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
vylepšení:
- Vylepšení histogramových grafů na řídicích panelech Lakeview
- Byla přidána podpora popisků.
- Nastavení přihrádky se nyní uchovává i při přepínání mezi různými poli.
- Na stránce galerie ukázek v seznamu řídicích panelů se nyní vytvářejí řídicí panely Lakeview. Viz kurz : Použití ukázkových řídicích panelů.
- Kliknutím pravým tlačítkem myši na ohraničení widgetu na řídicím panelu Lakeview se otevře místní nabídka.
- Navigační panel na levé straně je zachován pro uživatele pracovního prostoru, kteří si prohlížejí publikované řídicí panely Lakeview.
- Výběry filtru se zachovají při procházení mezi publikovanými a rozpracovanými řídicími panely Lakeview.
- Názvy sloupců se teď dají vložit do editoru SQL při úpravě dotazu z karty Data na řídicím panelu Lakeview.
- Nahrazením řídicího panelu Lakeview zachováte název existujícího řídicího panelu a nahradíte jeho obsah.
- Přepínání vizualizací mezi teplotními mapami a jinými typy grafů nyní lépe zachovává příslušná pole.
Opravy :
- Pruhové grafy s kódováním barev teď správně omezují přidávání více polí osy Y.
- Vyřešili jsme problém, kdy v některých vizualizacích chybělo tlačítko Stáhnout jako PNG.
- Opravili jsme formátování záporných velkých celých čísel, u které dříve chyběly tisíce oddělovačů.
- Opravili jsme nesprávné umístění čáry při najetí myší na popisky u spojnicových grafů.
28. března 2024
Databricks SQL verze 2024.15 je k dispozici
Harmonogram zavádění
- Uvedení verze Preview pro verzi 2024.15: Mezi 14. únorem a 4. březnem
- Probíhající zavedení verze 2024.15: Mezi 25. březnem a 8. dubnem
změny v roce 2024.15
Rozdílové aktualizace
- Delta UniForm je nyní obecně dostupný: UniForm je nyní obecně dostupný a používá funkci tabulky IcebergCompatV2. U existujících tabulek teď můžete povolit nebo upgradovat UniForm. Viz Čtěte tabulky Delta pomocí klientů Iceberg.
- Přepočítat statistiky přeskakování dat pro Delta tabulky: Statistiky uložené v protokolu Delta teď můžete přepočítat po změně sloupců, které jsou používány pro přeskakování dat. Viz Určení sloupců statistiky delta.
Aktualizace jazyka SQL
- Deklarovat dočasné proměnné v relaci SQL: Tato verze zavádí možnost deklarovat dočasné proměnné v relaci, která se dá nastavit a pak na odkazovat z dotazů. Viz proměnné.
-
podpora nativního formátu souborů XML (Public Preview): podpora nativního formátu souborů XML je teď ve verzi Public Preview. Podpora formátu souboru XML umožňuje příjem dat, dotazování a analýzu dat XML pro dávkové zpracování nebo streamování. Dokáže automaticky odvodit a vyvíjet schémata a datové typy, podporuje výrazy SQL, jako je
from_xml
, a může generovat dokumenty XML. Nevyžaduje externí JAR soubory a bezproblémově funguje s Auto Loaderem,read_files
,COPY INTO
a DLT. Viz čtení a zápisu souborů XML.
Aktualizace Apache Spark SQL
Databricks SQL 2024.15 zahrnují Apache Spark 3.5.0. Další opravy chyb a vylepšení sql jsou uvedené ve zprávě k vydání verze Databricks Runtime 14.3. Podívejte se na Apache Spark a vyhledejte značku [SQL]
pro úplný seznam.
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
- Nová karta přehledu na stránce entity v Průzkumníku katalogu zobrazuje důležitá metadata, jako jsou například nákres, zdroj dat, vlastník, schéma tabulky a komentáře.
- aktualizace řídicího panelu Lakeview:
- Řídicí panely Lakeview teď podporují parametry. Autoři mohou přidávat parametry do dotazů na datové sady na kartě Data a pak na plátně nastavit parametry pomocí selektorů s jednou hodnotou a výběrů data. Viz Práce s parametry řídicího panelu.
- Řídicí panely Lakeview se teď podporují v rozhraní API pro oprávnění pracovního prostoru. Viz PATCH /api/workspace/workspace/updatepermissions v referenčních informacích k rozhraní REST API.
- Ovládací widgety na plátně byly přejmenovány na widgety filtru.
- Kombinované grafy už neumožňují agregovaná pole na ose x.
- Tlačítko Kopírovat odkaz v dialogovém okně Sdílet teď obsahuje parametry uložené v adrese URL.
- Widgety na publikovaných řídicích panelech už při najetí myší nezobrazují ohraničení.
- Vyřešili jsme problém, kdy se tlačítka Databricks Assistant a Download PNG překrývají s vizuály grafu.
- Přepínání vizualizací mezi heatmapami a jinými typy grafů teď lépe zachovává příslušná pole.
- Pruhové grafy s kódováním barev teď správně omezují přidávání více polí osy Y.
21. března 2024
- Rodokmen modelu Unity je teď ve verzi Public Preview.
Zobrazení tabulky v Průzkumníku katalogu teď obsahuje kartu Přehled, která popisuje jeho primární metadata.
- SQL sklady pro poznámkové bloky, které jsou teď obecně dostupné, umožňují využívat plně spravované, okamžité a škálovatelné výpočetní kapacity pro úlohy SQL v bohatém a kolaborativním prostředí pro autory poznámkových bloků. Podívejte se na a použijte poznámkový blok sSQL Warehouse.
Na řídicí panely Lakeview platí následující opravy a vylepšení:
- Rozšířená podpora rozhraní API pro Lakeview přidává možnost vytvářet, získávat, aktualizovat a mazat panely. Viz Lakeview v referenčních informacích k rozhraní REST API.
- Na kartě Data jsme přidali tlačítko pro aktualizaci prohlížeče katalogu.
- Řídicí panely Lakeview se teď zobrazují před řídicími panely v nabídce Nový v bočním panelu pracovního prostoru. Na stránce se výpisem řídicího panelu Lakeview zobrazí karta nalevo od karty řídicích panelů řídicích panelů.
- Prostředí Databricks Assistant pro Lakeview bylo aktualizováno s využitím vstupního pole a návrhů, které zlepšují snadnost nalezení a pomáhají uživatelům pochopit dotazy, které mohou položit.
- Vizualizace Lakeview nyní podporují agregace pomocí mediánu.
- Aktualizace výběru barvy v editoru vizualizací řídicího panelu Lakeview pro efektivnější uživatelské prostředí při vytváření tabulek.
- Vylepšená migrace výsečového grafu, která výhradně podporuje scénáře s definicemi úhlu nebo barvy.
- Opravili jsme chybu, která bránila seskupování podle grafů s názvem count. Grafy se teď dají seskupit podle polí s názvem počet.
- U pruhových grafů se ovládací prvky skupiny a rozložení zásobníku skryjí, pokud se nehodí pro uživatelskou konfiguraci.
14. března 2024
Řídicí panely Lakeview:
- Histogramy teď podporují vlastní barvy kategorií.
- Heatmapy teď podporují kvantitativní měřítka.
- Názvy a popisy se zachovají při přepínání mezi typy vizualizací, včetně kombinovaných grafů.
- Nyní můžete otevřít podkladovou datovou sadu přidruženou k rozepsanému widgetu řídicího panelu kliknutím pravým tlačítkem myši na něj. Datová sada se otevře na záložce Data.
- Nové grafy teď používají aliasy a vlastní barvy pro hodnoty null v číselných sloupcích.
- Nové grafy nyní vykreslují značky, které ukazují vrchol osy y.
7. března 2024
- Při prohlížení tabulky v Průzkumníku katalogu obsahuje tlačítko Vytvořit možnost vytvořit řídicí panel Lakeview místo řídicího panelu SQL Databricks.
- Histogramy jsou teď k dispozici pro řídicí panely Lakeview. Histogramy se běžně používají k vizualizaci rozdělení číselného pole.
- Při klonování řídicího panelu SQL Databricks za účelem vytvoření řídicího panelu Lakeview se teď problémy s převodem datových sad zobrazují jako chyby v novém widgetu na řídicím panelu Lakeview.
- Barevné přechody jsou k dispozici, pokud se pro vizualizaci na řídicím panelu Lakeview používá číselné pole.
- Barevné přechody jsou nyní zpřístupněny v editoru vizualizací řídicího panelu Lakeview, když je zadán Barva podle pole.
- Název a popis související s vizualizací se už nezobrazují, pokud prohlížeč nemá oprávnění k úpravám na řídicím panelu Lakeview.
- Opravili jsme problém, kdy popisky v grafech s více než 100 sériemi nesprávně zobrazovaly všechny série. Teď se zobrazí jenom prioritní řada.
- Snížení latence psaní v editoru SQL o 30% prostřednictvím optimalizací výkonu.
- Při správě dotazů v editoru SQL se karta automaticky zavře, když je dotaz přesunut do koše.
- Opravili jsme problém v editoru SQL, kdy se při úpravě šířky bočního panelu omylem vybral text.
29. února 2024
- Prohlížeč schématu v Průzkumníku katalogu nyní zobrazuje omezení primárního a cizího klíče u sloupců.
- Doba uchování zobrazená na kartě Lineage v Průzkumníku katalogu byla prodloužena na jeden rok.
- Nástrojové popisky nových grafů v poznámkových blocích se teď vždy vykreslují uvnitř hranic vizualizace.
- Naučte se programově spravovat řídicí panely Lakeview pomocí rozhraní REST API. Viz Správa řídicích panelů pomocí rozhraní API pracovního prostoru.
- Řídicí panely Lakeview teď podporují histogramy.
- Vylepšené sdílení a publikování na řídicích panelech Lakeview:
- Vylepšené dialogy sdílení a publikování, které umožňují bezpečné a snadné sdílení pro libovolného uživatele účtu.
- Řídicí panely otevřené v prohlížeči pracovního prostoru zobrazují publikovaný řídicí panel, pokud existuje. Čtenáři teď také uvidí podrobnosti o nejnovější publikované verzi, včetně vydavatele, času a přihlašovacích údajů.
- Pro editory vám nový rozevírací přepínač v uživatelském rozhraní řídicího panelu Lakeview umožňuje rychle přecházet mezi koncepty a publikovanými verzemi.
Feburary 22, 2024
- Vylepšení karty Ukázková data v zobrazení tabulky Průzkumníku katalogu umožňuje seřadit sloupce, Kopírovat vybraná data do schránky a zobrazovat čísla řádků. Teď může lépe zobrazovat speciální hodnoty, jako jsou objekty JSON, kalendářní data, číselné a nulové hodnoty.
- Řídicí panely Lakeview teď podporují odesílání pravidelných snímků PDF řídicího panelu uživatelům pracovního prostoru a cílům oznámení. Viz programy a předplatná.
- Seznam možností vizualizace v rozevíracím seznamu Lakeview je teď seřazený abecedně.
- Při kopírování řídicích panelů SQL Databricks do řídicích panelů Lakeview teď widgety, které nelze převést, teď místo chybové zprávy zobrazují výběr konfigurace vizualizace.
15. února 2024
- Dokumentace k filtrům dotazů založeným na kódu, jako je například
SELECT action AS 'action::filter'
, byla odebrána. Databricks doporučuje aktualizovat dotazy, aby odstranili tento vzor.
- U řídicích panelů Lakeview teď výsečové grafy zobrazují výseče stejné velikosti, když není zadáno žádné úhlové pole.
- Lakeview teď podporuje kombinované grafy, které kombinují pruhové a spojnicové grafy a zobrazují ve stejném grafu dvě různé hodnoty.
- Heatmapové grafy, které používají intenzitu barev k zobrazení velikosti korelace mezi dvěma diskrétními proměnnými, jsou nyní k dispozici v Lakeview.
8. února 2024
- Teď můžete požádat o přístup při otevření odkazu na řídicí panel Lakeview, ke kterým nemáte oprávnění.
- Filtry řídicího panelu Lakeview nyní obsahují jasné možnosti: Všechny a Žádné. Autoři se můžou rozhodnout skrýt možnost Všechny v jednoduchých filtrech výběru.
- Teď můžete nastavit minimální a maximální hodnoty pro osy v grafech řídicího panelu Lakeview.
1. února 2024
Databricks SQL verze 2024.10 k dispozici
Plán zavedení
- Uvedení verze Preview pro verzi 2024.10: Mezi 30. ledem 2024 a 5. únorem 2024
- Aktuální zavedení pro 2024.10: Mezi 13. únorem 2023 a 20. únorem 2024
změny v roce 2024.10
-
Oprava zpracování poškozených souborů v příkazech DML: příkazy DML
DELETE
,UPDATE
aMERGE INTO
už nerespektují možnosti čteníignoreCorruptFiles
aignoreMissingFiles
. Při výskytu nečitelného souboru v tabulce teď tyto příkazy selžou, i když jsou tyto možnosti zadané. - souběžnost na úrovni řádků je obecně dostupná a zapnutá ve výchozím nastavení: souběžnost na úrovni řádků snižuje konflikty mezi souběžnými operacemi zápisu detekcí změn na úrovni řádku. Podpora souběžnosti na úrovni řádků je pouze u tabulek bez partice, včetně tabulek s liquid clustering. Souběžnost na úrovni řádků je ve výchozím nastavení povolená u tabulek Delta s povolenými vektory odstranění. Viz Konflikty zápisu s souběžností na úrovni řádků.
- cs-CZ: Mělké klonování pro externí tabulky v katalogu Unity (ve verzi Public Preview): Nyní můžete použít mělké klonování s externími tabulkami v katalogu Unity. Viz Mělký klon pro tabulky katalogu Unity.
-
rychlejší shromažďování vícevláknových statistik: kolekce Statistika je v malých clusterech při spouštění
CONVERT TO DELTA
nebo klonování z tabulek Iceberg a Parquet až 10krát rychlejší. Viz Převést na Delta Lake a Postupné klonování tabulek Parquet a Iceberg do Delta Lake. - Zasouvané filtry v DeltaSource na souborech Delta: Pro lepší využití se filtry oddílů u streamovacích dotazů nad tabulkami Delta posunují dolů ještě před omezením rychlosti.
Aktualizace uživatelského rozhraní
Funkce uvedené v této části jsou nezávislé na výpočetních verzích SQL Warehouse popsaných výše.
- Karta Zobrazení správce na stránkách seznamu objektů Databricks SQL (dotazy, řídicí panely a upozornění) byla odebrána. Správci pracovního prostoru můžou zobrazit všechny objekty ze svých příslušných seznamů. Viz Přístup a správa uložených dotazů, zastaralé řídicí panelya Co jsou výstrahy Databricks SQL?.
- Na stránce historie dotazů se ve výchozím nastavení zobrazují dotazy z posledních 24 hodin. Viz historie dotazů.
- Do uživatelského rozhraní řídicího panelu SQL Databricks jsme přidali možnost Klonovat na řídicí panel Lakeview. Tento nástroj můžete použít k vytvoření nového řídicího panelu Lakeview, který obsahuje stejné dotazy a vizualizace ve stávajících řídicích panelech SQL Databricks. Viz Klonování staršího řídicího panelu dořídicího panelu AI/BI.
- Pruhové grafy v dashboardech Lakeview podporují skládání pruhů pro normalizaci na hodnotu 100%.
- Opravili jsme problém, kdy přiblížení na publikovaném řídicím panelu Lakeview vedlo k zaměření na nesprávné intervaly přiblížení.
24. ledna 2024
- Plátno řídicího panelu Lakeview automaticky upraví umístění widgetu tak, aby se v případech, kdy je to možné, odstranily prázdné vertikální mezery mezi řádky.
- Zmenšené prázdné znaky mezi textem názvu a popisu ve vizualizacích řídicího panelu Lakeview
18. ledna 2024
- Opravili jsme problém s vykreslováním vizualizací, kdy pruhové grafy zobrazující jedno datum na ose X způsobily velmi tenký pruh. Nové vizualizace grafů se vykreslují podle očekávání.
- Na stránce výpisu řídicího panelu Lakeview se ve výchozím nastavení zobrazují vaše řídicí panely. Filtry na této stránce můžete použít pro přístup k řídicím panelům Lakeview vlastněným jinými uživateli pracovního prostoru.
11. ledna 2024
- SQL dotazy a rozhraní API řídicích panelů Databricks podporují programatickou změnu nastavení role Spustit jako.
- Lakeview podporuje export a import řídicích panelů jako souborů za účelem usnadnění reprodukování konceptů řídicích panelů napříč pracovními prostory. Viz Export, import nebo nahraďte řídící panel
4. ledna 2024
- Zavedli jsme diagramy vztahů mezi primárním klíčem a cizím klíčem v Průzkumníku katalogu. Viz Zobrazení diagramu vztahů entit.