Partilhar via

Notas de versão do Databricks SQL 2023

  • Artigo

A seguir descrevemos as melhorias e atualizações no Databricks SQL de janeiro a dezembro de 2023.

21 de dezembro de 2023

  • O tipo de visualização Lakeview Counter mostra cores ao comparar valores de BigInt nos campos principais Value e Target.
  • As dicas de ferramentas que aparecem ao alternar a visibilidade das colunas nas tabelas do Lakeview foram melhoradas. Comportam-se como esperado e não persistem.
  • Os usuários agora podem usar o Databricks Assistant para criar visualizações no Lakeview. Veja Criar visualizações com Databricks Assistant.
  • Para novos gráficos, os gráficos do tipo mapa de calor respeitam a configuração reverseY.
  • Corrigido um problema de desempenho de renderização para notebooks com um grande número de visualizações.

14 de dezembro de 2023

  • Corrigido um bug em que os painéis do Lakeview não apareciam na página de listagem do Lakeview sem uma atualização manual da página.
  • Use a tecla escape para cancelar a criação de um widget Lakeview ao colocá-lo na tela.
  • O Catalog Explorer agora exibe índices de Pesquisa Vetorial na interface de utilizador como parte da visualização pública do Mosaic AI Pesquisa Vetorial.

7 de dezembro de 2023

Atualizações da interface do usuário

  • Os painéis Lakeview podem ser adicionados aos favoritos para acesso rápido.
  • Os atalhos de teclado para copiar e colar são suportados durante a criação do painel do Lakeview. Além disso, a tecla "Delete" remove os widgets selecionados.
  • Títulos e descrições aprimorados do widget Lakeview para evitar o recorte de texto durante o carregamento.
  • Corrigido o problema de formatação da visualização em que valores inteiros grandes eram exibidos por engano como flutuadores.
  • Corrigido um problema com os painéis SQL do Databricks em que as exibições de gráficos expandidas às vezes mostravam gráficos em branco.
  • Gráficos de barras com campos quantitativos nos eixos X e Y tornam os rótulos de dados mais legíveis.
  • Corrigido problema no Editor SQL para que as tabelas com a palavra stream no título não entrem mais em conflito com a palavra-chave reservada. Estas tabelas agora aparecem como esperado no visualizador de esquema e não estão realçadas como erros.
  • A página de histórico de consultas agora suporta redimensionamento de colunas e seleções de colunas.
  • A página de histórico de consultas suporta duas novas colunas: origem da consulta e tipo de origem da consulta.
  • As opções de BI, como o Tableau e o Power BI, são mais fáceis de encontrar no Catalog Explorer em páginas qualificadas.

30 de novembro de 2023

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

  • Os gráficos de pizza no Lakeview agora podem ter atribuições de cores personalizadas.
  • As transformações de visualização no Lakeview agora são mantidas ao alternar entre tipos de campo compatíveis.
  • Adicionadas definições de título para os ângulos do gráfico circular Lakeview.
  • O menu suspenso do conjunto de dados Lakeview agora é pesquisável para facilitar a navegação.
  • Lakeview suporta exibição numérica completa para valores abaixo de 10.000, eliminando abreviaturas.
  • Foi adicionada a capacidade de categorizar com cores os campos de data por categorias no Lakeview.
  • Os usuários do Lakeview agora podem destacar legendas de gráficos com o cursor para copiar e colar os valores.
  • Os gráficos de pizza no Lakeview agora apresentam uma opção de alternância de rótulo.
  • Padronizou uma cor azul padrão em todas as visualizações do Lakeview.
  • Os ícones de coluna Lakeview em transformações agora correspondem consistentemente ao método de transformação usado.
  • Os controles no painel de edição do Lakeview agora são encapsulados automaticamente para melhorar a legibilidade.
  • Lançado um editor de cores aprimorado para visualizações do Lakeview.
  • O controlo das condições da fonte da tabela no Lakeview agora está ajustado para melhorar a legibilidade.
  • Compatibilidade melhorada com o modo escuro para etiquetas em novos gráficos.
  • Novos gráficos agora priorizam consistentemente a exibição de rótulos dentro das barras.
  • Corrigido um bug em que algumas ações do menu do botão direito do mouse não estavam funcionando no Editor SQL.

16 de novembro de 2023

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.

  • Os widgets Lakeview agora são mais fáceis de redimensionar devido a uma zona de gatilho de redimensionamento maior.
  • Os administradores do espaço de trabalho agora podem alterar o proprietário de um painel do Lakeview. Em modo de edição num dashboard do Lakeview:
    • Clique Partilhar
    • Clique ícone de engrenagem
    • Clique Atribuir novo proprietário
  • Os usuários podem ativar ou desativar rótulos no Lakeview.

Visualizações:

  • Novos rótulos de gráficos tendem a preferir estar dentro de uma barra, sempre que possível.
  • Novos rótulos de gráficos agora aparecem corretamente em barras empilhadas que são largas o suficiente para mostrar o rótulo inteiro.
  • As cores dos rótulos dentro dos gráficos de barras agora são mais consistentes.

9 de novembro de 2023

Alterações em 2023.50:

Destaques:

  • Agora você pode usar de invocação de parâmetro nomeado em SQL e Python UDF.

Atualizações da linguagem SQL: As seguintes funções internas foram adicionadas:

As seguintes funções incorporadas foram melhoradas:

  • invocação de função. Argumentos de tabela para funções suportam particionamento e ordenação: agora você pode usar as cláusulas PARTITION BY e ORDER BY para controlar como os argumentos de tabela são passados para uma função.
  • mode: Suporte para um parâmetro opcional forçando um resultado determinístico.
  • to_char: Novo suporte para DATE, TIMESTAMPe BINARY.
  • to_varchar: Novo suporte para DATE, TIMESTAMPe BINARY.
  • array_insert() é baseada em 1 para índices negativos: A função array_insert é baseada em 1 para índices positivos e negativos. Ele agora insere um novo elemento no final das matrizes de entrada para o índice -1.

Atualizações da interface do usuário

Os recursos listados nesta seção são independentes das versões de computação do SQL warehouse descritas acima.

Visualizações:

  • As dicas de ferramentas para novos gráficos mostram apenas itens passados com o rato para gráficos de alta cardinalidade.
  • Novos gráficos alinham automaticamente gráficos de eixo duplo em zero.
  • Os gráficos alteraram a orientação do rótulo girado e do ângulo do texto do eixo de -90 para 90 graus.
  • Os gráficos agora usam a largura do rótulo para decidir a rotação.

Lakeview Dashboards:

  • Correção: As linhas da tabela nos painéis do Lakeview não adicionam mais espaçamento vertical quando apenas um pequeno número de linhas é retornado.
  • A clonagem de um novo widget do painel do Lakeview tenta, primeiro, colocar o clone à direita do original, desde que haja espaço suficiente no ecrã. Se não houver espaço suficiente disponível, o clone é colocado abaixo do original.
  • Agora você pode reatribuir o proprietário de um painel do Lakeview por meio da caixa de diálogo de partilha.

Editor SQL: Autocomplete agora é menos agressivo e é descartado automaticamente no final das instruções

2 de novembro de 2023

Melhorias:

A seguir estão as melhorias na linhagem do painel Lakeview:

  • Adicionados ícones distintos para tabelas, vistas e vistas materializadas.
  • Adicionado suporte para rolagem vertical no caso de muitas fontes de dados upstream.
  • Mensagem de erro melhorada quando o visualizador não tem permissões no objeto upstream.
  • Esclarecimento das mensagens relativas às tabelas de dados de exemplo e aos dados HMS.
  • Tags de valor chave adicionadas às fontes de dados upstream.

Correção:

  • Corrigido um problema em novos gráficos que impedia a renderização depois de renomear uma série com valores booleanos.

26 de outubro de 2023

Alterações no Databricks SQL versão 2023.45

Destaques:

Otimizações de consulta:

  • Removida a junção externa se todas forem funções agregadas distintas. SPARK-42583
  • Otimização da ordem dos predicados de filtragem. SPARK-40045

Atualizações da função SQL :

  • Adicionado suporte para resolução implícita de alias de coluna lateral em Aggregate. SPARK-41631
  • Suporte para alias de coluna lateral implícito em consultas com Window. SPARK-42217
  • Suporte para Datasketches HLLSketch. Consulte a função agregada hll_sketch_agg.
  • Adicionada a função try_aes_decrypt(). Consulte a função try_aes_decrypt.
  • Suporte para o modo CBC para aes_encrypt() e aes_decrypt(). Veja aes_decrypt função.
  • Adicione aliases de função 3-args DATE_ADD e DATE_DIFF.
  • Adicionado suporte para aes_encrypt IVs e AAD. SPARK-43290
  • Implemente funções de bitmap. SPARK-44154
  • Adicionado o alias to_varchar para to_char. Consulte to_varchar função.
  • Adicionado suporte array_compact. Consulte a função array_compact.
  • Suporte para udf luhn_check. Consulte luhn_check função.
  • Foi adicionado suporte no analisador para argumentos nomeados em funções internas. SPARK-44059
  • Suporte para regra do analisador de argumentos TABLE para TableValuedFunction. SPARK-44200
  • array_insert agora falha com o índice 0. SPARK-43011
  • Adicionados valores de NULL para INSERT com listas especificadas pelo utilizador de menos colunas do que a tabela de destino. SPARK-42521
  • A função DECODE retorna resultados errados quando é passado NULL. SPARK-41668

Atualizações da interface do usuário

Melhorias:

  • O editor Lakeview SQL agora suporta atalhos de teclado para executar consultas.
  • Os filtros no Lakeview agora listam seleções rápidas de intervalo de datas relativas para os últimos 7, 14, 28, 30, 60 e 90 dias.
  • Os períodos nos nomes dos campos de dados não resultam mais em gráficos em branco.
  • O navegador de esquema herdado agora funciona com o Unity Catalog.
  • Implementei melhorias de desempenho para carregar apenas a guia ativa no Editor SQL, diminuindo o tempo de carregamento inicial em até 20%.
  • Os comentários de tabela gerados por IA no Catalog Explorer agora estão geralmente disponíveis.

Correções:

  • As barras nos gráficos de barras temporais estão agora centradas na marca de data.
  • Os modelos de rótulo de dados com expressões agregadas agora usam as formatters numéricas adequadas.
  • O zoom em novos gráficos agora funciona com uma escala definida como categórica usando dados temporais.

Novo artigo:

  • Lançado um novo artigo mostrando todas as visualizações do Lakeview, incluindo capturas de tela e notas mostrando como recriar cada uma das visualizações em cada captura de tela. Consulte tipos de visualizações do painel.

19 de outubro de 2023

Melhorias:

  • Arrastar e soltar no explorador de esquemas já está disponível.
  • O modal Selecionar tabela nos painéis do Lakeview facilita a seleção de todas as tabelas em um catálogo ou esquema e agora usa previsões de pesquisa de preenchimento automático à medida que você digita.

Correções:

  • As instruções de dica de seleção de legenda especificam que os utilizadores de Mac devem usar cmd e os de Windows devem usar ctrl.
  • Visibilidade aprimorada de mensagens truncadas nos painéis do Lakeview quando os dados renderizados excedem os limites.
  • Gráficos com dados truncados exibem cores consistentes como visto no editor.

12 de outubro de 2023

Melhorias:

  • Os valores de filtro de texto contendo caracteres especiais agora são filtrados corretamente nos painéis do Lakeview.
  • Novos gráficos suportam as etiquetas de dados @@name em gráficos de dispersão.
  • Formatos de percentagem personalizados aplicam-se às legendas de gráficos agrupados em novos gráficos.
  • A interface do usuário da extensão de vinculação do espaço de trabalho é GA.

Correções:

  • Renderização de rótulos aprimorada em novos gráficos para evitar que os rótulos se espalhem para fora dos limites do gráfico.
  • Aumentou o contraste das linhas de marcação e grade em novos gráficos para melhorar a visibilidade.
  • Aumento do espaçamento entre rótulos de eixos para melhorar a legibilidade em novos gráficos.

5 de outubro de 2023

Melhorias:

  • Dicas de ferramentas precisas foram adicionadas para ações do modo de publicação e linhagem de datas nos painéis do Lakeview.
  • A formatação condicional e os modelos de link nas visualizações de tabela do Lakeview agora suportam colunas ocultas.
  • Posicionamento otimizado do rótulo em gráficos temporais de barras largas para melhorar a clareza nos novos gráficos.
  • A visualização do contador no Lakeview mantém suas transformações mesmo depois que outros campos são removidos, garantindo consistência.
  • Ao passar o cursor sobre uma série num gráfico, as séries ao redor na dica de ferramenta são escurecidas para melhorar a legibilidade em novos gráficos.
  • Novos gráficos usando valores percentuais agora exibem dicas de ferramentas com valores absolutos.
  • Foi adicionado suporte de preenchimento automático para a criação de volumes.
  • Fechar uma guia não ativa já não alterna as guias.
  • A execução selecionada é claramente indicada quando o texto é realçado.

Correções:

  • Texto de mensagem de erro melhorado em Tabelas Dinâmicas quando ocorre truncamento dos dados.
  • Corrigido um erro de renderização em Tabelas Dinâmicas em que as cores não eram exibidas ao usar tipos de dados BigInt.
  • Ao baixar PNGs em novos gráficos com vários itens de legenda, foi removido o símbolo de cor para as entradas de legenda em excesso.
  • As linhas em novos gráficos manterão uma espessura consistente mesmo no limite de visualização mais alto.
  • No Lakeview, se nenhum conjunto de dados existir, o seletor de conjunto de dados no Canvas estará vazio.
  • As DLT são detetadas corretamente pelo SQL Parser e não aparecem como tabelas inválidas no Navegador de Esquema.
  • Dicas de ferramentas foram adicionadas à barra lateral.

28 de setembro de 2023

Melhorias:

  • Os painéis publicados do Lakeview agora têm um botão de atualização.
  • Mensagens de erro aprimoradas para usuários que não têm acesso a um painel do Lakeview.
  • A configuração do filtro nos painéis do Lakeview agora lista os campos válidos na parte superior da lista de seleção.
  • O download de um gráfico como PNG a partir de um painel do Lakeview agora mantém o título e a descrição.
  • A melhoria do histórico de tabelas delta no Catalog Explorer inclui a adição de filtros para intervalo de datas, usuário e tipo de operação, bem como colunas classificáveis e links embutidos para Trabalhos e Blocos de Anotações associados.
  • Suporte ao modo escuro adicionado em legendas, dicas de ferramentas e visualização de tabelas.

Correção:

  • As seleções de filtros não são mais limpas ao atualizar um painel do Lakeview.

21 de setembro de 2023

Melhorias:

  • O desempenho de renderização da Tabela Dinâmica foi melhorado.
  • Novo padrão DuBois para exibições tabulares de linhagem na interface do usuário.

14 de setembro de 2023

Melhoria:

7 de setembro de 2023

Databricks SQL versão 2023.40 disponível

Cronograma de distribuição

  • Lançamento de pré-visualização para 2023.40: entre 5 de setembro de 2023 e 11 de setembro de 2023
  • Lançamento atual da versão 2023.40: De 18 a 25 de setembro de 2023

Alterações em 2023.40:

  • As tags agora estão disponíveis com o Catálogo Unity.
  • O Databricks Runtime retornará um erro se um arquivo for modificado entre o planejamento e a chamada da consulta.
  • Suporte ao driver ODBC/JDBC do Azure Databricks.
  • Habilite a rotulagem de colunas de séries temporais.
  • Novas funções SQL bitmap.
  • Funções de encriptação melhoradas.
  • Suporte do Catálogo Unity para REFRESH FOREIGN.
  • INSERT BY NAME agora é suportado.
  • Partilhe visualizações materializadas com a Delta Sharing.

Atualizações da interface do usuário

Melhorias:

  • Novos gráficos estão agora disponíveis, com desempenho de renderização mais rápido, cores bonitas e interatividade aprimorada. Consulte visualização no Databricks SQL.
  • Na visualização de gráfico do Perfil de Consulta, agora pode-se ver o tipo de associação em qualquer nó que contenha uma associação no plano de consulta.
  • O Data Explorer é renomeado para Catalog Explorer para reconhecer o fato de que você pode usá-lo para trabalhar com todos os objetos protegíveis no Unity Catalog, não apenas com objetos de dados. Consulte O que é o Catalog Explorer?.
  • A API de execução de instruções SQL do Databricks agora está em Disponibilidade Geral (GA) com o Databricks SQL Versão 2023.35 e versões superiores. A API permite que você envie instruções SQL para execução em um armazém SQL Databricks, verifique o status e busque resultados ou cancele uma execução de instrução SQL em execução. Consulte API de Execução de Declarações.

31 de agosto de 2023

Novo recurso:

24 de agosto de 2023

Melhoria:

  • O Preenchimento automático para de sugerir recomendações depois de pressionar a barra de espaço.
  • O Navegador de Esquemas não vê mais live DLT como tabelas quebradas.

16 de agosto de 2023

Melhoria:

  • A lista suspensa Catálogo no editor SQL agora é fechada quando você alterna entre guias. Anteriormente, quando você trocava de guia, a lista suspensa permanecia aberta.

10 de agosto de 2023

Melhoria:

  • O Preenchimento automático agora suporta a nova sintaxe para definir tags do Catálogo Unity. Para obter informações sobre comandos, consulte referência de linguagem SQL.

3 de agosto de 2023

Melhorias:

  • O Editor de Mônaco subjacente agora usa a versão 37.1.
  • Suporte de preenchimento automático para comandos Delta SHOW ARCHIVED FILES FOR.

27 de julho de 2023

Melhorias:

  • O editor SQL agora é compatível com caracteres de nova linha do Windows, garantindo que a formatação da consulta funcione como esperado em todos os casos.
  • Pode abrir a navegação do perfil de consulta a partir dos resultados do bloco de notas. Para consultas, execute sua consulta com o SQL warehouse.

20 de julho de 2023

Databricks SQL versão 2023.35 disponível

Plano de Implementação

  • Lançamento de visualização prévia para 2023.35: Entre 18 de julho de 2023 e 24 de julho de 2023
  • Distribuição atual de 2023.35: Entre 31 de julho de 2023 e 8 de agosto de 2023

Alterações em 2023.35:

  • Confiabilidade aprimorada para VACUUM com clone superficial no Unity Catalog.
  • Suporte para Python UDFs em SQL.
  • Delta Lake UniForm for Iceberg está em pré-visualização pública.
  • O agrupamento de líquidos do Lago Delta está em Visualização Pública.
  • Suporte de arquivamento para Delta Lake.
  • IDENTIFIER cláusula de apoio.
  • Suporte ao Catálogo Unity para funções Python e Pandas User-Defined (UDFs).

Melhoria:

  • A popularidade da tabela no Catalog Explorer está disponível para todos os utilizadores do Catálogo Unity.

13 de julho de 2023

Melhoria:

  • Os usuários do Catálogo Unity agora podem visualizar informações adicionais da tabela no Gerenciador de Catálogos, como tabelas ingressadas com freqüência, usuários frequentes de uma determinada tabela e blocos de anotações e painéis usados com freqüência.

22 de junho de 2023

Visualização pública:

  • O Databricks SQL agora suporta modelos de linguagem de grande escala (LLMs) hospedados em endpoints de serviço de modelo. Ligue para ai_query() para acessar seu LLM. Esta função só está disponível no Public Preview no Databricks SQL Pro e Serverless. Para participar na Pré-visualização Pública, envie o formulário de inscrição AI Functions Public Preview.

15 de junho de 2023

Novo recurso:

  • As tarefas SQL em Jobs agora estão disponíveis ao público em geral. Você pode orquestrar consultas, painéis e alertas na página Trabalhos. Consulte a tarefa SQL para as tarefas.
  • Um novo navegador de esquema está agora em Visualização Pública, com uma UX atualizada, uma guia For You e filtros aprimorados. O navegador de esquema está disponível em Databricks SQL, Catalog Explorer e notebooks. Veja Explorar dados.

8 de junho de 2023

DBSQL versão 2023.30 disponível

Alterações em 2023.30

  • Novas funções internas do SQL, como array_prepend(array, elem), try_aes_decrypt(expr, key [, mode [, padding]])e sql_keywords() .
  • Agora pode utilizar o clone superficial para criar novas tabelas geridas pelo Unity Catalog a partir de tabelas existentes geridas pelo Unity Catalog. Veja o clone superficial das tabelas do Unity Catalog .
  • Agora você pode usar CLONE e CONVERT TO DELTA com tabelas Iceberg que têm partições definidas em colunas truncadas dos tipos int, longe string. Não há suporte para colunas truncadas do tipo decimal.
  • START VERSION está agora obsoleto em relação ao ALTER SHARE.

Atualizações da interface do usuário

Correção:

  • A visualização de contador agora suporta formatação ao usar Big Integers.

1 de junho de 2023

Melhorias:

  • Os dados binários agora serão renderizados como uma cadeia de caracteres hexadecimal ao usar o formato de seta.
  • Na API de declarações SQL, o formato CSV é agora suportado para a configuração EXTERNAL_LINKS. Isso permite que os clientes extraiam até 100 GiB de dados em formato CSV com URLs pré-assinadas, enquanto o limite de INLINE para JSON é de 16 MiB.
  • O Azure Databricks SQL Pro está disponível em todas as regiões da China. O SQL Pro agora é o armazém padrão na UI. O padrão da API ainda é Clássico.

29 de maio de 2023

Novo recurso:

25 de maio de 2023

Melhorias:

  • Agora podes alternar o painel de resultados de preenchimento automático.
  • Desative a tecla enter para não aceitar mais sugestões de autocompletar. Em DBSQL User Settings, clique em Editor Settingse, em seguida, New Editor settings. Desativar Tecla Enter aceita sugestões de preenchimento automático.

Correções:

  • Os cabeçalhos de tabela classificados agora têm cores.
  • As linhas do gráfico agora são renderizadas corretamente.

18 de maio de 2023

Melhoria:

  • Na API de instrução SQL, a disposição EXTERNAL_LINKS agora oferece suporte ao formato JSON_ARRAY. Você pode extrair até 100 GiB de dados no formato JSON com URLs pré-assinadas. O limite de INLINE para JSON é de 16 MiB.

11 de maio de 2023

Novo recurso:

  • O Navegador de Esquema agora está disponível em geral no Gerenciador de Catálogos.

Melhorias:

  • A exibição do painel de detalhes da tabela de foco é menos sensível.
  • A tecla escape agora fecha o painel de preenchimento automático.
  • As definições de exibição agora têm realce de sintaxe na guia de detalhes do Catalog Explorer.

Correções:

  • As tabelas dinâmicas agora são renderizadas corretamente em dispositivos Windows.
  • As sugestões de conclusão agora seguem corretamente o caso da primeira palavra-chave.

4 de maio de 2023

Databricks SQL Versão 2023.26 Disponível

Cronograma de distribuição

  • Pré-lançamento para 2023.26: entre 19 de abril de 2023 e 25 de abril de 2023
  • Lançamento atual para 2023.26: Entre 3 de maio de 2023 e 10 de maio de 2023

Alterações em 2023.26

  • O Photon retorna um erro se um arquivo for modificado entre o planejamento e a execução da consulta.
  • Novos recursos e suporte estendido para recursos de E/S preditiva. Consulte Databricks Runtime 13.0 (EoS).
  • Use o conector do Azure Databricks para se conectar a outro espaço de trabalho do Azure Databricks.
  • CREATE TABLE LIKE funcionalidade para tabelas Delta.
  • Novos campos de coluna de metadados que indicam o início e o comprimento do bloco de ficheiros.
  • Novas funções geoespaciais H3. Veja funções geoespaciais H3 .
  • Novas funções internas do SQL. Consulte Databricks Runtime 13.0 (EoS).

Atualizações da interface do usuário

Melhorias:

  • Os administradores podem alterar os proprietários do armazém usando a interface do usuário ou a API. Consulte Gerenciar um armazém SQL.
  • O Catalog Explorer agora exibe entidades de serviço de conta em listas de usuários para ativos no Unity Catalog. Por exemplo, as entidades de serviço de conta ficam visíveis ao editar privilégios ou alterar proprietários no Gerenciador de Catálogos.
  • Os rótulos de gráficos personalizados suportam a capacidade de fazer referência a qualquer coluna dentro do conjunto de dados.
  • Os filtros do painel agora carregam nomes de coluna, mesmo ao usar consultas que não têm informações de catálogo ou esquema.

27 de abril de 2023

Melhorias:

  • O editor SQL agora depende do editor de Mônaco para uma experiência de edição mais confiável.
  • A página de listagem do Histórico do SQL (Consultas) agora inclui o Dubois Design System.

20 de abril de 2023

Melhorias:

  • Apresenta novas tabelas dinâmicas que permitem agregar mais de 64 mil resultados.
  • As tabelas e visualizações do Databricks SQL agora suportam BigInt, decimais de 38 bits e caracteres não UTF-8. Para números, a configuração padrão agora é precisão de dígitos definida pelo usuário.
  • O preenchimento automático agora sugere junções passadas frequentes para tabelas do Unity Catalog, com base em dados de linhagem do Unity Catalog no Databricks Runtime 12.0 e versões superiores.

Novo recurso:

  • Devolver texto gerado por um grande modelo de linguagem (LLM) selecionado dado o prompt com ai_generate_text. Esta função só está disponível como visualização pública no Databricks SQL Pro e Serverless. Para participar da visualização pública, preencha e envie o formulário de inscrição AI Functions Public Preview.

13 de abril de 2023

Novo recurso:

  • O tipo TIMESTAMP_NTZ representa valores que compreendem os campos ano, mês, dia, hora, minuto e segundo. Todas as operações são realizadas independentemente do fuso horário. Consulte TIMESTAMP_NTZ tipo.

Melhorias:

  • Os usuários agora podem enviar resultados formatados em alertas usando a marca QUERY_RESULT_TABLE em uma mensagem de alertas personalizada.
  • Os usuários agora podem visualizar o tamanho dos dados do arquivo para tabelas do Catálogo Unity no Gerenciador de Catálogos.

6 de abril de 2023

Databricks SQL Versão 2023.20 Disponível

Cronograma de distribuição

  • Lançamento de pré-visualização para 2023.20: entre 15 de março de 2023 e 23 de março de 2023
  • Lançamento atual da versão 2023.20: Entre 27 de março de 2023 e 3 de abril de 2023

Alterações em 2023.20

  • A evolução do esquema Delta Lake suporta a especificação de colunas de origem em instruções de mesclagem.
  • Remova todos os elementos NULL de uma matriz usando array_compact.
  • Para acrescentar elementos a uma matriz, use array_append.
  • Para anonimizar valores de cadeia de caracteres confidenciais, use a função de máscara .
  • As condições de erro comuns agora retornam SQLSTATE.
  • Invoque funções geradoras com valor de tabela na cláusula FROM regular de uma consulta.
  • Use as funções from_protobuf e to_protobuf para trocar dados entre os tipos binário e struct. Consulte de buffers de protocolo de leitura e gravação .
  • Melhoria na consistência do comportamento de confirmação Delta em transações vazias relacionadas aos comandos update, deletee merge.
  • Mudança de comportamento
    • A funcionalidade de alias da coluna lateral introduz alterações no comportamento durante a resolução de nomes. Consulte Alterações de comportamento.

Atualizações da interface do usuário

Melhorias:

  • O Catalog Explorer agora suporta a exclusão de metastore do Hive.
  • A mensagem para o estado inicial do editor de visualização mudou de Faltando colunas necessárias para Sem dados.

3 de abril de 2023

Novo recurso:

30 de março de 2023

Melhorias:

  • Na página de monitoramento de depósito, agora você pode exibir o histórico de consultas para o intervalo de tempo selecionado, juntamente com seus gráficos de escala. Você também pode visualizar consultas em execução e em fila, sessões SQL ativas, o status do armazém e a contagem atual de clusters. Consulte Monitor um armazém de SQL.
  • O agrupamento de mapas agora está desativado por padrão nos mapas de marcadores.
  • Foram adicionadas dicas de ferramentas para truncamento de visualização e limites de renderização.

Correções:

  • Os gráficos agora respeitam a ordem original quando a classificação é desativada para os valores do eixo e o gráfico tem o grupo por coluna.

23 de março de 2023

Melhorias:

  • As visualizações agora suportam a agregação de tempo por semana.
  • Total agora calcula todos os dados além das 100 x 100 células até 64k resultados em tabelas dinâmicas de notebooks.
  • Os usuários agora podem formatar valores de célula na nova tabela dinâmica de blocos de anotações.
  • Linhagem de arquivo, consulta e repositório de recursos estão disponíveis.

16 de março de 2023

Melhoria:

  • Suporte para sintaxe GROUP BY ALL.

9 de março de 2023

Novo recurso:

  • A API de Execução de Instrução SQL do Databricks agora está disponível em Visualização Pública. Execução de Instruções fornece endpoints que estão a executar instruções SQL num armazém SQL do Databricks. Ele também pode verificar o status, buscar resultados e cancelar uma instrução SQL em execução.

Melhoria:

  • O console de administração do SQL foi combinado com as configurações gerais admin para criar uma experiência unificada para usuários administradores. Todas as configurações de administração do SQL agora são acessadas no console de administração.
  • Os destinos de alerta agora são chamados de destinos de notificação.

Correções:

  • As tabelas não exibem mais duas barras de rolagem.
  • Os títulos de widgets em branco não são mais substituídos nos painéis.

2 de março de 2023

Correção:

  • Agora você pode usar URLs relativas em tabelas para acessar painéis.

23 de fevereiro de 2023

Melhoria:

  • TINYINT agora é suportado em tabelas de resultados em notebooks.

Correção:

  • Corrigido um bug em que a rolagem no modal de filtro do painel de criação resultava em um erro.

16 de fevereiro de 2023

Melhorias:

  • Os rótulos de dados nos gráficos agora mostram mais caracteres para evitar truncar descrições.
  • O Autocomplete agora reconhece as funções range() e Python UDF create.
  • O preenchimento automático agora evita iniciar trechos em decimais e em comentários de código.

Correções:

  • Os utilizadores podem agora aumentar o zoom nos mapas.
  • Nos blocos de notas, as cores são agora corretamente atribuídas aos gráficos.

2 de fevereiro de 2023

Melhorias:

  • Suporte para DESCRIBE DETAILS no editor.
  • Melhorou-se a velocidade de carregamento do visualizador de esquemas.
  • Agora você pode visualizar uma lista de colunas possíveis no painel lateral de um SELECT *.

26 de janeiro de 2023

Melhoria:

  • As mensagens de erro da sua consulta agora incluem links para o tópico de documentação relacionado que descreve o erro.

19 de janeiro de 2023

Melhorias:

  • Agora você pode encontrar um painel Novidades que destaca os principais aprimoramentos. Você pode abrir e fechar este painel clicando no ícone de presente.
  • Os administradores agora podem alterar a propriedade dos armazéns SQL.
  • Agora você pode filtrar várias visualizações em um painel clicando em Adicionar Filtro> e selecionando a consulta e as colunas para filtragem.

12 de janeiro de 2023

Melhorias:

  • Os títulos dos widgets de visualização nos painéis agora são formatados como Nome da visualização - Nome da consulta por padrão.
  • Adicionadas funções geoespaciais H3 à referência do painel em linha.
  • Adicionadas referências embutidas para sintaxe SQL, como CREATE TABLE e OVER.

Correções:

  • As opções de classificação e de ordem inversa agora estão disponíveis quando a escala do eixo X está definida como automática.
  • Os mapas de calor e as tabelas dinâmicas agora são responsivos para determinados casos extremos.
  • As marcas de escala do eixo Y categórico agora são classificadas por padrão.
  • Os rascunhos de consulta não são mais perdidos depois de fazer uma atualização do navegador.