DLT versão 2023.11
20 a 24 de março de 2023
Esses recursos e melhorias foram lançados com a versão 2023.11 do DLT.
Versões do Databricks Runtime usadas por esta versão
Canal:
- ATUAL (padrão): Databricks Runtime 11.3.6
- PRÉVIA: Databricks Runtime 12.1.2
Novos recursos e melhorias nesta versão
Agora você pode obter status em tempo real para suas atualizações de pipeline com notificações por e-mail. Você pode configurar um ou mais endereços de e-mail para receber notificações quando:
- Uma atualização de pipeline é concluída com êxito, falha com um erro passível de repetição ou falha com um erro não passível de repetição.
- Um único fluxo de dados falha.
Para configurar emails de notificação, clique em Notificações nas definições do pipeline ao criar ou editar um pipeline. Consulte Adicionar notificações por e-mail para eventos de pipeline.
- Esta versão inclui alterações para melhorar a experiência do usuário quando você visualiza a lista de pipelines na interface do usuário DLT. As alterações incluem um aumento no número de pipelines exibidos em cada página. Por padrão, 20 pipelines são exibidos em cada página. O padrão anterior era exibir 10 pipelines em cada página.
- Com esta versão, você verá avisos de descontinuação no log de eventos DLT se qualquer uma das definições do conjunto de dados Python incluir backticks que circundem o nome do conjunto de dados, por exemplo, definindo uma tabela como
dlt.table(name="`table.name`")
.
Correções de bugs nesta versão
- Esta versão corrige um bug que causa um erro ao usar o comando
spark.sql("SHOW CATALOGS")
.SHOW CATALOGS
agora é um comando suportado.