Partilhar via

DLT versão 2023.41

  • Artigo

16 de setembro - 20 de outubro de 2023

Esses recursos e melhorias foram lançados com a versão 2023.41 do DLT.

Observação

Os lançamentos são implementados em fases. Sua versão DLT, incluindo as versões do Databricks Runtime, pode não ser atualizada até uma semana ou mais após a data de lançamento inicial.

Versões do Databricks Runtime usadas por esta versão

Canal:

  • ATUAL (padrão): Databricks Runtime 12.2.14
  • PRÉVIA: Databricks Runtime 13.3.3

Novos recursos e melhorias nesta versão

  • Agora você pode adicionar monitoramento e alertas personalizados aos seus pipelines de DLT usando ganchos de eventos (Visualização pública). Por exemplo, usando ganchos de eventos, você pode enviar e-mails ou integrar com soluções de monitoramento de terceiros para enviar alertas quando eventos selecionados ocorrerem.
  • Esta versão melhora a deteção e as mensagens de erro para dependências circulares num pipeline. Por exemplo, quando uma tabela a jusante é referenciada para criar uma tabela a montante.

Correções de bugs nesta versão

  • Esta versão corrige um problema que faz com que um pipeline falhe quando uma consulta SCD tipo 1 com expectativas ativadas tem uma incompatibilidade de maiúsculas e minúsculas nos nomes das colunas.
  • Com esta versão, os valores padrão da política de cluster são aplicados corretamente quando a configuração apply_policy_default_values é definida como true na configuração do pipeline. Anteriormente, em alguns casos, as políticas padrão de cluster não eram aplicadas corretamente. Ver Selecionar uma política de cluster.