DLT versão 2023.30
31 de julho - 4 de agosto de 2023
Esses recursos e melhorias foram lançados com a versão 2023.30 do DLT.
Versões do Databricks Runtime usadas por esta versão
Canal:
- Atual (padrão): Databricks Runtime 11.3.16
- PRÉVIA: Databricks Runtime 12.2.9
Novos recursos e melhorias nesta versão
- Mudança significativa: os clusters da
maintenance
de pipeline agora herdam as definições de configuração de cluster que definiste com o rótulo de clusterdefault
. Anteriormente, as configurações necessárias para os clustersupdates
emaintenance
precisavam ser configuradas manualmente para ambos os clusters nas configurações de pipeline. Como as configurações agora são herdadas automaticamente pelo clustermaintenance
, essa alteração melhora a confiabilidade do processamento de manutenção. Use o rótuloupdates
para configurações que não devem ser aplicadas amaintenance
clusters. Consulte Configurar computação para um pipeline DLT.
- Esta versão inclui melhorias de desempenho que reduzem o tempo de configuração de tabelas quando a DLT executa uma atualização. Essas melhorias de desempenho reduzem o tempo total de execução de atualizações de pipeline.
- Um novo painel de de detalhes do conjunto de dados com guias fornece uma interface de usuário mais limpa ao exibir detalhes sobre um conjunto de dados em seu pipeline e facilita a localização de informações específicas sobre seus conjuntos de dados.