다음을 통해 공유

DLT 릴리스 2025.04

  • 아티클

2025년 1월 23일 -30일

이러한 기능 및 향상된 기능은 DLT의 2025.04 릴리스와 함께 릴리스되었습니다.

이 릴리스에서 사용하는 Databricks 런타임 버전

채널:

  • CURRENT(기본값): Databricks Runtime 15.4
  • 미리 보기: Databricks Runtime 15.4 또는 16.1

메모

DLT 채널 릴리스는 롤링 업그레이드 프로세스를 따르므로 채널 업그레이드는 서로 다른 시간에 다른 지역에 배포됩니다. Databricks 런타임 버전을 포함한 릴리스는 초기 릴리스 날짜 이후 일주일 이상까지 업데이트되지 않을 수 있습니다. 파이프라인에 대한 Databricks 런타임 버전을 찾으려면 런타임 정보참조하세요.

새로운 기능 및 개선 사항

  • 기본적으로 새 DLT 파이프라인은 여러 카탈로그 및 스키마에서 구체화된 뷰 및 스트리밍 테이블을 만들고 업데이트할 수 있습니다. 파이프라인 구성에 대한 이 새로운 기본 동작을 사용하려면 사용자가 파이프라인의 기본 스키마가 되는 대상 스키마를 지정해야 합니다. LIVE 가상 스키마 및 관련 구문은 더 이상 필요하지 않습니다. 자세한 내용은 대상 카탈로그 및 스키마설정, DLT 파이프라인 구성 및 LIVE 스키마(레거시) 참조하세요.
  • 이제 Databricks REST API에서 clone a pipeline 요청이 일반적으로 사용 가능합니다. 이 요청을 사용하여 Hive 메타스토어에 게시하는 기존 파이프라인을 Unity 카탈로그에 게시하는 새 파이프라인에 복사할 수 있습니다. Hive 메타스토어 파이프라인 복제하여 Unity 카탈로그 파이프라인 만들기참조하세요.
  • DLT 파이프라인 업데이트에 대한 스트리밍 워크로드 메트릭 보기 지원은 공개 미리 보기로 제공됩니다. 이제 DLT UI에서 파이프라인 업데이트를 볼 때 파이프라인의 각 스트리밍 흐름에 대한 백로그 초, 백로그 바이트, 백로그 레코드 및 백로그 파일과 같은 메트릭을 볼 수 있습니다. 스트리밍 메트릭은 Apache Kafka, Amazon Kinesis 및 자동 로더를 비롯한 Spark 구조적 스트리밍 원본에 대해 지원됩니다. 스트리밍 메트릭 보기를 참조하세요.