다음을 통해 공유

Databricks SQL 릴리스 정보 2024

  • 아티클

다음은 2024년 1월부터 12월까지 Databricks SQL의 개선 사항 및 업데이트에 대해 간략하게 설명합니다.

2024년 11월 21일

SQL 웨어하우스 시스템 테이블 (공개 미리 보기)

  • system.compute.warehouses 테이블은 SQL 웨어하우스가 생성, 편집 및 삭제될 때 기록됩니다. 테이블을 사용하여 웨어하우스 이름, 유형, 크기, 채널, 태그, 자동 중지 및 자동 크기 조정 설정을 비롯한 웨어하우스 설정의 변경 내용을 모니터링할 수 있습니다. Warehouses 시스템 테이블을 참조하세요.

데이터 검색

  • 카탈로그 탐색기의 계보 탭이 엔터티 필터링을 위한 향상된 UI로 다시 디자인되었습니다.

2024년 11월 13일

레거시 대시보드 :

  • 템플릿 기반 도구 설명이 이중 축 및 다중 필드 축 차트에 대한 자세한 내용을 표시하지 않는 문제를 해결했습니다.

2024년 11월 6일

Databricks SQL 스트리밍 테이블 및 구체화된 뷰에 대한 사람이 읽기 쉬운 일정 지원

이제 사용자는 CRON 예약의 사람이 읽을 수 있는 구문 instad를 사용하여 스트리밍 테이블 및 구체화된 뷰에 대한 일정을 시작, 생성 및 변경할 수 있습니다. ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEW및 CREATE STREAMING TABLE참조하세요.

이제 스트리밍 테이블이 시간 이동 쿼리를 지원합니다.

이제 시간 이동 기능을 사용하여 타임스탬프 또는 테이블 버전(트랜잭션 로그에 기록된 대로)을 기반으로 이전 테이블 버전을 쿼리할 수 있습니다. 시간 이동 쿼리를 사용하기 전에 스트리밍 테이블을 새로 고쳐야 할 수 있습니다. Delta Lake 시간 여행이란 무엇인가요?

시간 이동 쿼리는 구체화된 뷰에 대해 지원되지 않습니다.

2024년 10월 31일

사용자 인터페이스 업데이트

새 SQL 편집기 (공개 미리 보기)

  • 이제 바로 가기 키 Command(또는 Ctrl) + Shift + Enter사용하여 활성 SQL 쿼리를 실행할 수 있습니다.
  • 이제 텍스트가 표시 창 외부로 확장되면 매개 변수 입력 영역에 스크롤 막대가 표시됩니다.
  • 쿼리 프로필 세부 정보 페이지가 완전히 열리지 않는 문제를 해결했습니다.
  • 이제 탭 제목에 새 이름을 입력하여 쿼리의 이름을 바꿀 수 있습니다.
  • 이제 이전에 저장한 적이 없는 쿼리에 대해 일정 단추가 비활성화되었습니다.

2024년 10월 24일

AI/BI 도구에 대한 릴리스 정보

AI/BI 대시보드 및 AI/BI Genie에 대한 릴리스 정보는 AI/BI 릴리스 정보로 이동되었습니다. 향후 릴리스 및 업데이트가 문서화될 예정입니다.

2024년 10월 17일

알림 전송지는 이제 일반적으로 사용 가능합니다.

작업 영역 사용자가 경고, Databricks 작업 및 AI/BI 대시보드 일정과 같은 특정 워크플로에 추가하여 이벤트가 실행되면 이메일 또는 웹후크를 보낼 수 있는 알림 대상을 만들고 구성할 수 있습니다. 알림 대상 관리을 참조하세요.

2024년 10월 10일

구체화된 뷰 및 스트리밍 테이블은 이제 Databricks SQL에서 일반 공급됩니다.

스트리밍 테이블은 클라우드 스토리지 및 메시지 큐에서 증분 수집을 가능하게 하고, 구체화된 뷰는 새 데이터가 도착하면 자동으로 증분 방식으로 업데이트되는 미리 계산된 뷰입니다. Databricks SQL에서 구체화된 뷰를 사용하는 것에 대한 참조는 및, 스트리밍 테이블을 사용하여 데이터를 로드하는 것에 대한 참조는 및입니다.

쿼리 인사이트

2024년 10월 3일

서버리스 SQL 웨어하우스 지원 확장

서버리스 SQL 웨어하우스는 이제 swedencentral 지역에서 사용할 수 있습니다. 제한된 지역 가용성 기능 을(를) 참조하세요.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

카탈로그 탐색기

  • 이제 AI에서 생성된 주석은 카탈로그, 스키마, 볼륨, 모델 및 함수에 대해 지원되며 사용자는 인라인 채팅 도우미를 사용하여 메모를 편집할 수 있습니다.

SQL AI 함수vector_search() 함수는 이제 공개 미리 보기에서 사용할 수 있습니다. vector_search 함수 참조

2024년 9월 26일

서버리스 SQL 웨어하우스 지원 확장

서버리스 SQL 웨어하우스는 이제 francecentral 지역에서 사용할 수 있습니다. 제한된 지역 가용성 의 기능을 참조하세요.

2024년 9월 11일

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

SQL 편집기

이제 SQL 편집기에서 명명된 매개 변수 표식 구문을 사용할 수 있습니다. 명명된 매개 변수 표식 구문은 SQL 편집기, Notebook 및 AI/BI 대시보드에서 사용할 수 있습니다. 쿼리 매개 변수과 함께 작업을 참조하세요.

쿼리 및 레거시 대시보드

SQL 쿼리 및 레거시 대시보드의 경우 삭제된 항목이 목록 페이지에 더 이상 표시되지 않습니다. 작업 영역 휴지통 폴더에서 삭제된 항목을 찾습니다. 작업 영역 관리자는 모든 사용자의 휴지통 폴더에서 삭제된 항목을 볼 수 있습니다.

2024년 9월 5일

2024.40의 변경 내용

Databricks SQL 버전 2024.40에는 다음과 같은 동작 변경, 새로운 기능 및 개선 사항이 포함됩니다.

동작 변경

  • 뷰 대한 기본 스키마 바인딩 모드로 변경

    이제 뷰는 일반 캐스팅 규칙과 함께 스키마 보정을 사용하여 기본 쿼리의 스키마 변경 내용에 맞게 조정됩니다. 이는 뷰를 참조할 때 안전한 캐스트를 수행할 수 없을 때 오류를 발생시킨 BINDING 모드의 이전 기본값에서 변경된 것입니다.

    CREATE VIEW 및 cast 함수참조하세요.

  • 부울 식 외부에서 NOT 대신 ! 문서화되지 않은 구문을 사용할 수 없습니다.

    이번 릴리스에서 부울 식 외부에서는 !를 NOT의 동의어로 사용할 수 없습니다. 예를 들어, 다음과 같은 문장: CREATE ... IF ! EXISTS, IS ! NULL, ! NULL 열 또는 필드 속성, ! IN 및 ! BETWEEN은 CREATE ... IF NOT EXISTS, IS NOT NULL, NOT NULL 열 또는 필드 속성, NOT IN 및 NOT BETWEEN로 바꿔야 합니다.

    이렇게 변경하면 일관성이 보장되고 SQL 표준과 일치하며 SQL 이식성이 높아집니다.

    부울 접두사 연산자!(예: !is_mgr 또는 !(true AND false))은 이 변경의 영향을 받지 않습니다.

  • 뷰에서 문서화되지 않은 열 정의 구문을 허용하지

    Databricks는 명명된 열 및 열 주석이 있는 CREATE VIEW 지원합니다. 이전에는 열 형식, NOT NULL 제약 조건 또는 DEFAULT 사양이 허용되었습니다. 이 릴리스에서는 더 이상 이 구문을 사용할 수 없습니다.

    이 변경은 일관성을 보장하고, SQL 표준에 부합하며, 향후 향상된 기능을 지원합니다.

  • 잘못된 열에 CHECK 제약 조건을 추가하면 UNRESOLVED_COLUMN.WITH_SUGGESTION 오류 클래스 반환됩니다.

    더 유용한 오류 메시지를 제공하기 위해, Databricks Runtime 15.3 이상에서는 잘못된 열 이름을 참조하는 CHECK 제약 조건이 포함된 ALTER TABLE ADD CONSTRAINT 문에서 UNRESOLVED_COLUMN.WITH_SUGGESTION 오류 클래스를 반환합니다. 이전에 INTERNAL_ERROR이 반환되었습니다.

새로운 기능 및 개선 사항

  • ALTER TABLE 를 사용하여 UniForm Iceberg를 활성화하세요.

    이제 데이터 파일을 다시 작성하지 않고 기존 테이블에서 UniForm Iceberg를 사용하도록 설정할 수 있습니다. 기존 테이블 에 대해 Iceberg 읽기를활성화하는 것을 확인하세요.

  • UTF-8 유효성 검사 함수

    이 릴리스에서는 UTF-8 문자열의 유효성을 검사하기 위한 다음 함수를 소개합니다.

    • is_valid_utf8 문자열이 유효한 UTF-8 문자열인지 여부를 확인했습니다.
    • make_valid_utf8 대체 문자를 사용하여 잠재적으로 잘못된 UTF-8 문자열을 유효한 UTF-8 문자열로 변환합니다.
    • validate_utf8 입력이 유효한 UTF-8 문자열이 아니면 오류가 발생합니다.
    • try_validate_utf8 입력이 유효한 UTF-8 문자열이 아니면 NULL 반환합니다.

  • to_avro 및 from_avro 함수

    to_avro 및 from_avro 함수를 사용하면 SQL 형식을 Avro 이진 데이터로 변환하고 다시 변환할 수 있습니다.

  • try_url_decode 함수

    이 릴리스에서는 URL로 인코딩된 문자열을 디코딩하는 try_url_decode 함수를 소개합니다. 문자열이 올바른 형식이 아니면 함수는 오류를 발생시키는 대신 NULL 반환합니다.

  • 필요에 따라 최적화 프로그램에서 강제되지 않은 외래 키 제약 조건 의존하도록 허용합니다.

    쿼리 성능을 향상시키려면 CREATE 때 FOREIGN KEY 제약 조건에 RELY 키워드를 지정하거나 테이블을 ALTER를 수 있습니다.

  • 체크 제약 조건 테이블 기능 삭제 지원에 대한

    replaceWhere 사용하는 선택적 덮어쓰기는 이제 데이터를 삭제하고 새 데이터를 병렬로 삽입하는 작업을 실행하여 쿼리 성능 및 클러스터 사용률을 향상합니다.

  • 선택적 덮어쓰기에 대한 병렬 처리된 작업 실행

    replaceWhere 사용하는 선택적 덮어쓰기는 이제 데이터를 삭제하고 새 데이터를 병렬로 삽입하는 작업을 실행하여 쿼리 성능 및 클러스터 사용률을 향상합니다.

  • 선택적 덮어쓰기 사용하여 변경 데이터 피드의 성능 향상

    변경 데이터 피드가 있는 테이블에서 replaceWhere 사용하는 선택적 덮어쓰기는 더 이상 삽입된 데이터에 대해 별도의 변경 데이터 파일을 작성하지 않습니다. 이러한 작업은 기본 Parquet 데이터 파일에 있는 숨겨진 _change_type 열을 사용하여 쓰기 증폭 없이 변경 내용을 기록합니다.

  • COPY INTO 명령 대한 쿼리 대기 시간이 향상되었습니다.

    이 릴리스에는 COPY INTO 명령에 대한 쿼리 대기 시간을 개선하는 변경 내용이 포함되어 있습니다. 이러한 개선은 RocksDB 상태 저장소에서 상태를 비동기식으로 로드하여 구현됩니다. 이 변경으로 이미 수집된 파일이 많은 쿼리와 같이 상태가 큰 쿼리의 시작 시간이 향상됩니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

시각화

  • 이제 누적 차트에 대해서만 툴팁 합계가 표시됩니다.

2024년 8월 22일

시각화

그룹화 및 다중 필드 구성의 경우 이제 차트 요소를 마우스로 가리킬 때 도구 설명에 합계가 표시됩니다.

2024년 8월 15일

시각화

페이지 크기를 변경한 후 테이블 시각화의 행 번호가 업데이트되지 않는 문제를 해결했습니다.

데이터 검색

이제 Unity 카탈로그 테이블에서 중첩된 복합 열 형식을 확장하고 축소하는 기능이 지원됩니다.

2024년 8월 1일

시각화

  • 이제 필터링으로 인해 데이터가 변경될 때 테이블 정렬이 유지됩니다.

SQL 편집기:

  • 쿼리의 마지막 줄과 결과 출력 사이에 안쪽 여백을 추가하여 가독성을 향상했습니다.

2024년 7월 25일

Databricks REST API:

  • 쿼리, 경고, 데이터 원본 및 사용 권한을 관리하기 위한 API가 변경되었습니다. 레거시 버전은 6개월 동안 계속 지원됩니다. 이 전환 기간은 이전 버전이 단계적으로 중단되기 전에 애플리케이션 및 통합을 새 버전으로 마이그레이션할 수 있는 충분한 시간을 제공하기 위한 것입니다. 최신 Databricks SQL API 버전 업데이트를 참조하세요.

2024년 7월 18일

사용자 인터페이스 업데이트

카탈로그 탐색기:

  • 이제 카탈로그를 만들 때 작업 영역 바인딩, 카탈로그 권한 및 메타데이터를 설정하는 데 새 카탈로그 구성 마법사를 사용할 수 있습니다.

SQL Warehouse 모니터링:

  • CAN MONITOR 권한은 이제 일반적으로 사용 가능합니다. 권한 있는 사용자가 연결된 쿼리 기록 및 쿼리 프로필을 포함하여 SQL 웨어하우스를 모니터링할 수 있습니다. SQL 웨어하우스 ACL 참조하세요.

2024년 7월 11일

Databricks SQL 버전 2024.35 사용 가능

출시 일정: 2024.35 미리 보기 출시: 7월 9일부터 7월 15일까지

2024.35의 변경 내용

삭제 기능을 사용하여 열 매핑 사용 안 함

이제 DROP FEATURE 사용하여 델타 테이블에서 열 매핑을 사용하지 않도록 설정하고 테이블 프로토콜을 다운그레이드할 수 있습니다. 열 매핑 사용하지 않도록 설정하는참조하세요.

공개 미리 보기의 Variant 형식 구문 및 함수

이제 Spark DataFrames 및 SQL에서 VARIANT 형식으로 반구조화된 데이터 작업을 위한 기본 제공 Apache Spark 지원을 사용할 수 있습니다. 쿼리 변형 데이터참조하세요.

공개 미리 보기의 Delta Lake에 대한 변형 유형 지원

이제 VARIANT 사용하여 Delta Lake에서 지원되는 테이블에 반구조화된 데이터를 저장할 수 있습니다. Delta Lake 의Variant 지원을 참조하세요.

보기에서 다양한 스키마 진화 모드 지원

이제 CREATE VIEW 및 ALTER VIEW 사용하여 스키마 바인딩 모드를 설정하여 뷰가 기본 개체의 스키마 변경 내용을 처리하는 방법을 향상시킬 수 있습니다. 이 기능을 사용하면 뷰가 기본 개체의 스키마 변경 내용을 허용하거나 적용할 수 있습니다. 개체 정의 수정으로 인한 쿼리 스키마의 변경 내용을 해결합니다.

일부 창 함수의 성능 향상

이 릴리스에는 일부 Spark 창 함수, 특히 ORDER BY 절 또는 window_frame 매개 변수를 포함하지 않는 함수의 성능을 향상시키는 변경 내용이 포함되어 있습니다. 이러한 경우 시스템은 쿼리를 다시 작성하여 집계 함수를 사용하여 실행할 수 있습니다. 이렇게 변경하면 부분 집계를 사용하고 실행 중인 창 함수의 오버헤드를 방지하여 쿼리를 더 빠르게 실행할 수 있습니다. Spark 구성 매개 변수는 spark.databricks.optimizer.replaceWindowsWithAggregates.enabled 이 최적화를 제어하며 기본적으로 true 설정됩니다. 이 최적화를 해제하려면 spark.databricks.optimizer.replaceWindowsWithAggregates.enabledfalse설정합니다.

추가된 try_mod 함수에 대한 지원

이 릴리스에서는 PySpark try_mod() 함수에 대한 지원을 추가합니다. 이 함수는 두 개의 숫자 값을 나누어 정수 나머지의 ANSI SQL 호환 계산을 지원합니다. divisor 인수가 0이면 try_mod() 함수는 예외를 throw하는 대신 null을 반환합니다. mod 또는 %대신 try_mod() 함수를 사용할 수 있습니다. 이 함수는 divisor 인수가 0이고 ANSI SQL을 사용하는 경우 예외를 throw합니다.

사용자 인터페이스 업데이트

SQL 편집기:

이제 SQL 편집기에서 인라인 도우미를 사용할 수 있습니다. 편집기 상자에서 도우미 아이콘을 클릭하여 입력을 전환합니다. 영어로 질문이나 메모를 입력한 다음 Enter 키를 눌러(쿼리를 실행하는 Shift+Enter가 아님) 편집기에서 직접 다른 보기로 응답을 생성합니다.

플랫폼:

이제 알림 대상에 대한 API를 사용할 수 있습니다. 이제 경고 및 작업 실행 알림에 대한 웹후크 및 전자 메일 대상을 프로그래밍 방식으로 관리할 수 있습니다. 알림 대상 을 참조하세요.

2024년 7월 4일

Databricks SQL 버전 2024.30 사용 가능

출시 일정: 2024.30 미리 보기 출시: 7월 9일부터 7월 15일까지

2024.30의 변경 내용

레이크하우스 페더레이션이 일반적으로 사용 가능합니다 (GA).

Lakehouse Federation 커넥터는 이제 다음 데이터베이스 유형에 대해 일반 공급(GA)됩니다.

  • MySQL
  • PostgreSQL
  • Amazon Redshift
  • 눈송이
  • Microsoft SQL Server
  • Azure Synapse(SQL Data Warehouse)
  • Databricks

이 릴리스에서는 다음과 같은 향상된 기능도 소개합니다.

  • 서버리스 컴퓨팅 환경에서 SQL Server 커넥터에서 Azure Private Link를 지원합니다. 3단계:프라이빗 엔드포인트 규칙 만들기를 참조하세요.
  • 추가 푸시다운(문자열, 수학, 기타 함수)을 지원합니다.
  • 다양한 쿼리 셰이프에서 푸시다운 성공률이 향상되었습니다.
  • 추가 푸시다운 디버깅 기능:
    • EXPLAIN FORMATTED 출력에는 푸시다운된 쿼리 텍스트가 표시됩니다.
    • 쿼리 프로필 UI는 푸시다운된 쿼리 텍스트, 페더레이션된 노드 식별자 및 JDBC 쿼리 실행 시간(자세한 정보 표시 모드)을 표시합니다. 시스템 생성 페더레이션 쿼리보기를 참조하세요.

이제 DESCRIBE HISTORY 액체 클러스터링을 사용하는 테이블에 대한 클러스터링 열을 표시합니다.

DESCRIBE HISTORY 쿼리를 실행할 때 operationParameters 열에는 기본적으로 CREATE OR REPLACE 및 OPTIMIZE 작업에 대한 clusterBy 필드가 표시됩니다. 액체 클러스터링을 사용하는 델타 테이블의 경우 clusterBy 필드는 테이블의 클러스터링 열로 채워집니다. 테이블에서 액체 클러스터링을 사용하지 않는 경우 필드는 비어 있습니다.

기본 및 외장 키에 대한 지원은 일반적으로 사용할 수 있습니다.

Databricks 런타임의 기본 및 외장 키에 대한 지원은 일반적으로 사용할 수 있습니다. GA 릴리스에는 기본 키와 외장 키를 사용하는 데 필요한 권한에 대한 다음과 같은 변경 내용이 포함되어 있습니다.

  • 기본 키가 포함된 테이블에 대한 SELECT 권한이 있어야 외래 키를 정의할 수 있습니다. 이전에는 필요했던 기본 키를 사용하여 테이블을 소유할 필요가 없습니다.
  • CASCADE 절을 사용하여 기본 키를 삭제해도 기본 키를 참조하는 외래 키를 정의하는 테이블에 대한 권한이 필요하지 않습니다. 이전에는 참조 테이블을 소유해야 했습니다.
  • 이제 제약 조건이 포함된 테이블을 삭제하려면 제약 조건을 포함하지 않는 테이블을 삭제하는 것과 동일한 권한이 필요합니다.

테이블 또는 뷰에서 기본 및 외장 키를 사용하는 방법을 알아보려면 CONSTRAINT 절, ADD CONSTRAINT 절및 DROP CONSTRAINT 절참조하세요.

리퀴드 클러스터링이 있을 경우 GA입니다

이제 Liquid 클러스터링에 대한 지원은 Databricks Runtime 15.2 이상을 사용하여 일반 공급됩니다. 델타 테이블 대한 액체 클러스터링 사용참조하세요.

형식 확대는 공개 미리 보기로 제공됩니다.

이제 Delta Lake에서 지원하는 테이블에서 형식 확대를 사용하도록 설정할 수 있습니다. 형식 확장이 활성화된 테이블은 기본 데이터 파일을 다시 작성하지 않고 열 형식을 더 넓은 데이터 형식으로 변경할 수 있습니다. 형식 확대참조하세요.

SQL 병합 구문에 추가된 스키마 진화 절

이제 WITH SCHEMA EVOLUTION 절을 SQL 병합 문에 추가하여 작업에 대한 스키마 진화를 사용하도록 설정할 수 있습니다. 병합 에 대한스키마 변경 구문을 참조하세요.

진공 인벤토리 지원

이제 Delta 테이블에서 VACUUM 명령을 실행할 때 고려할 파일 인벤토리를 지정할 수 있습니다. OSS Delta 문서를 참조하세요.

Zstandard 압축 함수 지원

이제 zst_compress, zstd_decompress및 try_zstd_decompress 함수를 사용하여 BINARY 데이터를 압축 및 압축 해제할 수 있습니다.

이제 SQL UI의 쿼리 계획이 PhotonWriteStage을 올바르게 표시합니다.

SQL UI에 표시되면 쿼리 계획의 write 명령이 PhotonWriteStage 연산자로 잘못 표시되었습니다. 이 릴리스에서는 PhotonWriteStage 스테이지로 표시하도록 UI가 업데이트됩니다. 이는 UI 변경에만 해당하며 쿼리 실행 방식에는 영향을 주지 않습니다.

사용자 인터페이스 업데이트

API 지원:

  • 이제 REST API를 사용하여 알림 대상을 관리할 수 있습니다. 알림 대상참조.

2024년 6월 27일

Databricks SQL의 구체화된 뷰 및 스트리밍 테이블에 대한 행 필터와 열 마스크는 공개 미리보기 상태입니다.

Databricks SQL 구체화된 뷰 및 스트리밍 테이블의 행 필터 및 열 마스크는 공개 미리 보기입니다. 공개 미리 보기 릴리스에는 다음과 같은 변경 내용이 포함됩니다.

  • Databricks SQL 구체화된 뷰 또는 스트리밍 테이블에 행 필터 및 열 마스크를 추가할 수 있습니다.

    • 행 필터 및 열 마스크를 포함하는 테이블에서 Databricks SQL 구체화된 뷰 또는 스트리밍 테이블을 정의할 수 있습니다.

    CREATE MATERIALIZED VIEW 및 CREATE STREAMING TABLE참조하세요.

사용자 인터페이스 업데이트

시각화:

  • 많은 데이터 요소가 있는 원형, 분산형 및 열 지도 차트를 마우스로 가리킬 때 도구 설명 표시 기능의 상호작용성이 향상되었습니다.

카탈로그 탐색기:

  • 개선된 카탈로그 탐색기 UI를 사용하면 빠른 액세스 보기에서 최근 Unity 카탈로그 자산을 더 쉽게 검색하고 즐겨찾기할 수 있습니다. 탐색 환경도 간소화되어 화면의 왼쪽 위 모서리에 있는 설정 아이콘설정 사용하여 컴퓨팅, 스토리지, 자격 증명, 연결, DBFS 및 관리 세부 정보를 탐색할 수 있습니다. 델타 공유, 클린 룸 및 외부 데이터에는 이제 전용 페이지가 있습니다.

2024년 6월 6일

Databricks SQL 구체화된 뷰 및 스트리밍 테이블에 대한 수정

Databricks SQL 구체화된 뷰 및 스트리밍 테이블에 대한 ALTER SCHEDULE 쿼리가 다음 REFRESH 작업이 해결된 후에만 적용되는 문제입니다. 이제 ALTER SCHEDULE 쿼리가 즉시 적용됩니다. 구체화된 뷰 새로 고침참조하십시오.

Databricks SQL의 구체화된 뷰 및 스트리밍 테이블은 공개 미리 보기입니다.

Databricks SQL의 구체화된 뷰 및 스트리밍 테이블은 공개 미리 보기이며 모든 고객이 사용할 수 있습니다. 공개 미리 보기 릴리스에는 다음과 같은 변경 내용이 포함됩니다.

사용자 인터페이스 업데이트

대시보드:

  • 이제 계정 사용자가 게시된 대시보드에서 시각화 데이터를 다운로드할 수 있습니다.
  • 게시되지 않은 대시보드는 이제 대시보드 위쪽의 초안/게시 드롭다운을 사용하여 게시할 수 있습니다.
  • 제한 매개 변수가 검색되지 않는 문제를 해결했습니다.

시각화:

  • 어두운 모드에서 상자 그림 렌더링이 향상되었습니다.

쿼리 인사이트:

  • SQL 웨어하우스에 연결된 모든 Notebook에 대해, 쿼리를 포함하는 셀 아래에 있는 '성능 확인'을 클릭하여 쿼리 프로필에 액세스할 수 있습니다. 셀에 여러 쿼리가 포함된 경우 각 문에 대해 각각에 대한 쿼리 프로필에 대한 링크가 제공됩니다.

2024년 5월 30일

SQL 웨어하우스에 대한 새 권한 수준

권한을 모니터링할 수 있으므로 사용자는 연결된 쿼리 기록 및 쿼리 프로필을 포함하여 SQL 웨어하우스를 모니터링할 수 있습니다. 공개 미리 보기 에서 모니터링할 수 있는 권한이 이제 가능합니다. SQL 웨어하우스 ACL을 참조하세요.

사용자 인터페이스 업데이트

대시보드 개선:

  • 이미지 및 데이터를 다운로드하기 위한 대시보드 위젯에 케밥 메뉴가 추가되었습니다.
  • 사용자는 레거시 대시보드 쿼리 지원 매개 변수 및 드롭다운 목록 매개 변수를 대시보드로 마이그레이션할 수 있습니다.

2024년 5월 23일

사용자 인터페이스 업데이트

  • 이제 작업 영역에서 여러 항목을 선택하여 이동하거나 삭제할 수 있습니다. 여러 개체를 선택하면 작업 표시줄이 나타나고 항목을 이동하거나 삭제하는 옵션이 제공됩니다. 또한 마우스를 사용하여 여러 항목을 선택하고 새 위치로 끌 수 있습니다. 개체에 대한 기존 권한은 대량 이동 및 삭제 작업 중에 계속 적용됩니다.
  • 이제 카탈로그 탐색기 및 스키마 브라우저에서 Unity 카탈로그 자산을 즐겨찾기로 표시할 수 있습니다. 여기에는 카탈로그, 스키마, 테이블, 모델, 볼륨 및 함수가 포함됩니다. 즐겨찾기로 표시하는 Unity 카탈로그 자산은 Azure Databricks 홈페이지에서 쉽게 액세스할 수 있습니다.

대시보드 업데이트:

  • 이중 축 콤보 차트는 이제 오른쪽 축에 막대 범례를 올바르게 표시하고 꺾은선형 범례를 그에 맞게 표시합니다.
  • 이제 이중 축 차트가 막대에 레이블을 올바르게 표시합니다.

시각화 업데이트:

  • 이제 테이블 편집기의 조건부 서식 레이블이 이고 일 경우일 때에 대해 다크 모드를 지원합니다.
  • 중복 열린 링크 아이콘이 테이블 편집기 형식 도구 설명에서 제거되었습니다.
  • 이제 표 편집기에서 기본 글꼴 색 레이블이 자동으로 정렬됩니다.

2024년 5월 16일

출시 일정

  • 2024.25 미리 보기 출시: 5월 1일 완료
  • 2024.25의 현재 출시: 5월 14일부터 5월 21일까지

메모

pandas Python 라이브러리(버전 2.0.3)로 업그레이드하면서 Databricks SQL 버전 2024.20에 호환성 문제가 발생했습니다. Azure Databricks는 버전 2024.20을 현재 채널에 롤아웃하지 않았습니다. 대신 미리 보기 채널은 2025년 5월 1일에 2024.25로 업그레이드되었습니다. 현재 채널 롤아웃은 2024.15에서 2024.25로 직접 진행합니다.

2024.25의 변경 내용

데이터 거버넌스

자격 증명 통과 및 Hive 메타스토어 테이블 액세스 제어는 더 이상 사용되지 않습니다.

자격 증명 전달 및 Hive 메타스토어 테이블 액세스 제어는 레거시 데이터 거버넌스 모델입니다. 계정의 여러 작업 영역에서 데이터 액세스를 관리하고 감사하는 중앙 위치를 제공하여 데이터의 보안 및 거버넌스를 간소화하려면 Unity 카탈로그로 업그레이드합니다. Unity 카탈로그란?.

자격 증명 통과 및 Hive 메타스토어 테이블 액세스 제어에 대한 지원은 향후 DBR 버전에서 제거될 예정입니다.

SQL 언어 기능

이제 WHERE 절에서 *(star) 절이 지원됩니다.

이제 WHERE 절의 star(*) 절을 사용하여 SELECT 목록의 모든 열을 참조할 수 있습니다. 예를 들어 SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*).

2024.15 이후 지역 간 송신 요금을 방지하기 위한 Cloudflare R2 스토리지 지원

이제 Cloudflare R2를 Unity 카탈로그에 등록된 데이터에 대한 클라우드 스토리지로 사용할 수 있습니다. Cloudflare R2는 주로 데이터가 지역을 넘을 때 클라우드 공급자가 청구하는 데이터 송신 요금을 방지하려는 델타 공유 사용 사례를 위한 것입니다.

Cloudflare R2 스토리지는 Azure Data Lake Storage Gen2에서 지원되는 모든 Databricks 데이터 및 AI 자산을 지원합니다.

Cloudflare R2 복제본을 사용하거나 스토리지를 R2로 마이그레이션하세요. 그리고 Cloudflare R2에 연결하기 위한 스토리지 자격 증명을 생성하세요.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

데이터 검색 업데이트: Hive 메타스토어에서 Unity 카탈로그 업데이트 마법사는 다목적 컴퓨팅 또는 SQL 웨어하우스를 사용하여 Hive 메타스토어 관리 테이블 업그레이드를 지원합니다. 20개 이상의 테이블을 업데이트하면 변환을 수행하는 SYNC AND ALTER TABLE 명령이 포함된 새 Notebook이 만들어집니다.

대시보드 업데이트:

  • 이제 영역, 가로 막대형, 선 및 분산형 차트 종류에 이중 축 기능을 사용할 수 있습니다.
    • 이중 축 차트를 사용하면 축 제목과 범위가 더 이상 보조 축에 복사되지 않습니다.
    • 시각화 구성에서 식별된 마지막 필드는 자동으로 오른쪽 y축으로 재배치됩니다.

2024년 5월 9일

SQL 편집기에서수정합니다.

  • SQL 편집기의 새 결과 테이블에 이제 관리자 설정으로 된 결과 테이블 클립보드 기능이 적용됩니다.

대시보드 개선:

  • 쿼리 기반 매개 변수를 사용하면 작성자가 대시보드 캔버스에서 다른 시각화에 대한 매개 변수로 사용할 수 있는 선택 가능한 값 목록을 정의할 수 있습니다. 을 참조하여 쿼리 기반 매개 변수을 사용하세요.
  • 이제 테이블 위젯에서 다운로드한 파일의 열 순서가 유지됩니다.
  • 이제 테이블 편집기에서 열 이름을 표시하는 가리키기 도구 설명이 포함됩니다.
  • 다른 시각화 형식에서 히스토그램으로 전환할 때 정보 인코딩이 더 잘 보존됩니다.

대시보드 수정 사항:

  • 단일 그리드 높이 필터에 불필요한 오버플로 스크롤 막대가 표시되는 문제가 해결되었습니다.
  • 참조된 데이터 세트 열이 삭제된 게시된 대시보드에서 잘못 렌더링된 시각화를 발생시키는 문제를 해결했습니다.

2024년 5월 2일

대시보드 업데이트:

  • 이제 SQL 편집기에서 쿼리 및 시각화를 새 대시보드로 복사할 수 있습니다. SQL 편집기에서 레거시 대시보드에 시각화를 추가할 수 있습니다. 편집, 다운로드 또는 대시보드추가를 확인하세요.
  • 이제 대시보드는 초기 로드 시간을 최적화하기 위해 24시간 결과 캐시를 유지 관리합니다. 데이터 세트 최적화 및 캐싱참조하세요.
  • 범주 X 및 양적 Y가 있는 가로 막대형 차트는 이제 Databricks Assistant 응답에서 정렬됩니다.
  • 정확한 마이그레이션을 보장하기 위해 레거시 히스토그램 COUNT (*) 마이그레이션 문제를 수정했습니다.
  • 필터 위젯에서 숫자 형식과 날짜 형식을 혼합하는 기능을 구현했습니다.
  • 차트를 만들 때 Databricks Assistant는 이제 입력할 때 관련 열을 자동으로 제안합니다.

시각화 업데이트:

  • 이제 사용자가 선택한 테이블 색이 레거시 차트의 밝은 모드와 어두운 모드에서 유지됩니다.
  • 콤보, 원형, 열 지도 및 히스토그램 차트의 성능을 향상시키기 위해 데이터 잘림 논리가 향상되었습니다.
  • 이제 기본 차트의 양적 축 맨 위에 눈금 표시가 항상 표시됩니다.

2024년 4월 23일

UI 업데이트:

  • UI의 모든 공유 대화 상자에서 All Users 그룹의 이름이 All Workspace Users으로 변경되었습니다. 새 이름은 항상 작업 영역에 할당된 사용자를 포함하는 그룹의 범위를 보다 정확하게 반영합니다. 이 이름 바꾸기의 일부로 그룹 멤버 자격은 변경되지 않습니다.

대시보드 개선:

  • 대시보드의 SQL 웨어하우스가 시작되면 대기 시간을 설명하는 대화 상자가 나타납니다.
  • 스크롤 위치는 Canvas 및 데이터 탭 간에 전환할 때 유지됩니다.
  • 이제 레거시 대시보드를 복제하여 Lakeview 대시보드를 만들면 일부 매개 변수 변환이 지원됩니다. 레거시 매개 변수조정을 참조하세요.
  • 오늘, 내일, 7일 전과 같은 상대 날짜는 이제 날짜 및 날짜 시간 매개 변수에 대해 지원됩니다.
  • 숫자 범위 슬라이더는 대시보드에서 필터로 추가할 수 있습니다.
  • 히스토그램은 이제 집계된 데이터를 표시할 수 있습니다.
  • 이제 산점도는 크기 표시를 지원합니다.

대시보드 수정사항:

  • 이제 임시 색 인코딩이 색 할당을 올바르게 변경할 수 있습니다.

시각화 업데이트:

  • 이제 사용자 지정 도구 모음 형식이 다중 축 차트에 올바르게 작동합니다.
  • 사용자가 지난 14일 동안 토글을 변경하지 않은 경우 새 차트 미리 보기 태그가 제거됩니다.

2024년 4월 18일

Lakeview 대시보드는 일반적으로 사용할 수 있습니다.

이제 Lakeview 대시보드는 기본 대시보드 도구입니다. UI에서 대시보드 이름이 변경되었습니다. 이제 Databricks SQL 대시보드는 레거시 대시보드로 호출됩니다. 관련 API 도구의 이름은 변경되지 않았습니다.

  • 대시보드 개선:
    • 감사 로그는 Lakeview 대시보드에 사용할 수 있습니다. AI/BI 대시보드 이벤트참조하세요.
    • 대시보드에서 다운로드한 데이터는 적용된 매개 변수를 준수합니다.
    • 데이터 세트를 먼저 추가하지 않고 데이터 탭에서 Databricks Assistant를 사용할 수 있습니다.
    • 여러 Y 필드가 있는 누적 가로 막대형 차트는 Y축 값의 합계에 따라 X축 정렬을 지원할 수 있습니다.
    • 시각화 축 메뉴에서 선형 및 Log(대칭) 배율 함수 간에 전환합니다.
    • 이제 필터 위젯의 기본 크기가 더 간결해졌습니다.
    • 텍스트 항목 필터 위젯의 초기 로드 시간이 단축되었습니다.
    • 레거시 대시보드에서 마이그레이션할 때 자동 차트 변환이 향상되었습니다.
  • 대시보드 수정:
    • 대시보드가 다른 사용자와 공유되었는지는 제한된 보기 설정 경고가 표시되지 않습니다.
    • 이제 데이터 탭 SQL 편집기에서 오류 메시지가 어둡게 모드로 설정됩니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

개선 사항:

  • 이제 누적 차트의 도구 설명에 기본적으로 스택 값과 백분율이 표시됩니다.
  • 다중 축 차트의 도구 설명이 마우스로 가리킨 항목을 강조 표시합니다.
  • Databricks SQL에 대한 테이블 시각화는 이제 SQL 편집기에서 편집할 때 새 쿼리 결과의 데이터 형식을 조정합니다.
  • 카탈로그 탐색기의 쿼리 기록 테이블에는 쿼리 원본 특성에 대한 트리와 유사한 보기가 표시됩니다. 이를 사용하여 실행할 쿼리 문을 트리거한 엔터티를 확인할 수 있습니다.

2024년 4월 11일

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

개선 사항:

  • 이제 Databricks SQL 및 Notebook에서 시각화를 만들 때 백분율별로 그룹화할 수 있습니다.
  • 새 차트(공개 미리 보기)의 경우 축과 평행한 직선으로 클릭하고 끌어서 단일 축을 따라 확대할 수 있습니다.
  • 이제 Unity 카탈로그 공유 클러스터 허용 목록 UI가 일반적으로 사용할 수 있게 되었습니다. 카탈로그 탐색기의 Metastore 세부 정보 페이지에서 액세스할 수 있습니다. 허용 목록 항목을 추가하는 방법참조하세요.
  • 외부 위치를 만들고 편집하는 양식이 이제 전체 페이지로 열립니다. 여기에는 스토리지 자격 증명을 포함하는 옵션이 포함됩니다.

수정:

  • 음수 값이 잘못 양수로 표시된 히스토그램 차트의 문제를 수정했습니다.

2024년 4월 4일

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

개선 사항:

  • Lakeview 대시보드의 히스토그램 차트가 개선되었습니다.
    • 레이블에 대한 지원이 추가되었습니다.
    • 이제 다른 필드 간에 전환할 때 Bin 설정이 유지됩니다.
  • 이제 대시보드 목록 페이지의 샘플 갤러리에서 Lakeview 대시보드를 만듭니다. 자습서: 샘플 대시보드사용하세요.
  • Lakeview 대시보드에서 위젯의 테두리를 마우스 오른쪽 단추로 클릭하면 상황에 맞는 메뉴가 열립니다.
  • 게시된 Lakeview 대시보드를 보는 작업 영역 사용자를 위해 왼쪽 탐색 모음이 유지됩니다.
  • 필터 선택은 게시된 Lakeview 대시보드와 초안을 탐색할 때 유지됩니다.
  • 이제 초안 Lakeview 대시보드의 데이터 탭에서 쿼리를 편집할 때 열 이름을 SQL 편집기에 삽입할 수 있습니다.
  • Lakeview 대시보드를 바꾸면 기존 대시보드 이름이 유지되고 내용이 바뀝니다.
  • 열 지도와 다른 차트 유형 간에 시각화를 전환하면 관련 필드가 더 잘 유지됩니다.

수정:

  • 색 인코딩이 있는 가로 막대형 차트는 이제 여러 Y축 필드 추가를 올바르게 제한합니다.
  • 일부 시각화에서 PNG로 다운로드 버튼이 누락된 문제를 해결했습니다.
  • 이전에 수천 개의 구분 기호가 누락된 음의 큰 정수에 대한 서식이 수정되었습니다.
  • 꺾은선형 차트의 레이블에 마우스를 올릴 때 잘못된 호버 라인 배치가 수정되었습니다.

2024년 3월 28일

Databricks SQL 버전 2024.15 사용 가능

롤아웃 일정

  • 2024.15 미리 보기 출시: 2월 14일부터 3월 4일까지
  • 2024.15의 현재 출시: 3월 25일부터 4월 8일까지

2024.15의 변경 내용

델타 업데이트

  • 이제 Delta UniForm과 UniForm이 일반 공급되며, IcebergCompatV2 테이블 기능을 사용합니다. 이제 기존 테이블에서 UniForm을 사용하거나 업그레이드할 수 있습니다. Iceberg 클라이언트를 사용하여 델타 테이블 읽기참조하세요.
  • 델타 테이블대한 통계 건너뛰기 데이터 다시 계산: 이제 데이터 건너뛰기에 사용되는 열을 변경한 후 델타 로그에 저장된 통계를 다시 계산할 수 있습니다. 델타 통계 열을 지정하는 방법을에서 참조하세요.

SQL 언어 업데이트

  • SQL 세션에서 임시 변수 선언: 이 릴리스에서는 쿼리에서 설정한 다음 참조할 수 있는 세션에서 임시 변수를 선언하는 기능이 도입되었습니다. 변수참조하세요.
  • 네이티브 XML 파일 형식 지원(공개 미리 보기): Native XML 파일 형식 지원은 이제 공개 미리 보기로 제공됩니다. XML 파일 형식 지원을 사용하면 일괄 처리 또는 스트리밍을 위해 XML 데이터를 수집, 쿼리 및 구문 분석할 수 있습니다. 스키마 및 데이터 형식을 자동으로 유추 및 발전시키고, from_xml같은 SQL 식을 지원하며, XML 문서를 생성할 수 있습니다. 외부 jar가 필요하지 않으며 자동 로더, read_files, COPY INTO및 DLT에서 원활하게 작동합니다. XML 파일 읽기 및 쓰기참조하세요.

Apache Spark SQL 업데이트

Databricks SQL 2024.15에는 Apache Spark 3.5.0이 포함됩니다. SQL에 대한 추가 버그 수정 및 개선 사항은 Databricks Runtime 14.3 릴리스 노트에 나열되어 있습니다. Apache Spark 참조하고 전체 목록에 대한 [SQL] 태그를 찾습니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

  • 카탈로그 탐색기의 엔터티 페이지에 있는 새 개요 탭에는 파일화, 데이터 원본, 소유자, 테이블 스키마 및 주석과 같은 중요한 메타데이터가 표시됩니다.
  • Lakeview 대시보드 업데이트:
    • 이제 Lakeview 대시보드는 매개 변수를 지원합니다. 작성자는 데이터 탭에서 데이터 세트 쿼리에 매개 변수를 추가한 다음 단일 값 선택기와 날짜 선택기를 사용하여 캔버스에서 매개 변수를 설정할 수 있습니다. 대시보드 매개변수과 작업하십시오.
    • 이제 Lakeview 대시보드는 작업 영역 권한 API에서 지원됩니다. REST API 참조의 PATCH /api/workspace/workspace/updatepermissions 참조하세요.
    • 캔버스의 Control 위젯 이름이 필터 위젯으로 바뀌었습니다.
    • 콤보 차트는 더 이상 x축에서 집계된 필드를 허용하지 않습니다.
    • 이제 공유 대화 상자의 복사 링크 단추에 URL에 저장된 매개 변수가 포함됩니다.
    • 게시된 대시보드의 위젯은 마우스로 가리키면 더 이상 테두리를 표시하지 않습니다.
    • Databricks Assistant 및 PNG 다운로드 버튼이 차트 시각적 요소와 겹치는 문제를 해결했습니다.
  • 열 지도와 다른 차트 유형 간에 시각화를 전환하면 관련 필드가 더 잘 유지됩니다.
  • 색 인코딩이 있는 가로 막대형 차트는 이제 여러 Y축 필드 추가를 올바르게 제한합니다.

2024년 3월 21일

  • Unity 카탈로그 모델 계보는 이제 공개 미리 보기로 제공됩니다.

이제 카탈로그 탐색기의 테이블 보기에는 기본 메타데이터를 설명하는 개요 탭이 있습니다.

  • 이제 일반 공급되는 Notebook용 SQL 웨어하우스를 사용하면 Notebook의 풍부하고 공동 작업적인 제작 환경에서 SQL 워크로드에 대해 완전히 관리되고 즉각적이며 확장 가능한 컴퓨팅을 활용할 수 있습니다. SQL 웨어하우스를 사용하는 노트북을 참조하세요.

다음 수정 사항 및 개선 사항이 Lakeview 대시보드에 적용됩니다.

  • Lakeview에 대한 확장된 API 지원은 대시보드 만들기, 가져오기, 업데이트 및 휴지통 기능을 추가합니다. REST API 참조에서 Lakeview 참조하세요.
  • 데이터 탭에 카탈로그 브라우저에 대한 새로 고침 단추가 추가되었습니다.
  • 이제 Lakeview 대시보드 작업 영역 사이드바의 새 메뉴에 대시보드 앞에 표시됩니다. 대시보드 목록 페이지에서 Lakeview 대시보드 탭이 대시보드 탭의 왼쪽에 나타납니다.
  • Lakeview용 Databricks Assistant 환경은 검색 가능성을 개선하고 사용자가 제공할 수 있는 프롬프트를 이해하는 데 도움이 되도록 입력 상자 및 제안 사항으로 업데이트되었습니다.
  • 이제 Lakeview 시각화는 중앙값 집계를 지원합니다.
  • 테이블을 만들 때 보다 간소화된 사용자 환경을 위해 Lakeview 대시보드 시각화 편집기에서 색 선택기를 업데이트했습니다.
  • 각도 또는 색 정의가 있는 시나리오를 독점적으로 지원하도록 원형 차트 마이그레이션이 개선되었습니다.
  • 개수이라는 이름의 차트로 그룹화가 되지 않도록 하는 버그를 수정했습니다. 이제 차트를 개수필드별로 그룹화할 수 있습니다.
  • 가로 막대형 차트의 경우 사용자가 선택한 구성에 적용할 수 없는 경우 그룹 및 스택 레이아웃 컨트롤이 숨겨집니다.

2024년 3월 14일

Lakeview 대시보드의 경우:

  • 히스토그램은 이제 사용자 지정 범주 색을 지원합니다.
    • 히트맵은 이제 정량적 척도를 지원합니다.
    • 제목 및 설명은 콤보 차트를 포함하여 시각화 형식 간에 전환할 때 유지됩니다.
    • 이제 초안 대시보드 위젯과 연결된 기본 데이터 세트를 마우스 오른쪽 단추로 클릭하여 열 수 있습니다. 데이터 세트가 데이터 탭에서 열립니다.
  • 이제 새 차트는 숫자 열의 null 값에 별칭 및 사용자 지정 색을 적용합니다.
  • 이제 새 차트가 눈금 표시를 렌더링하여 y축의 위쪽을 표시합니다.

2024년 3월 7일

  • 카탈로그 탐색기에서 테이블을 볼 때 만들기 단추에는 Databricks SQL 대시보드가 아닌 Lakeview 대시보드를 만드는 옵션이 포함되어 있습니다.
  • 이제 Lakeview 대시보드에 히스토그램을 사용할 수 있습니다. 히스토그램은 일반적으로 숫자 필드의 분포를 시각화하는 데 사용됩니다.
  • Databricks SQL 대시보드를 복제하여 Lakeview 대시보드를 만들 때 데이터 세트 변환 문제는 이제 Lakeview 대시보드의 새 위젯에 오류로 표시됩니다.
  • 색 그라데이션은 Lakeview 대시보드의 시각화에 숫자 필드를 사용할 때 사용할 수 있습니다.
  • Lakeview 대시보드 시각화 편집기에서 색상을 필드 에 의해로 지정할 경우, 색 그라데이션이 이제 노출됩니다.
  • 뷰어에 초안 Lakeview 대시보드에 대한 편집 권한이 없는 경우 시각화와 연결된 제목 및 설명은 더 이상 편집할 수 없습니다.
  • 100개가 넘는 계열이 있는 차트의 도구 설명이 모든 계열을 잘못 표시하는 문제를 해결했습니다. 이제 포커스가 있는 시리즈만 표시됩니다.
  • 성능 최적화를 통해 SQL 편집기에서 입력 대기 시간을 30% 줄입니다.
  • SQL 편집기에서 쿼리를 관리할 때 쿼리를 휴지통으로 이동하면 탭이 자동으로 닫힙니다.
  • 측면 패널 너비를 조정할 때 텍스트가 실수로 선택된 SQL 편집기에서 문제가 해결되었습니다.

2024년 2월 29일

  • 이제 카탈로그 탐색기의 스키마 브라우저에 열 기본 및 외래 키 제약 조건이 표시됩니다.
  • 카탈로그 탐색기의 계보 탭에 표시된 보존 시간이 1년으로 늘어났습니다.
  • 이제 Notebook의 새 차트에 대한 도구 설명이 항상 시각화 경계 내에 렌더링됩니다.
  • REST API를 사용하여 Lakeview 대시보드를 프로그래밍 방식으로 관리하는 방법을 알아봅니다. 작업 영역 API 사용하여 대시보드 관리참조하세요.
  • 이제 Lakeview 대시보드는 히스토그램을 지원합니다.
  • Lakeview 대시보드의 공유 및 게시가 향상되었습니다.
    • 공유 및 게시 대화 상자가 개선되어 모든 계정 사용자에게 안전하고 쉽게 공유할 수 있습니다.
    • 작업 영역 브라우저에서 열린 대시보드는 게시된 대시보드(있는 경우)를 표시합니다. 이제 뷰어는 게시자, 시간 및 자격 증명을 포함하여 최신 게시된 버전의 세부 정보를 볼 수 있습니다.
    • 편집기에서 Lakeview 대시보드 UI의 새 드롭다운 전환기를 사용하면 초안 버전과 게시된 버전 간에 빠르게 이동할 수 있습니다.

2024년 2월 22일

  • 카탈로그 탐색기 테이블 보기의 샘플 데이터 탭이 개선되어 열을 정렬할 수 있고, 선택한 데이터를 클립보드에 복사 할 수 있으며, 줄 번호를 볼 수 있게 되었습니다. 이제 JSON 개체, 날짜, 숫자 및 null 값과 같은 특수 값을 더 잘 표시할 수 있습니다.
  • 이제 Lakeview 대시보드는 대시보드의 정기적인 PDF 스냅샷을 작업 영역 사용자 및 알림 대상으로 보낼 수 있도록 지원합니다. 일정 및 구독참조하세요.
  • 이제 Lakeview 드롭다운 선택기의 시각화 옵션 목록이 사전순으로 정렬됩니다.
  • Databricks SQL 대시보드를 Lakeview 대시보드에 복사할 때 변환할 수 없는 위젯은 이제 오류 메시지 대신 시각화 구성 선택기를 표시합니다.

2024년 2월 15일

  • SELECT action AS 'action::filter'같은 코드 기반 쿼리 필터에 대한 설명서가 제거되었습니다. Databricks는 이 패턴을 제거하기 위해 쿼리를 업데이트하는 것이 좋습니다.
  • Lakeview 대시보드의 경우 각도 필드가 지정되지 않은 경우 원형 차트에 동일한 크기의 조각이 표시됩니다.
  • 이제 Lakeview는 가로 막대형 차트와 꺾은선형 차트를 결합하여 동일한 차트에 서로 다른 두 값을 표시하는 콤보 차트를 지원합니다.
  • 색 강도를 사용하여 두 불연속 변수 간의 상관 관계를 표시하는 열 지도 차트는 이제 Lakeview에서 사용할 수 있습니다.

2024년 2월 8일

  • 이제 권한이 없는 Lakeview 대시보드에 대한 링크를 열 때 액세스를 요청할 수 있습니다.
  • 이제 Lakeview 대시보드 필터에 명확한 모든 및 없음 옵션이 포함되었습니다. 작성자는 단일 선택 필터에서 모든 옵션을 숨기도록 선택할 수 있습니다.
  • 이제 Lakeview 대시보드 차트에서 축의 최소값과 최대값을 설정할 수 있습니다.

2024년 2월 1일

Databricks SQL 버전 2024.10 사용 가능

출시 일정

  • 2024.10 미리 보기 출시: 2024년 1월 30일부터 2024년 2월 5일 사이
  • 2024.10에 대한 현재 출시: 2023년 2월 13일부터 2024년 2월 20일 사이

2024.10 변경 내용

  • DML 명령에서 손상된 파일 처리를 수정했습니다. DML 명령 DELETE, UPDATE및 MERGE INTO 더 이상 읽기 옵션 ignoreCorruptFiles 및 ignoreMissingFiles적용되지 않습니다. 테이블에서 읽을 수 없는 파일이 발견되면 이러한 옵션이 지정된 경우에도 이러한 명령이 실패합니다.
  • 행 수준 동시성은 일반적으로 사용 가능하며 기본적으로 설정됩니다. 행 수준 동시성은 행 수준에서 변경 내용을 검색하여 동시 쓰기 작업 간의 충돌을 줄입니다. 행 수준 동시성은 분할 없이 테이블에서만 지원되며, 여기에는 액체 클러스터링이 있는 테이블이 포함됩니다. 행 수준 동시성은 삭제 벡터를 사용하도록 설정된 델타 테이블에서 기본적으로 사용하도록 설정됩니다. 쓰기 충돌과 행 수준 동시성을 참조하세요.
  • Unity 카탈로그 외부 테이블의 단순 클론(공개 미리 보기): 이제 Unity 카탈로그 외부 테이블과 함께 단순 클론을 사용할 수 있습니다. Unity 카탈로그 테이블에 대한 단순 클론을 참조하세요.
  • 더 빠른 다중 스레드 통계 수집: Statistics 컬렉션은 CONVERT TO DELTA 실행하거나 Iceberg 및 Parquet 테이블에서 복제할 때 작은 클러스터에서 최대 10배 더 빠릅니다. Delta Lake 변환하고 Parquet 및 Iceberg 테이블을 Delta Lake 증분 복제하는참조하세요.
  • 델타 파일의 DeltaSource에서의 푸시다운 필터 : 더 나은 활용을 위해 델타 테이블 스트리밍 쿼리의 파티션 필터가 이제 속도 제한 전에 델타에 적용됩니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

  • Databricks SQL 개체(쿼리, 대시보드 및 경고)에 대한 목록 페이지의 관리자 보기 탭이 제거되었습니다. 작업 영역 관리자 사용자는 해당 목록 페이지의 모든 개체를 볼 수 있습니다. 저장된 쿼리에 액세스하고 관리하는 방법, 레거시 대시보드, 및 Databricks SQL 경고란 무엇인지 참조하세요.
  • 쿼리 기록 페이지에는 기본적으로 지난 24시간 동안의 쿼리가 표시됩니다. 쿼리 기록확인하십시오.
  • Databricks SQL 대시보드 UI에 Lakeview 대시보드로 복제메뉴 옵션이 추가되었습니다. 이 도구를 사용하여 기존 Databricks SQL 대시보드에서 동일한 쿼리 및 시각화를 포함하는 새 Lakeview 대시보드를 만들 수 있습니다. 레거시 대시보드를 AI/BI 대시보드로 복제하기를 참조하세요.
  • Lakeview 대시보드의 가로 막대형 차트는 누적 막대를 지원하여 100개의%정규화합니다.
  • 게시된 Lakeview 대시보드에서 확대하면 잘못된 확대/축소 간격에 초점을 맞추는 문제가 해결되었습니다.

2024년 1월 24일

  • Lakeview 대시보드 캔버스는 가능하면 행 사이에 빈 세로 공백을 제거하도록 위젯 배치를 자동으로 조정합니다.
  • Lakeview 대시보드 시각화에서 제목과 설명 텍스트 사이의 공백을 줄입니다.

2024년 1월 18일

  • x축에서 단일 날짜를 보여 주는 가로 막대형 차트가 매우 얇은 막대를 만드는 시각화에 대한 렌더링 문제를 해결했습니다. 새 차트 시각화는 예상대로 렌더링됩니다.
  • Lakeview 대시보드 목록 페이지에는 기본적으로 대시보드가 표시됩니다. 해당 페이지의 필터를 사용하여 다른 작업 영역 사용자가 소유한 Lakeview 대시보드에 액세스할 수 있습니다.

2024년 1월 11일

  • Databricks SQL 쿼리 및 대시보드 API는 프로그래밍 방식으로 Run as 역할 설정을 변경할 수 있습니다.

2024년 1월 4일

  • 카탈로그 탐색기에서 기본 키 및 외래 키 엔터티 관계 다이어그램이 도입되었습니다. 엔터티 관계 다이어그램보기를 참조하세요.