다음을 통해 공유


작업을 위한 DLT 파이프라인 태스크

작업은 태스크 간의 관계를 정의하는 절차적 접근 방식을 제공합니다. DLT 파이프라인은 데이터 세트와 변환간의 관계를 정의하는 선언적 접근 방식을 제공합니다. 이 페이지에서는 작업 UI, DLT 파이프라인 UI 또는 SQL을 사용하여 Databricks 작업에서 태스크로 실행되도록 트리거된 DLT 파이프라인을 예약하는 방법을 설명합니다.

메모

트리거된 DLT 파이프라인은 지속적으로 실행되지 않으며 시작하려면 트리거가 필요합니다. 파이프라인 작업은 트리거된 DLT 파이프라인에 대한 트리거 메커니즘일 수 있습니다. 연속 파이프라인을 트리거할 필요가 없으므로 작업을 통해 트리거하는 것은 중복됩니다. 트리거 및 연속 파이프라인에 대한 자세한 내용은 트리거된 파이프라인 모드와 연속 파이프라인 모드를 참조하세요.

작업 UI를 사용하여 DLT 파이프라인 작업 구성

DLT 파이프라인은 파이프라인 정의에서 소스 코드 및 컴퓨팅에 대한 모든 구성을 관리합니다.

작업에 파이프라인을 추가하려면 다음 단계를 완료합니다.

  1. 새 작업을 생성하여 이름을 지정한 다음 유형에 대해 DLT 파이프라인을 선택합니다.
  2. 파이프라인 드롭다운 메뉴에서 기존 DLT 파이프라인을 선택합니다.
  3. 필요에 따라 DLT 파이프라인에서 전체 새로 고침을 트리거할 수 있습니다.

중요

파이프라인 작업에는 트리거된 파이프라인만 사용할 수 있습니다. 연속 파이프라인은 작업 작업으로 지원되지 않습니다.

파이프라인 UI를 사용하여 DLT 파이프라인 예약

파이프라인에 일정을 추가하면 단일 파이프라인 작업이 생성됩니다. 이 UI를 사용하여 시간 기반 일정 트리거만 구성할 수 있습니다. 고급 트리거 옵션은 작업 UI사용하여 DLT 파이프라인 작업 구성을 참조하세요.

다음 단계를 완료하여 파이프라인 UI를 사용하여 예약된 작업에서 파이프라인 작업을 구성합니다.

  1. 사이드바에서 DLT 클릭합니다.
  2. 파이프라인 이름을 클릭합니다. 파이프라인 UI가 나타납니다.
  3. 일정클릭합니다.
    • 파이프라인에 대한 일정이 없으면 새 일정 대화 상자가 나타납니다.
    • 하나 이상의 일정이 이미 있는 경우 일정 추가클릭합니다.
  4. 작업 이름 필드에 작업의 고유한 이름을 입력합니다.
  5. (선택 사항) 일정 빈도를 업데이트합니다.
    • cron 구문을 포함하여 자세한 옵션을 보려면 고급 선택합니다.
  6. (선택 사항) 추가 옵션아래에서 파이프라인 시작, 성공 또는 실패에 대한 경고를 수신하도록 하나 이상의 전자 메일 주소를 구성합니다.
  7. 만들기클릭합니다.

메모

파이프라인이 하나 이상의 예약된 작업에 포함된 경우 일정 단추에는 일정(5)같은 기존 일정 수가 표시됩니다.

Databricks SQL에서 머티리얼라이즈드 뷰 또는 스트리밍 테이블에 일정 추가

Databricks SQL에 정의된 구체화된 뷰 및 스트리밍 테이블은 CREATE 또는 ALTER 명령에 지정된 시간 기반 예약을 지원합니다.

자세한 내용은 다음 문서를 참조하세요.