Bagikan melalui

Tugas alur DLT untuk pekerjaan

  • Artikel

Pekerjaan menyediakan pendekatan prosedural untuk menentukan hubungan antar tugas. Alur DLT menyediakan pendekatan deklaratif untuk menentukan hubungan antara himpunan data dan transformasi . Halaman ini menjelaskan bagaimana Anda dapat menjadwalkan alur DLT yang dipicu untuk dijalankan sebagai tugas dalam pekerjaan Databricks, menggunakan UI Pekerjaan, UI alur DLT, atau SQL.

Nota

Alur DLT yang dipicu oleh adalah alur yang tidak berjalan terus menerus, melainkan harus diaktifkan terlebih dahulu. Tugas pipeline dapat menjadi mekanisme pemicu untuk pipeline DLT yang dipicu. Alur berkelanjutan tidak perlu dipicu, jadi memicunya melalui tugas akan berlebihan. Untuk mempelajari selengkapnya tentang alur yang dipicu dan berkelanjutan, lihat Modus alur yang dipicu vs. berkelanjutan.

Mengonfigurasi tugas alur DLT dengan antarmuka pengguna Pekerjaan

Alur DLT mengelola semua konfigurasi untuk kode sumber dan komputasi dalam definisi alur.

Untuk menambahkan alur ke pekerjaan, selesaikan langkah-langkah berikut:

  1. Buat dan beri nama tugas baru dan pilih alur DLT untuk Jenis.
  2. Di menu drop-down Pipeline, pilih alur DLT yang sudah ada.
  3. Anda dapat secara opsional memicu refresh penuh pada alur DLT.

Penting

Anda hanya dapat menggunakan alur yang dipicu dengan tugas Pipeline. Alur berkelanjutan tidak didukung sebagai tugas pekerjaan.

Menjadwalkan alur DLT menggunakan UI pipeline

Menambahkan jadwal ke alur membuat pekerjaan dengan satu tugas alur. Anda hanya dapat mengonfigurasi pemicu jadwal berbasis waktu menggunakan UI ini. Untuk opsi pemicu tingkat lanjut, lihat Mengonfigurasi tugas alur DLT dengan antarmuka pengguna Pekerjaan.

Konfigurasikan tugas alur dalam pekerjaan terjadwal menggunakan UI alur dengan menyelesaikan langkah-langkah berikut:

  1. Klik DLT di bilah samping.
  2. Klik nama alur. Antarmuka jalur muncul.
  3. Klik Jadwal.
    • Jika tidak ada jadwal untuk pipeline, dialog Jadwal Baru akan muncul.
    • Jika satu atau beberapa jadwal sudah ada, klik Tambahkan jadwal.
  4. Masukkan nama unik untuk pekerjaan di bidang Nama Pekerjaan.
  5. (Opsional) Perbarui frekuensi jadwal.
    • Pilih Tingkat Lanjut untuk opsi verbose lainnya termasuk sintaks cron.
  6. (Opsional) Di bawah Pilihan Lain, konfigurasikan satu atau beberapa alamat email untuk menerima pemberitahuan tentang alur yang dimulai, berhasil, atau gagal.
  7. Klik Buat.

Nota

Jika alur disertakan dalam satu atau beberapa pekerjaan terjadwal, tombol Jadwal menunjukkan jumlah jadwal yang ada, misalnya, Jadwal (5).

Menambahkan jadwal ke tampilan terwujud atau tabel streaming di Databricks SQL

Tampilan materialisasi dan tabel streaming yang ditentukan dalam Databricks SQL mendukung penjadwalan berbasis waktu yang ditentukan dalam perintah CREATE atau ALTER.

Untuk detailnya, lihat artikel berikut ini: