Januari 2024

Fitur-fitur ini dan peningkatan platform Azure Databricks dirilis pada Januari 2024.

Dukungan format file XML asli (Pratinjau Umum)

31 Januari 2024

Dukungan format file XML asli sekarang ada di Pratinjau Umum. Dukungan format file XML memungkinkan penyerapan, kueri, dan penguraian data XML untuk pemrosesan atau streaming batch. Ini dapat secara otomatis menyimpulkan dan mengembangkan skema dan jenis data, mendukung ekspresi SQL seperti from_xml, dan dapat menghasilkan dokumen XML. Ini tidak memerlukan jar eksternal dan berfungsi dengan mulus dengan Auto Loader, read_files, COPY INTO, dan DLT. Untuk informasi selengkapnya, lihat Membaca dan menulis file XML.

Bagikan model AI menggunakan Databricks Marketplace (Pratinjau Publik)

31 Januari 2024

Anda sekarang dapat menggunakan Marketplace untuk berbagi model yang terdaftar di Unity Catalog. Ruang kerja penyedia dan konsumen harus diaktifkan agar Unity Catalog dapat berpartisipasi dalam berbagi model.

Lihat Apa itu Databricks Marketplace? dan Tambahkan model ke dalam berbagi.

Pembaruan untuk aturan grup keamanan jaringan

31 Januari 2024

Untuk meningkatkan skalabilitas platform, sarana kontrol Azure Databricks sekarang memerlukan titik akhir baru agar bidang data klasik tersambung. Untuk ruang kerja yang diterapkan di jaringan virtual Azure Anda sendiri, port jaringan 3306 dan 8443-8451 sekarang ditambahkan ke aturan keamanan yang ada untuk tujuan AzureDatabricks, memberlakukan lalu lintas keluar pada port 443.

Untuk informasi selengkapnya, lihat Aturan grup keamanan jaringan.

Pembaruan jalur ruang kerja

Secara historis, pengguna diharuskan menyertakan awalan jalur /Workspace untuk beberapa API Databricks (%sh) namun tidak untuk yang lainnya (%run, input REST API). Sekarang, pengguna dapat menyediakan jalur ruang kerja dengan awalan /Workspace di mana saja di Databricks. Referensi lama ke jalur tanpa awalan /Workspace dialihkan dan akan terus berfungsi. Databricks merekomendasikan agar semua jalur ruang kerja menggunakan /Workspace awalan untuk membedakannya dari jalur Volume dan DBFS.

Dukungan untuk firewall Azure Storage dari komputasi tanpa server kini tersedia secara umum.

30 Januari 2024

Dukungan untuk firewall Azure Storage dari layanan komputasi tanpa server Azure Databricks kini tersedia secara umum. Anda dapat memberlakukan bahwa gudang SQL tanpa server menggunakan ID subnet yang stabil untuk menyambungkan ke Azure Storage dan mengizinkan pengidentifikasi tersebut di firewall sumber daya Azure Anda. Lihat Mengonfigurasi firewall untuk akses komputasi tanpa server.

Penyederhanaan pembuatan pekerjaan Azure Databricks

29 Januari 2024

Pekerjaan kosong sekarang dibuat segera setelah Anda mengklik tombol untuk membuat pekerjaan, memungkinkan Anda mengedit pengaturan tingkat pekerjaan seperti tag, jadwal, atau pengaturan pemberitahuan sebelum menambahkan tugas pertama. Sebelumnya, Anda harus membuat tugas pertama sebelum mendapatkan akses ke pengaturan tingkat pekerjaan. Lihat Mengonfigurasi dan mengedit Job Databricks.

Memantau model GPU yang melayani beban kerja menggunakan tabel inferensi

29 Januari 2024

Anda sekarang dapat memantau model GPU yang melayani beban kerja menggunakan tabel inferensi. Lihat tabel inferensi untuk memantau dan men-debug model.

Akses berbasis jalur URI ke volume eksternal Unity Catalog

25 Januari 2024

Anda sekarang dapat menggunakan URI penyimpanan cloud untuk akses berbasis jalur ke data yang diatur oleh Katalog Unity yang disimpan dalam volume eksternal. Lihat Jalur apa yang digunakan untuk mengakses file dalam volume?.

Daftar kontrol akses dapat diaktifkan pada ruang kerja yang ditingkatkan

24 Januari 2024

Pengaturan kontrol akses diaktifkan di semua ruang kerja paket Premium pada November 2023.

Untuk ruang kerja yang meningkatkan dari paket Standar ke paket Premium, pengaturan kontrol akses dinonaktifkan secara default. Admin ruang kerja sekarang dapat mengaktifkan pengaturan kontrol akses berikut pada ruang kerja yang ditingkatkan:

• Kontrol akses ruang kerja: Memungkinkan pengguna mengonfigurasi izin ke objek ruang kerja.
• Kluster, kumpulan, kontrol akses pekerjaan: Memungkinkan pengguna untuk mengonfigurasi izin ke kluster, kumpulan, dan pekerjaan.
• Kontrol visibilitas kluster: Mencegah kluster terlihat oleh pengguna yang tidak memiliki izin padanya.
• Kontrol visibilitas pekerjaan: Mencegah pekerjaan terlihat oleh pengguna yang tidak memiliki izin pada pekerjaan tersebut.
• Pengaturan kontrol visibilitas ruang kerja: Mencegah buku catatan dan folder terlihat oleh pengguna yang tidak memiliki izin.

Setelah pengaturan kontrol akses diaktifkan, pengaturan tidak dapat dinonaktifkan. Untuk informasi selengkapnya, lihat Daftar kontrol akses.

Tabel daftar kejadian marketplace sekarang tersedia (Pratinjau Publik)

24 Januari 2024>

Skema sistem Marketplace sekarang menyertakan tabel peristiwa dalam corong daftar (system.marketplace.listing_funnel_events) di mana Anda dapat memantau tindakan konsumen pada listing Anda. Lihat tabel peristiwa corong daftar .

UI yang diperbarui untuk sel buku catatan (Pratinjau Umum)

24 Januari 2024

Desain sel buku catatan yang diperbarui tersedia. Untuk mengaktifkan desain sel baru, buka halaman pengaturan editor di ruang kerja. Di bar samping, klik Pengembang. Di bawah fitur eksperimental, alihkan antarmuka pengguna sel baru. Untuk detail tentang bekerja dengan sel buku catatan, lihat Kustomisasi tampilan buku catatan.

Perbaikan Cepat untuk kesalahan sintaks di notebook

24 Januari 2024

Anda bisa mendapatkan bantuan dari Asisten Databricks untuk kesalahan sintaksis dengan menggunakan Perbaikan Cepat. Untuk detailnya, lihat Penyorotan kesalahan Python.

Databricks Runtime 14.3 LTS (Beta)

22 Januari 2024

Databricks Runtime 14.3 LTS dan Databricks Runtime 14.3 LTS ML sekarang tersedia sebagai rilis Beta.

Lihat Databricks Runtime 14.3 LTS dan Databricks Runtime 14.3 LTS untuk Pembelajaran Mesin.

Berbagi model AI menggunakan Delta Sharing (Pratinjau Umum)

19 Januari 2024

Sekarang Anda dapat menggunakan Berbagi Delta untuk berbagi model yang terdaftar di Katalog Unity. Ruang kerja penyedia dan penerima harus diaktifkan agar Katalog Unity berbagi model.

Lihat Tambah model ke dalam ruang berbagi.

Databricks Marketplace mendukung berbagi volume

18 Januari 2023

Databricks Marketplace sekarang memberi Anda akses ke volume (data non-tabular) selama Anda memiliki ruang kerja Databricks yang mendukung Katalog Unity. Volume adalah objek Katalog Unity yang mewakili volume penyimpanan logis di lokasi penyimpanan objek cloud, dan mereka menyediakan cara untuk mengelola tata kelola dan berbagi aset data non-tabular.

Lihat Mengakses produk data di Databricks Marketplace (ruang kerja yang mendukung Unity Catalog).

Membuat widget dari antarmuka pengguna Databricks

18 Januari 2024

Anda sekarang dapat membuat Widget Databricks menggunakan UI Databricks. Untuk detailnya, lihat Membuat widget menggunakan UI.

Tabel sistem kejadian gudang kini sudah tersedia (Pratinjau Publik)

18 Januari 2024

Tabel system.compute.warehouse_events merekam ketika gudang data SQL dimulai, dihentikan, menaikkan dan menurunkan skala. Anda dapat menggunakan tabel untuk memantau dan mengelola gudang SQL di ruang kerja Anda. Lihat referensi tabel sistem peristiwa gudang .

Batas ukuran file ruang kerja sekarang 500MB

15 Januari 2023

File ruang kerja individual sekarang dibatasi hingga 500 MB. Sebelumnya, batasnya adalah 200 MB. Untuk detail selengkapnya, baca Batasan.

Pemberitahuan penghapusan fitur untuk integrasi Git lama di Databricks

12 Januari 2024

Setelah 31 Januari 2024, Databricks akan menghapus integrasi Git notebook lama. Fitur ini telah berada dalam status warisan selama lebih dari dua tahun, dan pemberitahuan penghentian telah ditampilkan di UI produk sejak November 2023.

Untuk detail tentang migrasi ke repositori Databricks Git (Repos), baca Beralih ke Repositori Databricks dari Integrasi Git Warisan. Jika penghapusan ini berdampak pada Anda dan Anda memerlukan ekstensi, hubungi Eksekutif Akun Databricks Anda.

Driver ODBC Databricks 2.7.7

9 Januari 2024

Kami telah merilis versi 2.7.7 dari driver ODBC Databricks (unduh). Rilis ini menambahkan fitur dan penyempurnaan baru berikut:

• Autentikasi Identitas Terkelola Azure.
• Dukungan untuk operasi metadata asinkron. Server perlu mendukung SPARK_CLI_SERVICE_PROTOCOL_V9 dan di atasnya.
• Dukungan untuk Kueri Berparameter dalam Mode Kueri Asli. Server perlu mendukung SPARK_CLI_SERVICE_PROTOCOL_V8 dan di atasnya.
• Peningkatan OAuth: Konektor sekarang dapat menonaktifkan cache token untuk alur autentikasi berbasis browser.

Rilis ini juga menyelesaikan masalah berikut di 2.7.7:

• Konektor mengabaikan CA akar privat saat menggunakan Windows Trust Store.
• Ketika operasi gagal, konektor tidak menghentikan utas heartbeat.
• Konektor tidak mendukung token refresh opsional.
• Saat mengkueri tabel dengan nama asing, konektor gagal membacanya.
• Saat menggunakan autentikasi OAuth, jika panjang string HOST kurang dari 20, konektor berakhir secara tak terduga.

Dukungan seri Databricks Runtime 13.2 berakhir

6 Januari 2024

Dukungan untuk Databricks Runtime 13.2 dan Databricks Runtime 13.2 untuk Pembelajaran Mesin berakhir pada 6 Januari. Lihat Siklus hidup dukungan Databricks.

Fitur bantuan AI diaktifkan secara default

2-8 Januari 2024

Fitur bantuan AI sekarang diaktifkan secara default untuk ruang kerja tanpa mengaktifkan profil keamanan kepatuhan. Ini termasuk:

• komentar yang dihasilkan AI untuk tabel terkelola Unity Catalog
• Chatbot bantuan produk
• Asisten Databricks

Admin dapat menolak fitur bantuan AI untuk semua ruang kerja di akun mereka atau subset ruang kerja. Lihat Untuk akun: Nonaktifkan atau aktifkan fitur Asisten Databricks.