Apa yang baru dan direncanakan untuk Gudang Data di Microsoft Fabric
Penting
Rencana rilis menjelaskan fungsionalitas yang mungkin atau mungkin belum dirilis. Garis waktu pengiriman dan fungsionalitas yang diproyeksikan dapat berubah atau mungkin tidak dikirim. Lihat kebijakan Microsoft untuk informasi selengkapnya.
Gudang Data di Microsoft Fabric adalah gudang data pertama yang mendukung transaksi multi-tabel dan secara asli merangkul format data terbuka. Gudang ini dibangun di atas pengoptimal kueri SQL Server yang kuat dan mesin pemrosesan kueri terdistribusi tingkat perusahaan yang menghilangkan kebutuhan akan konfigurasi dan manajemen. Gudang Data di Microsoft Fabric terintegrasi dengan Data Factory dengan mulus untuk penyerapan data, Power BI untuk analisis dan pelaporan, dan Synapse Spark untuk ilmu data dan pembelajaran mesin. Ini menyederhanakan investasi analitik organisasi dengan menggabungkan data lake dan gudang.
Beban kerja pergudangan data mendapat manfaat dari kemampuan mesin SQL yang kaya melalui format data terbuka, memungkinkan pelanggan untuk fokus pada analisis dan pelaporan. Mereka juga mendapat manfaat dari mengakses data dari OneLake, layanan virtualisasi penyimpanan data lake.
Untuk mempelajari lebih lanjut, lihat dokumentasi.
Area investasi
Pembaruan Wawasan Kueri
Estimasi garis waktu rilis: Q4 2024
Jenis Rilis: Ketersediaan umum
Wawasan Kueri sekarang akan menyajikan jumlah data yang dipindai selama eksekusi kueri, ditumpahkan berdasarkan memori, disk, dan jarak jauh.
Copilot untuk Gudang Data: Obrolan Sidecar
Estimasi garis waktu rilis: Q4 2024
Jenis Rilis: Pratinjau publik
Copilot for Data Warehouse adalah programmer berpasangan terbaik, dan booster produktivitas untuk pengembang tingkat keterampilan apa pun – dari profesional data hingga analis. Ini dirancang untuk mempercepat pengembangan gudang dengan memanfaatkan AI generatif untuk menyederhanakan dan mengotomatiskan pembuatan, analisis, dan manajemen Gudang Data.
Fitur ini memperkenalkan panel obrolan sidecar Copilot. Gunakan panel obrolan untuk mengajukan pertanyaan tentang gudang Anda ke Copilot melalui bahasa alami. Kasus penggunaan mencakup:
- Bahasa Alami ke SQL: Ajukan pertanyaan kepada Copilot tentang data gudang Anda dan terima kueri SQL yang dihasilkan yang memenuhi skema gudang Anda.
- Tanya Jawab: Ajukan pertanyaan tentang gudang Anda dan terima jawaban berbasis dokumen dan penunjuk ke dokumentasi resmi.
- Brainstorm: Gunakan Copilot untuk membantu Anda bertukar pikiran tren atau pola yang relevan untuk menganalisis dalam data Anda
SISIPAN MASSAL
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Pratinjau publik
Pernyataan BULK INSERT digunakan untuk menyerap file di Fabric DW (mirip dengan COPY INTO). dengan fungsi INERT MASSAL, kami mengaktifkan migrasi dari SQL Server ke Fabric DW dengan perubahan kode minimal. Pelanggan perlu menulis ulang kode dan alat eksternal mereka yang menggunakan BULK INSERT untuk bermigrasi ke COPY INTO sebagai prasyarat untuk bermigrasi ke Fabric DW. Selain itu, BULK INSERT mendukung beberapa opsi lokal tradisional yang tidak tersedia di COPY INTO.
OPENROWSET
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Pratinjau publik
Fabric DW memungkinkan pengguna untuk menggunakan fungsi OPENROWSET untuk membaca data dari file di lake. Contoh sederhana fungsi OPENROWSET adalah:
SELECT *
FROM OPENROWSET ( BULK ‘<file path>’ )
WITH ( <column definition> )
Fungsi OPENROWSET akan membaca konten file pada yang diberikan <file path> dan mengembalikan konten file.
Fungsi Thi memungkinkan penjelajahan dan pratinjau file yang mudah sebelum diserap.
Penembolokan tataan hasil
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Pratinjau publik
Penembolokan kumpulan hasil menyimpan hasil kueri yang berlaku dan mengembalikannya segera pada eksekusi berikutnya, yang secara drastis mengurangi waktu eksekusi dengan melewati kompilasi ulang dan komputasi ulang. Cache dikelola secara otomatis dan tidak memerlukan intervensi manual.
Peningkatan statistik otomatis
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
Berbagai penyempurnaan direncanakan - waktu eksekusi yang lebih singkat dari pembaruan statistik otomatis, dukungan oportunistik untuk jenis kolom VARCHAR(MAX), penyimpanan langkah statistik menengah yang ditingkatkan, pemeliharaan statistik otomatis di luar kueri pengguna.
SHOWPLAN_XML
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
SHOWPLAN_XML mengembalikan informasi terperinci tentang bagaimana pernyataan akan dijalankan dalam bentuk dokumen XML yang terdefinisi dengan baik tanpa menjalankan pernyataan T-SQL.
Salinan untuk titik akhir analitik SQL
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Pratinjau publik
Copilot for Data Warehouse adalah programmer berpasangan terbaik, dan booster produktivitas untuk pengembang tingkat keterampilan apa pun – dari profesional data hingga analis. Ini dirancang untuk mempercepat pengembangan gudang dengan memanfaatkan AI generatif untuk menyederhanakan dan mengotomatiskan pembuatan, analisis, dan manajemen Gudang Data. Fitur ini memungkinkan penggunaan Copilot di titik akhir analitik SQL.
Merefresh REST API Titik Akhir Analitik SQL
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
Secara terprogram memicu refresh titik akhir analitik SQL Anda untuk menjaga tabel tetap sinkron dengan perubahan apa pun yang dibuat dalam item induk.
Asisten Migrasi Kode
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Pratinjau publik
Dirancang untuk mempercepat migrasi SQL Server, kumpulan SQL khusus Synapse, dan gudang lainnya ke Gudang Data Fabric, pengguna akan dapat memigrasikan kode dan data dari database sumber, secara otomatis mengonversi skema sumber dan kode ke Fabric Data Warehouse, membantu migrasi data, dan memberikan bantuan yang didukung AI.
Ubah Tabel - Kolom Jatuhkan/Ganti Nama
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
Alter Table - Drop/Rename akan memungkinkan pelanggan mengubah definisi tabel mereka dengan menjatuhkan dan mengganti nama kolom. Ini selain fungsionalitas Alter Table yang ada yang mendukung penambahan kolom baru dan sedang dalam produksi saat ini.
Tabel sementara (lingkup sesi)
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
Sesi yang dilingkup, tabel sementara yang didukung parket memungkinkan pelanggan untuk menyimpan kumpulan hasil perantara untuk akses berulang tetapi tidak diperlukan untuk bertahan secara permanen. Mereka bekerja sebagai tabel permamen biasa tetapi menghilang ketika koneksi ditutup.
MERGE (T-SQL)
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
Perintah MERGE T-SQL untuk Fabric Data Warehouse membawa kekuatan DML berbasis pilihan ke dalam satu pernyataan, untuk semua kebutuhan logika transformasi Anda.
Log audit SQL
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
Fitur ini melacak peristiwa database dan menulisnya ke log audit, sehingga memungkinkan pelanggan untuk mengkueri file audit menggunakan sys.fn_get_audit_file_v2 untuk audit dan kepatuhan.
JALANKAN SEBAGAI
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Ketersediaan umum
EXECUTE AS mengatur konteks eksekusi untuk sesi dan dengan demikian memungkinkan pengguna untuk meniru sebagai pengguna lain untuk memvalidasi izin yang diperlukan yang disediakan.
BCP
Estimasi garis waktu rilis: Q1 2025
Jenis Rilis: Pratinjau publik
Fabric DW mendukung utilitas bcp dan TDS Bulk Load API. API Lod Massal memungkinkan berbagai alat klien seperti bcp, SSIS, ADF, untuk memuat data ke Fabric DW. Dan contoh perintah bcp yang memuat konten file ke dalam tabel DW adalah:
bcp gold.artists in "C:\temp\gold_artist.txt" -d TextDW -c -S "<server name>.msit-datawarehouse.fabric.microsoft.com" -G -U theusert@microsoft.com
Fitur yang dikirim
Jenis VARCHAR(MAX)/VARBINARY(MAX)
Dikirim (Q4 2024)
Jenis Rilis: Pratinjau publik
Pengguna dapat menentukan kolom dengan jenis VARCHAR(MAX)/VARBINARY(MAX) di Gudang data untuk menyimpan string atau data biner hingga 1 MB. Di titik akhir SQL untuk Lakehouse, jenis string dalam tabel Delta diwakili sebagai VARCHAR(MAX) tanpa pemotongan hingga 8 KB. Perbedaan performa antara kueri yang bekerja dengan jenis VARCHAR(MAX) dan VARCHAR(8000) diminimalkan, yang memungkinkan pengguna menggunakan jenis besar tanpa penalti performa yang signifikan.
Peningkatan Titik Akhir Analitik SQL
Dikirim (Q4 2024)
Jenis Rilis: Ketersediaan umum
Fitur ini mencakup pembaruan yang dibuat untuk pengalaman titik akhir analitik SQL, termasuk:
- Refresh otomatis dipicu saat membuka item atau menyambungkan ke titik akhir
- UI yang disempurnakan untuk merefresh titik akhir analitik SQL langsung di pita
- Properti baru untuk Pembaruan Terakhir Berhasil di OneLake melalui flyout dialog properti tabel
- Meningkatkan pesan kesalahan
Dukungan JSON
Dikirim (Q4 2024)
Jenis Rilis: Ketersediaan umum
Dukungan JSON di Fabric Datawarehouse memungkinkan pemrosesan data tekstual yang diformat sebagai teks JSON. Fitur JSON baru di Fabric DW adalah:
- Untuk opsi kueri JSON yang memformat hasil kueri sebagai teks JSON. Ini adalah salah satu fitur yang diminta di situs Microsoft Fabric Idea.
- Fungsi skalar JSON yang juga dapat digunakan dalam database Azure SQL. Selain fungsi skalar JSON yang ada (ISJSON, JSON_VALUE, JSON_QUERY, dan JSON_MODIFY), Fabric DW mendukung fungsi JSON terbaru yang ada di Azure SQL Database – JSON_PATH_EXISTS, JSON_OBJECT, dan JSON_ARRAY.
Peningkatan performa string
Dikirim (Q4 2024)
Jenis Rilis: Ketersediaan umum
Operasi pada string (VARCHAR(N)) umum dalam kueri T-SQL. Peningkatan performa pada fungsi string dan operator yang bekerja dengan string meningkatkan performa kueri yang menggunakan predikat LIKE, fungsi string, dan operator perbandingan dalam predikat WHERE, dan operator seperti GROUP BY, ORDER BY, JOIN yang bekerja dengan jenis string.
Dukungan kolaterasi tidak peka huruf besar/kecil (Khusus gudang)
Dikirim (Q4 2024)
Jenis Rilis: Ketersediaan umum
Menggunakan REST API publik untuk membuat Gudang Data menyertakan opsi baru untuk mengatur kolase default. Ini dapat digunakan untuk mengatur default Kolase Tidak Sensitif Kasus baru. Dua kolase yang didukung Latin1_General_100_CI_AS_KS_WS_SC_UTF8 (yaitu Tidak Peka Huruf Besar/Kecil) dan Latin1_General_100_BIN2_UTF8 (yaitu Peka Huruf Besar/Kecil) dan terus menjadi default kami.
Dukungan klausul COLLATE T-SQL akan segera hadir. Ini akan memungkinkan Anda untuk menggunakan perintah COLLATE dengan CREATE atau ALTER TABLE untuk secara langsung menentukan kolase untuk bidang VARCHAR Anda.
CTE Berlapis
Dikirim (Q4 2024)
Common Table Expressions (CTE) meningkatkan keterbacaan dan penyederhanaan untuk kueri kompleks dengan mendekonstruksi kueri yang biasanya kompleks menjadi blok sederhana yang akan digunakan dan digunakan kembali jika perlu, alih-alih menulis ulang kueri. CTE berlapis didefinisikan dengan definisi CTE lain.
Integrasi Notebook T-SQL
Dikirim (Q3 2024)
Jenis Rilis: Pratinjau publik
Anda dapat mulai menggunakan dukungan bahasa T-SQL dalam Notebooks yang menggabungkan kekuatan Notebook dan SQL dalam pengalaman yang sama - memungkinkan intellisense, lengkapi otomatis, kueri lintas database, visualisasi yang lebih kaya dan kemampuan untuk dengan mudah berkolaborasi dan berbagi menggunakan Notebook.
TRUNCATE
Dikirim (Q3 2024)
Perintah TRUNCATE dengan cepat menghapus semua baris data dari tabel.
ALTER TABLE - Tambahkan kolom nullable
Dikirim (Q3 2024)
Dukungan untuk ALTER TABLE ADD COLUMN untuk dapat memperluas tabel yang sudah ada dengan kolom baru yang memungkinkan nilai NULL.
Pembaruan wawasan kueri
Dikirim (Q3 2024)
Tampilan historis sesi tertutup Anda akan tersedia melalui Wawasan Kueri. Penambahan ini membantu Anda menganalisis lalu lintas, beban, dan penggunaan DW Anda.
Pemulihan di tempat dalam editor gudang
Dikirim (Q2 2024)
Anda sekarang dapat dengan mudah membuat titik pemulihan dan memulihkan gudang ke keadaan baik yang diketahui jika terjadi kerusakan yang tidak disengaja, menggunakan pengalaman editor Gudang.
Dukungan COPY INTO untuk penyimpanan aman
Dikirim (Q2 2024)
Jenis Rilis: Pratinjau publik
Anda sekarang dapat menyerap data ke gudang Anda menggunakan COPY INTO dari akun penyimpanan Azure eksternal yang dilindungi di belakang Firewall.
Copilot
Dikirim (Q2 2024)
Jenis Rilis: Pratinjau publik
Copilot memungkinkan pengembang dari tingkat keterampilan apa pun untuk dengan cepat membangun dan mengkueri gudang di Fabric. Copilot menawarkan saran dan praktik terbaik, kode lengkapi otomatis, membantu memperbaiki dan mendokumen kode, dan menawarkan bantuan dengan persiapan, pemodelan, dan analisis data.
Perjalanan waktu
Dikirim (Q2 2024)
Kemampuan untuk melakukan perjalanan waktu di tingkat pernyataan T-SQL memberdayakan pengguna untuk mengkueri data historis dari berbagai jangka waktu sebelumnya dengan menentukan tanda waktu hanya sekali untuk seluruh kueri. Perjalanan waktu membantu menghemat biaya penyimpanan secara signifikan dengan menggunakan satu salinan data yang ada di One Lake untuk melakukan analisis tren historis, pemecahan masalah, dan rekonsiliasi data. Selain itu, ini juga memfasilitasi pencapaian pelaporan yang stabil dengan menjunjung tinggi integritas data di berbagai tabel dalam gudang data.
Pengalaman pemantauan gudang
Dikirim (Q2 2024)
Dengan menggunakan pengalaman pemantauan gudang bawaan, Anda dapat melihat kueri langsung dan kueri historis, memantau, dan memecahkan masalah performa solusi end-to-end mereka.