Bagikan melalui


Apa yang baru dan direncanakan untuk Gudang Data di Microsoft Fabric

Penting

Rencana rilis menjelaskan fungsionalitas yang mungkin atau mungkin belum dirilis. Garis waktu pengiriman dan fungsionalitas yang diproyeksikan dapat berubah atau mungkin tidak dikirim. Lihat kebijakan Microsoft untuk informasi selengkapnya.

Gudang Data di Microsoft Fabric adalah gudang data pertama yang mendukung transaksi multi-tabel dan secara asli merangkul format data terbuka. Gudang ini dibangun di atas pengoptimal kueri SQL Server yang kuat dan mesin pemrosesan kueri terdistribusi tingkat perusahaan yang menghilangkan kebutuhan akan konfigurasi dan manajemen. Gudang Data di Microsoft Fabric terintegrasi dengan Data Factory dengan mulus untuk penyerapan data, Power BI untuk analisis dan pelaporan, dan Synapse Spark untuk ilmu data dan pembelajaran mesin. Ini menyederhanakan investasi analitik organisasi dengan menggabungkan data lake dan gudang.

Beban kerja pergudangan data mendapat manfaat dari kemampuan mesin SQL yang kaya melalui format data terbuka, memungkinkan pelanggan untuk fokus pada analisis dan pelaporan. Mereka juga mendapat manfaat dari mengakses data dari OneLake, layanan virtualisasi penyimpanan data lake.

Untuk mempelajari lebih lanjut, lihat dokumentasi.

Area investasi

Fitur Estimasi garis waktu rilis
Pembaruan Wawasan Kueri Q4 2024
Copilot untuk Gudang Data: Obrolan Sidecar Q4 2024
SISIPAN MASSAL Q1 2025
OPENROWSET Q1 2025
Penembolokan tataan hasil Q1 2025
Peningkatan statistik otomatis Q1 2025
SHOWPLAN_XML Q1 2025
Salinan untuk titik akhir analitik SQL Q1 2025
Merefresh REST API Titik Akhir Analitik SQL Q1 2025
Asisten Migrasi Kode Q1 2025
Ubah Tabel - Kolom Jatuhkan/Ganti Nama Q1 2025
Tabel sementara (lingkup sesi) Q1 2025
MERGE (T-SQL) Q1 2025
Log audit SQL Q1 2025
JALANKAN SEBAGAI Q1 2025
BCP Q1 2025
Jenis VARCHAR(MAX)/VARBINARY(MAX) Dikirim (Q4 2024)
Peningkatan Titik Akhir Analitik SQL Dikirim (Q4 2024)
Dukungan JSON Dikirim (Q4 2024)
Peningkatan performa string Dikirim (Q4 2024)
Dukungan kolaterasi tidak peka huruf besar/kecil (Khusus gudang) Dikirim (Q4 2024)
CTE Berlapis Dikirim (Q4 2024)
Integrasi Notebook T-SQL Dikirim (Q3 2024)
MEMOTONG Dikirim (Q3 2024)
ALTER TABLE - Tambahkan kolom nullable Dikirim (Q3 2024)
Pembaruan wawasan kueri Dikirim (Q3 2024)
Pemulihan di tempat dalam editor gudang Dikirim (Q2 2024)
Dukungan COPY INTO untuk penyimpanan aman Dikirim (Q2 2024)
Salinan Dikirim (Q2 2024)
Perjalanan waktu Dikirim (Q2 2024)
Pengalaman pemantauan gudang Dikirim (Q2 2024)

Pembaruan Wawasan Kueri

Estimasi garis waktu rilis: Q4 2024

Jenis Rilis: Ketersediaan umum

Wawasan Kueri sekarang akan menyajikan jumlah data yang dipindai selama eksekusi kueri, ditumpahkan berdasarkan memori, disk, dan jarak jauh.

Copilot untuk Gudang Data: Obrolan Sidecar

Estimasi garis waktu rilis: Q4 2024

Jenis Rilis: Pratinjau publik

Copilot for Data Warehouse adalah programmer berpasangan terbaik, dan booster produktivitas untuk pengembang tingkat keterampilan apa pun – dari profesional data hingga analis. Ini dirancang untuk mempercepat pengembangan gudang dengan memanfaatkan AI generatif untuk menyederhanakan dan mengotomatiskan pembuatan, analisis, dan manajemen Gudang Data.

Fitur ini memperkenalkan panel obrolan sidecar Copilot. Gunakan panel obrolan untuk mengajukan pertanyaan tentang gudang Anda ke Copilot melalui bahasa alami. Kasus penggunaan mencakup:

  • Bahasa Alami ke SQL: Ajukan pertanyaan kepada Copilot tentang data gudang Anda dan terima kueri SQL yang dihasilkan yang memenuhi skema gudang Anda.
  • Tanya Jawab: Ajukan pertanyaan tentang gudang Anda dan terima jawaban berbasis dokumen dan penunjuk ke dokumentasi resmi.
  • Brainstorm: Gunakan Copilot untuk membantu Anda bertukar pikiran tren atau pola yang relevan untuk menganalisis dalam data Anda

SISIPAN MASSAL

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Pratinjau publik

Pernyataan BULK INSERT digunakan untuk menyerap file di Fabric DW (mirip dengan COPY INTO). dengan fungsi INERT MASSAL, kami mengaktifkan migrasi dari SQL Server ke Fabric DW dengan perubahan kode minimal. Pelanggan perlu menulis ulang kode dan alat eksternal mereka yang menggunakan BULK INSERT untuk bermigrasi ke COPY INTO sebagai prasyarat untuk bermigrasi ke Fabric DW. Selain itu, BULK INSERT mendukung beberapa opsi lokal tradisional yang tidak tersedia di COPY INTO.

OPENROWSET

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Pratinjau publik

Fabric DW memungkinkan pengguna untuk menggunakan fungsi OPENROWSET untuk membaca data dari file di lake. Contoh sederhana fungsi OPENROWSET adalah:

SELECT * 
FROM OPENROWSET ( BULK ‘<file path>’ ) 
WITH ( <column definition> ) 

Fungsi OPENROWSET akan membaca konten file pada yang diberikan <file path> dan mengembalikan konten file. Fungsi Thi memungkinkan penjelajahan dan pratinjau file yang mudah sebelum diserap.

Penembolokan tataan hasil

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Pratinjau publik

Penembolokan kumpulan hasil menyimpan hasil kueri yang berlaku dan mengembalikannya segera pada eksekusi berikutnya, yang secara drastis mengurangi waktu eksekusi dengan melewati kompilasi ulang dan komputasi ulang. Cache dikelola secara otomatis dan tidak memerlukan intervensi manual.

Peningkatan statistik otomatis

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

Berbagai penyempurnaan direncanakan - waktu eksekusi yang lebih singkat dari pembaruan statistik otomatis, dukungan oportunistik untuk jenis kolom VARCHAR(MAX), penyimpanan langkah statistik menengah yang ditingkatkan, pemeliharaan statistik otomatis di luar kueri pengguna.

SHOWPLAN_XML

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

SHOWPLAN_XML mengembalikan informasi terperinci tentang bagaimana pernyataan akan dijalankan dalam bentuk dokumen XML yang terdefinisi dengan baik tanpa menjalankan pernyataan T-SQL.

Salinan untuk titik akhir analitik SQL

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Pratinjau publik

Copilot for Data Warehouse adalah programmer berpasangan terbaik, dan booster produktivitas untuk pengembang tingkat keterampilan apa pun – dari profesional data hingga analis. Ini dirancang untuk mempercepat pengembangan gudang dengan memanfaatkan AI generatif untuk menyederhanakan dan mengotomatiskan pembuatan, analisis, dan manajemen Gudang Data. Fitur ini memungkinkan penggunaan Copilot di titik akhir analitik SQL.

Merefresh REST API Titik Akhir Analitik SQL

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

Secara terprogram memicu refresh titik akhir analitik SQL Anda untuk menjaga tabel tetap sinkron dengan perubahan apa pun yang dibuat dalam item induk.

Asisten Migrasi Kode

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Pratinjau publik

Dirancang untuk mempercepat migrasi SQL Server, kumpulan SQL khusus Synapse, dan gudang lainnya ke Gudang Data Fabric, pengguna akan dapat memigrasikan kode dan data dari database sumber, secara otomatis mengonversi skema sumber dan kode ke Fabric Data Warehouse, membantu migrasi data, dan memberikan bantuan yang didukung AI.

Ubah Tabel - Kolom Jatuhkan/Ganti Nama

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

Alter Table - Drop/Rename akan memungkinkan pelanggan mengubah definisi tabel mereka dengan menjatuhkan dan mengganti nama kolom. Ini selain fungsionalitas Alter Table yang ada yang mendukung penambahan kolom baru dan sedang dalam produksi saat ini.

Tabel sementara (lingkup sesi)

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

Sesi yang dilingkup, tabel sementara yang didukung parket memungkinkan pelanggan untuk menyimpan kumpulan hasil perantara untuk akses berulang tetapi tidak diperlukan untuk bertahan secara permanen. Mereka bekerja sebagai tabel permamen biasa tetapi menghilang ketika koneksi ditutup.

MERGE (T-SQL)

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

Perintah MERGE T-SQL untuk Fabric Data Warehouse membawa kekuatan DML berbasis pilihan ke dalam satu pernyataan, untuk semua kebutuhan logika transformasi Anda.

Log audit SQL

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

Fitur ini melacak peristiwa database dan menulisnya ke log audit, sehingga memungkinkan pelanggan untuk mengkueri file audit menggunakan sys.fn_get_audit_file_v2 untuk audit dan kepatuhan.

JALANKAN SEBAGAI

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Ketersediaan umum

EXECUTE AS mengatur konteks eksekusi untuk sesi dan dengan demikian memungkinkan pengguna untuk meniru sebagai pengguna lain untuk memvalidasi izin yang diperlukan yang disediakan.

BCP

Estimasi garis waktu rilis: Q1 2025

Jenis Rilis: Pratinjau publik

Fabric DW mendukung utilitas bcp dan TDS Bulk Load API. API Lod Massal memungkinkan berbagai alat klien seperti bcp, SSIS, ADF, untuk memuat data ke Fabric DW. Dan contoh perintah bcp yang memuat konten file ke dalam tabel DW adalah:

bcp gold.artists in "C:\temp\gold_artist.txt" -d TextDW -c -S "<server name>.msit-datawarehouse.fabric.microsoft.com" -G -U theusert@microsoft.com 

Fitur yang dikirim

Jenis VARCHAR(MAX)/VARBINARY(MAX)

Dikirim (Q4 2024)

Jenis Rilis: Pratinjau publik

Pengguna dapat menentukan kolom dengan jenis VARCHAR(MAX)/VARBINARY(MAX) di Gudang data untuk menyimpan string atau data biner hingga 1 MB. Di titik akhir SQL untuk Lakehouse, jenis string dalam tabel Delta diwakili sebagai VARCHAR(MAX) tanpa pemotongan hingga 8 KB. Perbedaan performa antara kueri yang bekerja dengan jenis VARCHAR(MAX) dan VARCHAR(8000) diminimalkan, yang memungkinkan pengguna menggunakan jenis besar tanpa penalti performa yang signifikan.

Peningkatan Titik Akhir Analitik SQL

Dikirim (Q4 2024)

Jenis Rilis: Ketersediaan umum

Fitur ini mencakup pembaruan yang dibuat untuk pengalaman titik akhir analitik SQL, termasuk:

  • Refresh otomatis dipicu saat membuka item atau menyambungkan ke titik akhir
  • UI yang disempurnakan untuk merefresh titik akhir analitik SQL langsung di pita
  • Properti baru untuk Pembaruan Terakhir Berhasil di OneLake melalui flyout dialog properti tabel
  • Meningkatkan pesan kesalahan

Dukungan JSON

Dikirim (Q4 2024)

Jenis Rilis: Ketersediaan umum

Dukungan JSON di Fabric Datawarehouse memungkinkan pemrosesan data tekstual yang diformat sebagai teks JSON. Fitur JSON baru di Fabric DW adalah:

  • Untuk opsi kueri JSON yang memformat hasil kueri sebagai teks JSON. Ini adalah salah satu fitur yang diminta di situs Microsoft Fabric Idea.
  • Fungsi skalar JSON yang juga dapat digunakan dalam database Azure SQL. Selain fungsi skalar JSON yang ada (ISJSON, JSON_VALUE, JSON_QUERY, dan JSON_MODIFY), Fabric DW mendukung fungsi JSON terbaru yang ada di Azure SQL Database – JSON_PATH_EXISTS, JSON_OBJECT, dan JSON_ARRAY.

Peningkatan performa string

Dikirim (Q4 2024)

Jenis Rilis: Ketersediaan umum

Operasi pada string (VARCHAR(N)) umum dalam kueri T-SQL. Peningkatan performa pada fungsi string dan operator yang bekerja dengan string meningkatkan performa kueri yang menggunakan predikat LIKE, fungsi string, dan operator perbandingan dalam predikat WHERE, dan operator seperti GROUP BY, ORDER BY, JOIN yang bekerja dengan jenis string.

Dukungan kolaterasi tidak peka huruf besar/kecil (Khusus gudang)

Dikirim (Q4 2024)

Jenis Rilis: Ketersediaan umum

Menggunakan REST API publik untuk membuat Gudang Data menyertakan opsi baru untuk mengatur kolase default.  Ini dapat digunakan untuk mengatur default Kolase Tidak Sensitif Kasus baru. Dua kolase yang didukung Latin1_General_100_CI_AS_KS_WS_SC_UTF8 (yaitu Tidak Peka Huruf Besar/Kecil) dan Latin1_General_100_BIN2_UTF8 (yaitu Peka Huruf Besar/Kecil) dan terus menjadi default kami.

Dukungan klausul COLLATE T-SQL akan segera hadir. Ini akan memungkinkan Anda untuk menggunakan perintah COLLATE dengan CREATE atau ALTER TABLE untuk secara langsung menentukan kolase untuk bidang VARCHAR Anda.

CTE Berlapis

Dikirim (Q4 2024)

Common Table Expressions (CTE) meningkatkan keterbacaan dan penyederhanaan untuk kueri kompleks dengan mendekonstruksi kueri yang biasanya kompleks menjadi blok sederhana yang akan digunakan dan digunakan kembali jika perlu, alih-alih menulis ulang kueri.   CTE berlapis didefinisikan dengan definisi CTE lain.

Integrasi Notebook T-SQL

Dikirim (Q3 2024)

Jenis Rilis: Pratinjau publik

Anda dapat mulai menggunakan dukungan bahasa T-SQL dalam Notebooks yang menggabungkan kekuatan Notebook dan SQL dalam pengalaman yang sama - memungkinkan intellisense, lengkapi otomatis, kueri lintas database, visualisasi yang lebih kaya dan kemampuan untuk dengan mudah berkolaborasi dan berbagi menggunakan Notebook.

TRUNCATE

Dikirim (Q3 2024)

Perintah TRUNCATE dengan cepat menghapus semua baris data dari tabel.

ALTER TABLE - Tambahkan kolom nullable

Dikirim (Q3 2024)

Dukungan untuk ALTER TABLE ADD COLUMN untuk dapat memperluas tabel yang sudah ada dengan kolom baru yang memungkinkan nilai NULL.

Pembaruan wawasan kueri

Dikirim (Q3 2024)

Tampilan historis sesi tertutup Anda akan tersedia melalui Wawasan Kueri. Penambahan ini membantu Anda menganalisis lalu lintas, beban, dan penggunaan DW Anda.

Pemulihan di tempat dalam editor gudang

Dikirim (Q2 2024)

Anda sekarang dapat dengan mudah membuat titik pemulihan dan memulihkan gudang ke keadaan baik yang diketahui jika terjadi kerusakan yang tidak disengaja, menggunakan pengalaman editor Gudang.

Dukungan COPY INTO untuk penyimpanan aman

Dikirim (Q2 2024)

Jenis Rilis: Pratinjau publik

Anda sekarang dapat menyerap data ke gudang Anda menggunakan COPY INTO dari akun penyimpanan Azure eksternal yang dilindungi di belakang Firewall.

Copilot

Dikirim (Q2 2024)

Jenis Rilis: Pratinjau publik

Copilot memungkinkan pengembang dari tingkat keterampilan apa pun untuk dengan cepat membangun dan mengkueri gudang di Fabric. Copilot menawarkan saran dan praktik terbaik, kode lengkapi otomatis, membantu memperbaiki dan mendokumen kode, dan menawarkan bantuan dengan persiapan, pemodelan, dan analisis data.

Perjalanan waktu

Dikirim (Q2 2024)

Kemampuan untuk melakukan perjalanan waktu di tingkat pernyataan T-SQL memberdayakan pengguna untuk mengkueri data historis dari berbagai jangka waktu sebelumnya dengan menentukan tanda waktu hanya sekali untuk seluruh kueri. Perjalanan waktu membantu menghemat biaya penyimpanan secara signifikan dengan menggunakan satu salinan data yang ada di One Lake untuk melakukan analisis tren historis, pemecahan masalah, dan rekonsiliasi data. Selain itu, ini juga memfasilitasi pencapaian pelaporan yang stabil dengan menjunjung tinggi integritas data di berbagai tabel dalam gudang data.

Pengalaman pemantauan gudang

Dikirim (Q2 2024)

Dengan menggunakan pengalaman pemantauan gudang bawaan, Anda dapat melihat kueri langsung dan kueri historis, memantau, dan memecahkan masalah performa solusi end-to-end mereka.