Bagikan melalui

Migrasi dari Azure Synapse Spark ke Fabric

  • Artikel

Sebelum memulai migrasi, Anda harus memverifikasi bahwa Fabric Rekayasa Data adalah solusi terbaik untuk beban kerja Anda. Fabric Rekayasa Data mendukung item lakehouse, notebook, lingkungan, definisi kerja Spark (SJD) dan alur data, termasuk dukungan kemampuan runtime dan Spark yang berbeda.

Pertimbangan utama

Langkah awal dalam menyusun strategi migrasi adalah menilai kesesuaian. Perlu dicatat bahwa fitur Fabric tertentu yang terkait dengan Spark saat ini sedang dalam pengembangan atau perencanaan. Untuk detail dan pembaruan lebih lanjut, kunjungi peta strategi Fabric.

Untuk Spark, lihat perbedaan perbandingan terperinci antara Azure Synapse Spark dan Fabric.

Skenario migrasi

Jika Anda menentukan bahwa Fabric Rekayasa Data adalah pilihan yang tepat untuk memigrasikan beban kerja Spark yang ada, proses migrasi dapat melibatkan beberapa skenario dan fase:

  • Item: Migrasi item melibatkan transfer satu atau berbagai item dari ruang kerja Azure Synapse yang ada ke Fabric. Pelajari selengkapnya tentang memigrasikan kumpulan Spark, konfigurasi Spark, pustaka Spark, notebook, dan definisi kerja Spark.
  • Data dan alur: Menggunakan pintasan OneLake, Anda dapat membuat data ADLS Gen2 (ditautkan ke ruang kerja Azure Synapse) yang tersedia di Fabric lakehouse. Migrasi alur melibatkan pemindahan alur data yang ada ke Fabric, termasuk notebook dan aktivitas alur definisi kerja Spark. Pelajari selengkapnya tentang migrasi data dan alur.
  • Metadata: Migrasi metadata melibatkan pemindahan metadata katalog Spark (database, tabel, dan partisi) dari Apache Hive MetaStore (HMS) yang ada di Azure Synapse ke Fabric lakehouse. Pelajari selengkapnya tentang migrasi metadata HMS.
  • Ruang kerja: Pengguna dapat memigrasikan ruang kerja Azure Synapse yang ada dengan membuat ruang kerja baru di Microsoft Fabric, termasuk metadata. Migrasi ruang kerja tidak tercakup dalam panduan ini, asumsinya adalah bahwa pengguna perlu membuat ruang kerja baru atau memiliki ruang kerja Fabric yang ada. Pelajari selengkapnya tentang peran ruang kerja di Fabric.

Cuplikan layar memperlihatkan skenario migrasi.

Transisi dari Azure Synapse Spark ke Fabric Spark memerlukan pemahaman mendalam tentang arsitektur Anda saat ini dan perbedaan antara Azure Synapse Spark dan Fabric. Langkah penting pertama adalah penilaian, diikuti dengan pembuatan rencana migrasi terperinci. Paket ini dapat disesuaikan agar sesuai dengan sifat unik sistem Anda, dependensi fase, dan kompleksitas beban kerja.

Konten terkait