Migrácia zo služby Azure Synapse Spark do služby Fabric
Skôr než začnete s migráciou, mali by ste si overiť, či je Dátový inžinier služby Fabric najlepším riešením pre vaše vyťaženie. Služba Fabric Dátový inžinier ing podporuje lakehouse, notebook, prostredie, definíciu úloh Spark (SJD) a položky údajového kanála vrátane rôznych funkcií runtime a Spark.
Dôležité informácie
Prvým krokom pri tvorbe stratégie migrácie je posúdenie vhodnosti. Stojí za to poznamenať, že niektoré funkcie služby Fabric súvisiace so službou Spark sú v súčasnosti vo vývoji alebo plánovaní. Ďalšie podrobnosti a aktualizácie nájdete v pláne služby Fabric.
V službe Spark si pozrite podrobné rozdiely v porovnávaní medzi službami Azure Synapse Spark a Fabric.
Scenáre migrácie
Ak zistíte, že služba Fabric Dátový inžinier ing je tou správnou voľbou pri migrácii existujúcich vyťažení služby Spark, proces migrácie môže zahŕňať viacero scenárov a fáz:
- Položky: Migrácia položiek zahŕňa prenos jednej alebo rôznych položiek z existujúceho pracovného priestoru služby Azure Synapse do služby Fabric. Získajte ďalšie informácie o migrácii bazénov Spark, konfiguráciách spark, knižniciach Spark, poznámkových blokoch a definíciách úloh služby Spark.
- Údaje a kanály: Pomocou skratiek OneLake môžete sprístupniť údaje služby ADLS Gen2 (prepojené s pracovným priestorom Azure Synapse) v službe Fabric lakehouse. Migrácia kanálov zahŕňa premiestnenie existujúcich kanálov údajov do služby Fabric vrátane činností poznámkového bloku a kanála definície úlohy služby Spark. Ďalšie informácie o migrácii údajov a kanálov.
- Metaúdaje: Migrácia metaúdajov zahŕňa premiestnenie metaúdajov (databáz, tabuliek a oblastí) z existujúceho ukladacieho priestoru Hive MetaStore (HMS) v službe Azure Synapse do služby Fabric lakehouse. Ďalšie informácie o migrácii metaúdajov hms.
- Pracovný priestor: Používatelia môžu migrovať existujúci pracovný priestor služby Azure Synapse vytvorením nového pracovného priestoru v službe Microsoft Fabric vrátane metaúdajov. Migrácia pracovných priestorov nie je zahrnutá v tomto sprievodnom materiáli, predpoklad je, že používatelia potrebujú vytvoriť nový pracovný priestor alebo mať existujúci pracovný priestor služby Fabric. Ďalšie informácie o rolách pracovného priestoru v službe Fabric.
Prechod zo služby Azure Synapse Spark na službu Fabric Spark si vyžaduje hlboké porozumenie vašej aktuálnej architektúre a rozdielom medzi službami Azure Synapse Spark a Fabric. Prvým kľúčovým krokom je hodnotenie, za ktorým nasleduje vytvorenie podrobného plánu migrácie. Tento plán je možné prispôsobiť tak, aby zodpovedal jedinečným vlastnostiam vášho systému, závislosti fáz a zložitosti vyťaženia.
Súvisiaci obsah
- Fabric vs Azure Synapse Spark
- Ďalšie informácie o možnostiach migrácie pre fondy Spark, konfigurácie, knižnice, poznámkové bloky a definíciu úloh služby Spark
- Migrácia údajov a kanálov
- Migrácia metaúdajov Metastore hive