Co je rozhraní API Livy pro Datoví technici ing?
Poznámka:
Rozhraní API Livy for Fabric Datoví technici ing je ve verzi Preview.
Platí pro:✅ Datoví technici ing a Datová Věda v Microsoft Fabric
Rozhraní Microsoft Fabric Livy API umožňuje uživatelům odesílat a spouštět kód Sparku ve výpočetních prostředcích Sparku přidružených k objektu Fabric Lakehouse a eliminuje nutnost vytvářet artefakty definice úloh Poznámkový blok nebo Spark. Tato integrace s Lakehouse zajišťuje přímý přístup k datům uloženým na OneLake.
Funkce
Rozhraní API Fabric Livy umožňuje odesílání úloh ve dvou různých režimech:
- Úlohy relací
- Úloha relace Livy zahrnuje vytvoření relace Sparku, která zůstává aktivní během interakce s rozhraním Livy API. Relace Livy jsou užitečné pro interaktivní úlohy.
- Relace Sparku se spustí, když se úloha odešle a trvá, dokud ji uživatel neskončí nebo ji systém ukončí po 20 minutách nečinnosti. V průběhu relace může několik úloh běžet, sdílet stav a data uložená v mezipaměti mezi spuštěními.
- Dávkové úlohy
- Dávková úloha Livy zahrnuje odeslání aplikace Spark pro provedení jedné úlohy. Na rozdíl od úlohy relace Livy nedrží dávková úloha probíhající relaci Sparku.
- U dávkových úloh Livy zahájí každá úloha novou relaci Sparku, která končí po dokončení úlohy. Tento přístup funguje dobře pro úkoly, které nespoléhá na předchozí výpočty nebo nevyžadují udržování stavu mezi úlohami.
Začínáme s rozhraním Livy API
Zjistěte, jak vytvářet a spouštět úlohy Sparku pomocí rozhraní Api Livy v prostředcích infrastruktury výběrem úloh relace Submit Spark pomocí rozhraní Livy API nebo odesílání dávkových úloh Sparku pomocí rozhraní Livy API.