Nastavenia konfigurácie výpočtovej služby Spark v prostrediach služby Fabric
Skúsenosti s dátovým inžinierstvom a dátovými vedami služby Microsoft Fabric fungujú na plne spravovanej výpočtovej platforme služby Spark. Táto platforma je navrhnutá tak, aby poskytovala jedinečnú rýchlosť a efektivitu. Obsahuje úvodné bazény a vlastné bazény.
Prostredie služby Fabric obsahuje kolekciu konfigurácií vrátane výpočtových vlastností služby Spark, ktoré umožňujú používateľom nakonfigurovať reláciu služby Spark po pripojení k poznámkovým blokom a úlohám služby Spark. S prostredím máte k dispozícii flexibilný spôsob, ako prispôsobiť výpočtové konfigurácie na spúšťanie úloh služby Spark. V prostredí vám časť s výpočtami umožňuje nakonfigurovať vlastnosti na úrovni relácie služby Spark, aby sa prispôsobila pamäť a jadrá vykonávateľov na základe požiadaviek na vyťaženie. Vlastnosti Spark nastavené prostredníctvom parametrov na úrovni aplikácie spark.conf.set ovládajú a nesúvisia s premennými prostredia.
Správcovia pracovného priestoru môžu povoliť alebo zakázať prispôsobenia výpočtov v Prispôsobiť výpočtové konfigurácie položiek prepnúť na karte fondu v časti Data Engineering/Science na obrazovke Nastavenia pracovného priestoru.
Správcovia pracovného priestoru môžu delegovať členov a prispievateľov, aby zmenili predvolené konfigurácie výpočtovej úrovne relácie v prostredí služby Fabric povolením tohto nastavenia.
Ak správca pracovného priestoru túto možnosť zakáže v nastaveniach pracovného priestoru, časť výpočtového prostredia je zakázaná a predvolené konfigurácie výpočtového priestoru pre pracovný priestor sa použijú na spúšťanie úloh služby Spark.
Prispôsobenie vlastností výpočtu na úrovni relácie v prostredí
Ako používateľ môžete vybrať fond pre prostredie zo zoznamu fondov dostupných v pracovnom priestore služby Fabric. Správca pracovného priestoru služby Fabric vytvorí predvolený štartovací fond a vlastné bazény.
Po výbere fondu v časti Compute, môžete vyladiť jadrá a pamäť pre vykonávateľov v rámci hraníc veľkostí uzla a obmedzení vybratého fondu.
Príklad: Ako fond prostredí vyberiete vlastný fond s veľkosťou uzla veľkých jadier, čo je 16 virtuálnych jadier Spark. Potom si môžete na základe požiadavky na úrovni pracovnej úlohy vybrať jadro ovládača/vykonávača so 4, 8 alebo 16. Pre pamäť vyhradenú pre ovládač a vykonávače môžete vybrať 28 g, 56 g alebo 112 g, ktoré sú všetky v rámci veľkých hraníc veľkého limitu pamäte uzla.
Ďalšie informácie o veľkostiach výpočtov a ich jadrách alebo možnostiach pamäte nájdete v téme Čo je výpočet funkcie Spark v službe Microsoft Fabric?.