az synapse spark job
Správa dávkových úloh Synapse Spark
Příkazy
Name | Description | Typ | Stav |
---|---|---|---|
az synapse spark job cancel |
Zrušte úlohu Sparku. |
Základ | GA |
az synapse spark job list |
Vypíše všechny úlohy Sparku. |
Základ | GA |
az synapse spark job show |
Získejte úlohu Sparku. |
Základ | GA |
az synapse spark job submit |
Odešlete úlohu Sparku. |
Základ | GA |
az synapse spark job cancel
Zrušte úlohu Sparku.
az synapse spark job cancel --livy-id
--spark-pool-name
--workspace-name
[--yes]
Příklady
Zrušte úlohu Sparku.
az synapse spark job cancel --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool
Povinné parametry
ID úlohy Spark.
Název fondu Spark.
Název pracovního prostoru.
Volitelné parametry
Nevyzývejte k potvrzení.
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
Výstupní formát
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID
.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
az synapse spark job list
Vypíše všechny úlohy Sparku.
az synapse spark job list --spark-pool-name
--workspace-name
[--from-index]
[--size]
Příklady
Vypíše všechny úlohy Sparku.
az synapse spark job list --workspace-name testsynapseworkspace --spark-pool-name testsparkpool
Povinné parametry
Název fondu Spark.
Název pracovního prostoru.
Volitelné parametry
Volitelný parametr určující, od kterého indexu má seznam začínat.
Velikost vráceného seznamu. Ve výchozím nastavení je to 20 a to je maximum.
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
Výstupní formát
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID
.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
az synapse spark job show
Získejte úlohu Sparku.
az synapse spark job show --livy-id
--spark-pool-name
--workspace-name
Příklady
Získejte úlohu Sparku.
az synapse spark job show --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool
Povinné parametry
ID úlohy Spark.
Název fondu Spark.
Název pracovního prostoru.
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
Výstupní formát
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID
.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.
az synapse spark job submit
Odešlete úlohu Sparku.
az synapse spark job submit --executor-size {Large, Medium, Small}
--executors
--main-definition-file
--name
--spark-pool-name
--workspace-name
[--archives]
[--arguments]
[--configuration]
[--language {CSharp, PySpark, Python, Scala, Spark, SparkDotNet}]
[--main-class-name]
[--python-files]
[--reference-files]
[--tags]
Příklady
Odešlete úlohu Java Sparku.
az synapse spark job submit --name WordCount_Java --workspace-name testsynapseworkspace \
--spark-pool-name testsparkpool \
--main-definition-file abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/wordcount.jar \
--main-class-name WordCount \
--arguments abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/shakespeare.txt \
abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/result/ \
--executors 2 --executor-size Small
Povinné parametry
Velikost exekutoru.
Počet exekutorů.
Hlavní soubor použitý pro úlohu.
Název úlohy Spark.
Název fondu Spark.
Název pracovního prostoru.
Volitelné parametry
Pole archivů.
Volitelné argumenty pro úlohu (Poznámka: Pro argumenty souboru použijte identifikátory URI úložiště).
Konfigurace úlohy Sparku.
Jazyk úlohy Spark.
Plně kvalifikovaný identifikátor nebo hlavní třída, která je v hlavním definičním souboru.
Pole souborů používaných k obnovení náplně v hlavním definičním souboru Pythonu. Mezi příklady patří vlastní soubory whl a vlastní soubory Pythonu. Může předat více souborů, jako je az synapse spark job sumbit <other_args> --python_files abfss://file1 abss://file2
.
Další soubory používané pro referenci v hlavním definičním souboru.
Značky oddělené mezerami: klíč[=hodnota] [klíč[=hodnota] ...]. K vymazání existujících značek použijte "".
Globální parametry
Zvyšte úroveň podrobností protokolování, aby se zobrazily všechny protokoly ladění.
Zobrazte tuto zprávu nápovědy a ukončete ji.
Zobrazit pouze chyby, potlačit upozornění.
Výstupní formát
Řetězec dotazu JMESPath Další http://jmespath.org/ informace a příklady najdete v tématu.
Název nebo ID předplatného Výchozí předplatné můžete nakonfigurovat pomocí az account set -s NAME_OR_ID
.
Zvyšte úroveň podrobností protokolování. K úplnému ladění protokolů použijte příkaz --debug.