az synapse spark job

Synapse Spark-batchtaken beheren.

Opdracht

az synapse spark job cancel

Annuleer een Spark-taak.

az synapse spark job list

Alle Spark-taken op een lijst zetten.

az synapse spark job show

Een Spark-taak krijgen.

az synapse spark job submit

Een Spark-taak verzenden.

az synapse spark job cancel

Annuleer een Spark-taak.

az synapse spark job cancel --livy-id
                            --spark-pool-name
                            --workspace-name
                            [--subscription]
                            [--yes]

Voorbeelden

Annuleer een Spark-taak.

az synapse spark job cancel --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Vereiste parameters

--livy-id

De id van de Spark-taak.

--spark-pool-name

De naam van de Spark-pool.

--workspace-name

De naam van de werkruimte.

Optionele parameters

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .

--yes -y

Niet vragen om bevestiging.

az synapse spark job list

Alle Spark-taken op een lijst zetten.

az synapse spark job list --spark-pool-name
                          --workspace-name
                          [--from-index]
                          [--query-examples]
                          [--size]
                          [--subscription]

Voorbeelden

Alle Spark-taken op een lijst zetten.

az synapse spark job list --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Vereiste parameters

--spark-pool-name

De naam van de Spark-pool.

--workspace-name

De naam van de werkruimte.

Optionele parameters

--from-index

Optionele parameter die opgeeft van welke index de lijst moet beginnen.

--query-examples

JMESPath-tekenreeks voor u aanbevelen. U kunt een van de query's kopiƫren en plakken na de parameter --query tussen dubbele aanhalingstekens om de resultaten te bekijken. U kunt een of meer positionele trefwoorden toevoegen, zodat we suggesties kunnen geven op basis van deze sleutelwoorden.

--size

De grootte van de geretourneerde lijst. Standaard is dit 20 en dat is het maximum.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .

az synapse spark job show

Een Spark-taak krijgen.

az synapse spark job show --livy-id
                          --spark-pool-name
                          --workspace-name
                          [--query-examples]
                          [--subscription]

Voorbeelden

Een Spark-taak krijgen.

az synapse spark job show --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

Vereiste parameters

--livy-id

De id van de Spark-taak.

--spark-pool-name

De naam van de Spark-pool.

--workspace-name

De naam van de werkruimte.

Optionele parameters

--query-examples

JMESPath-tekenreeks voor u aanbevelen. U kunt een van de query's kopiƫren en plakken na de parameter --query tussen dubbele aanhalingstekens om de resultaten te bekijken. U kunt een of meer positionele trefwoorden toevoegen, zodat we suggesties kunnen geven op basis van deze sleutelwoorden.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .

az synapse spark job submit

Een Spark-taak verzenden.

az synapse spark job submit --executor-size {Large, Medium, Small}
                            --executors
                            --main-class-name
                            --main-definition-file
                            --name
                            --spark-pool-name
                            --workspace-name
                            [--archives]
                            [--arguments]
                            [--configuration]
                            [--language {CSharp, PySpark, Python, Scala, Spark, SparkDotNet}]
                            [--reference-files]
                            [--subscription]
                            [--tags]

Voorbeelden

Dien een Java Spark-taak in.

az synapse spark job submit --name WordCount_Java --workspace-name testsynapseworkspace \
--spark-pool-name testsparkpool \
--main-definition-file abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/wordcount.jar \
--main-class-name WordCount \
--arguments abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/shakespeare.txt \
abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/result/ \
--executors 2 --executor-size Small

Vereiste parameters

--executor-size

De grootte van de uitvoerder.

geaccepteerde waarden: Large, Medium, Small
--executors

Het aantal uitvoerders.

--main-class-name

De volledig gekwalificeerde id of de hoofdklasse in het hoofddefinitiebestand.

--main-definition-file

Het primaire bestand dat wordt gebruikt voor de taak.

--name -n

De naam van de Spark-taak.

--spark-pool-name

De naam van de Spark-pool.

--workspace-name

De naam van de werkruimte.

Optionele parameters

--archives

De matrix met archieven.

--arguments

Optionele argumenten voor de taak (Opmerking: gebruik opslag-URI's voor bestandsargumenten).

--configuration

De configuratie van de Spark-taak.

--language

De taal van de Spark-taak.

geaccepteerde waarden: CSharp, PySpark, Python, Scala, Spark, SparkDotNet
standaardwaarde: Scala
--reference-files

Aanvullende bestanden die worden gebruikt voor verwijzingen in het hoofddefinitiebestand.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .

--tags

Door ruimte gescheiden tags: sleutel[=waarde] [sleutel[=waarde] ...]. Gebruik '' om bestaande tags te verwijderen.