az synapse spark job
Synapse Spark-batchtaken beheren.
Opdracht
| az synapse spark job cancel |
Annuleer een Spark-taak. |
| az synapse spark job list |
Alle Spark-taken op een lijst zetten. |
| az synapse spark job show |
Een Spark-taak krijgen. |
| az synapse spark job submit |
Een Spark-taak verzenden. |
az synapse spark job cancel
Annuleer een Spark-taak.
az synapse spark job cancel --livy-id
--spark-pool-name
--workspace-name
[--subscription]
[--yes]
Voorbeelden
Annuleer een Spark-taak.
az synapse spark job cancel --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool
Vereiste parameters
De id van de Spark-taak.
De naam van de Spark-pool.
De naam van de werkruimte.
Optionele parameters
Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .
Niet vragen om bevestiging.
Vergroot de logboekregistratie om alle logboeken voor foutopsporing weer te geven.
Laat dit Help-bericht zien en sluit af.
Alleen fouten weergeven, waarschuwingen onderdrukken.
Uitvoerindeling.
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de logboekregistratie. Gebruik --debug voor volledige logboeken voor foutopsporing.
az synapse spark job list
Alle Spark-taken op een lijst zetten.
az synapse spark job list --spark-pool-name
--workspace-name
[--from-index]
[--query-examples]
[--size]
[--subscription]
Voorbeelden
Alle Spark-taken op een lijst zetten.
az synapse spark job list --workspace-name testsynapseworkspace --spark-pool-name testsparkpool
Vereiste parameters
De naam van de Spark-pool.
De naam van de werkruimte.
Optionele parameters
Optionele parameter die opgeeft van welke index de lijst moet beginnen.
JMESPath-tekenreeks voor u aanbevelen. U kunt een van de query's kopiƫren en plakken na de parameter --query tussen dubbele aanhalingstekens om de resultaten te bekijken. U kunt een of meer positionele trefwoorden toevoegen, zodat we suggesties kunnen geven op basis van deze sleutelwoorden.
De grootte van de geretourneerde lijst. Standaard is dit 20 en dat is het maximum.
Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .
Vergroot de logboekregistratie om alle logboeken voor foutopsporing weer te geven.
Laat dit Help-bericht zien en sluit af.
Alleen fouten weergeven, waarschuwingen onderdrukken.
Uitvoerindeling.
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de logboekregistratie. Gebruik --debug voor volledige logboeken voor foutopsporing.
az synapse spark job show
Een Spark-taak krijgen.
az synapse spark job show --livy-id
--spark-pool-name
--workspace-name
[--query-examples]
[--subscription]
Voorbeelden
Een Spark-taak krijgen.
az synapse spark job show --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool
Vereiste parameters
De id van de Spark-taak.
De naam van de Spark-pool.
De naam van de werkruimte.
Optionele parameters
JMESPath-tekenreeks voor u aanbevelen. U kunt een van de query's kopiƫren en plakken na de parameter --query tussen dubbele aanhalingstekens om de resultaten te bekijken. U kunt een of meer positionele trefwoorden toevoegen, zodat we suggesties kunnen geven op basis van deze sleutelwoorden.
Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .
Vergroot de logboekregistratie om alle logboeken voor foutopsporing weer te geven.
Laat dit Help-bericht zien en sluit af.
Alleen fouten weergeven, waarschuwingen onderdrukken.
Uitvoerindeling.
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de logboekregistratie. Gebruik --debug voor volledige logboeken voor foutopsporing.
az synapse spark job submit
Een Spark-taak verzenden.
az synapse spark job submit --executor-size {Large, Medium, Small}
--executors
--main-class-name
--main-definition-file
--name
--spark-pool-name
--workspace-name
[--archives]
[--arguments]
[--configuration]
[--language {CSharp, PySpark, Python, Scala, Spark, SparkDotNet}]
[--reference-files]
[--subscription]
[--tags]
Voorbeelden
Dien een Java Spark-taak in.
az synapse spark job submit --name WordCount_Java --workspace-name testsynapseworkspace \
--spark-pool-name testsparkpool \
--main-definition-file abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/wordcount.jar \
--main-class-name WordCount \
--arguments abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/shakespeare.txt \
abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/result/ \
--executors 2 --executor-size Small
Vereiste parameters
De grootte van de uitvoerder.
Het aantal uitvoerders.
De volledig gekwalificeerde id of de hoofdklasse in het hoofddefinitiebestand.
Het primaire bestand dat wordt gebruikt voor de taak.
De naam van de Spark-taak.
De naam van de Spark-pool.
De naam van de werkruimte.
Optionele parameters
De matrix met archieven.
Optionele argumenten voor de taak (Opmerking: gebruik opslag-URI's voor bestandsargumenten).
De configuratie van de Spark-taak.
De taal van de Spark-taak.
Aanvullende bestanden die worden gebruikt voor verwijzingen in het hoofddefinitiebestand.
Naam of id van het abonnement. U kunt het standaardabonnement configureren met az account set -s NAME_OR_ID behulp van .
Door ruimte gescheiden tags: sleutel[=waarde] [sleutel[=waarde] ...]. Gebruik '' om bestaande tags te verwijderen.
Vergroot de logboekregistratie om alle logboeken voor foutopsporing weer te geven.
Laat dit Help-bericht zien en sluit af.
Alleen fouten weergeven, waarschuwingen onderdrukken.
Uitvoerindeling.
JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.
Vergroot de logboekregistratie. Gebruik --debug voor volledige logboeken voor foutopsporing.