az synapse spark job

Synapse Spark batch 작업을 관리 합니다.

명령

az synapse spark job cancel

Spark 작업을 취소 합니다.

az synapse spark job list

모든 Spark 작업을 나열 합니다.

az synapse spark job show

Spark 작업을 가져옵니다.

az synapse spark job submit

Spark 작업을 제출 합니다.

az synapse spark job cancel

Spark 작업을 취소 합니다.

az synapse spark job cancel --livy-id
                            --spark-pool-name
                            --workspace-name
                            [--subscription]
                            [--yes]

예제

Spark 작업을 취소 합니다.

az synapse spark job cancel --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

필수 매개 변수

--livy-id

Spark 작업의 id입니다.

--spark-pool-name

Spark 풀의 이름입니다.

--workspace-name

작업 영역의 이름

선택적 매개 변수

--subscription

구독의 이름 또는 ID입니다. 을 사용 하 여 기본 구독을 구성할 수 있습니다 az account set -s NAME_OR_ID .

--yes -y

확인을 묻는 메시지를 표시하지 마세요.

az synapse spark job list

모든 Spark 작업을 나열 합니다.

az synapse spark job list --spark-pool-name
                          --workspace-name
                          [--from-index]
                          [--query-examples]
                          [--size]
                          [--subscription]

예제

모든 Spark 작업을 나열 합니다.

az synapse spark job list --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

필수 매개 변수

--spark-pool-name

Spark 풀의 이름입니다.

--workspace-name

작업 영역의 이름

선택적 매개 변수

--from-index

목록을 시작할 인덱스를 지정 하는 선택적 매개 변수입니다.

--query-examples

JMESPath 문자열을 권장 합니다. 쿼리 중 하나를 복사 하 여 결과를 볼 수 있도록 큰따옴표 내에서--query 매개 변수 뒤에 붙여 넣을 수 있습니다. 이러한 주요 단어를 기준으로 제안을 제공할 수 있도록 하나 이상의 위치 키워드를 추가할 수 있습니다.

--size

반환 된 목록의 크기입니다. 기본적으로 20 이며 최대값입니다.

--subscription

구독의 이름 또는 ID입니다. 을 사용 하 여 기본 구독을 구성할 수 있습니다 az account set -s NAME_OR_ID .

az synapse spark job show

Spark 작업을 가져옵니다.

az synapse spark job show --livy-id
                          --spark-pool-name
                          --workspace-name
                          [--query-examples]
                          [--subscription]

예제

Spark 작업을 가져옵니다.

az synapse spark job show --livy-id 1 --workspace-name testsynapseworkspace --spark-pool-name testsparkpool

필수 매개 변수

--livy-id

Spark 작업의 id입니다.

--spark-pool-name

Spark 풀의 이름입니다.

--workspace-name

작업 영역의 이름

선택적 매개 변수

--query-examples

JMESPath 문자열을 권장 합니다. 쿼리 중 하나를 복사 하 여 결과를 볼 수 있도록 큰따옴표 내에서--query 매개 변수 뒤에 붙여 넣을 수 있습니다. 이러한 주요 단어를 기준으로 제안을 제공할 수 있도록 하나 이상의 위치 키워드를 추가할 수 있습니다.

--subscription

구독의 이름 또는 ID입니다. 을 사용 하 여 기본 구독을 구성할 수 있습니다 az account set -s NAME_OR_ID .

az synapse spark job submit

Spark 작업을 제출 합니다.

az synapse spark job submit --executor-size {Large, Medium, Small}
                            --executors
                            --main-class-name
                            --main-definition-file
                            --name
                            --spark-pool-name
                            --workspace-name
                            [--archives]
                            [--arguments]
                            [--configuration]
                            [--language {CSharp, PySpark, Python, Scala, Spark, SparkDotNet}]
                            [--reference-files]
                            [--subscription]
                            [--tags]

예제

Java Spark 작업을 제출 합니다.

az synapse spark job submit --name WordCount_Java --workspace-name testsynapseworkspace \
--spark-pool-name testsparkpool \
--main-definition-file abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/wordcount.jar \
--main-class-name WordCount \
--arguments abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/shakespeare.txt \
abfss://testfilesystem@testadlsgen2.dfs.core.windows.net/samples/java/wordcount/result/ \
--executors 2 --executor-size Small

필수 매개 변수

--executor-size

실행자 크기입니다.

허용되는 값: Large, Medium, Small
--executors

실행자 수입니다.

--main-class-name

주 정의 파일에 있는 정규화 된 식별자 또는 주 클래스입니다.

--main-definition-file

작업에 사용되는 주 파일입니다.

--name -n

Spark 작업 이름입니다.

--spark-pool-name

Spark 풀의 이름입니다.

--workspace-name

작업 영역의 이름

선택적 매개 변수

--archives

보관 파일의 배열입니다.

--arguments

작업에 대 한 선택적 인수입니다 (참고: 파일 인수에 저장소 Uri를 사용 하십시오).

--configuration

Spark 작업의 구성입니다.

--language

Spark 작업 언어입니다.

허용되는 값: CSharp, PySpark, Python, Scala, Spark, SparkDotNet
기본값: Scala
--reference-files

주 정의 파일에서 참조용으로 사용되는 추가 파일입니다.

--subscription

구독의 이름 또는 ID입니다. 을 사용 하 여 기본 구독을 구성할 수 있습니다 az account set -s NAME_OR_ID .

--tags

공백으로 구분 된 태그: 키 [= 값] [키 [= 값] ...]. ""를 사용 하 여 기존 태그를 지웁니다.