HDInsightSparkTaskEvents

Spark 작업 이벤트.

테이블 특성

attribute	값
리소스 종류	microsoft.hdinsight/clusters
범주	Azure 리소스
솔루션	LogManagement
기본 로그	No
수집 시간 변환	Yes
샘플 쿼리	-

열

열	형식	Description
ApplicationId	문자열	레코드를 생성하는 애플리케이션의 애플리케이션 ID입니다.
AttemptId	문자열	작업 시도의 ID입니다.
_BilledSize	real	레코드 크기(바이트)
BytesRead	long	작업 중에 읽은 바이트 수입니다.
BytesWritten	long	태스크에서 작성한 바이트 수입니다.
ClusterDnsName	string	작업을 실행하는 클러스터의 DNS 이름입니다.
ClusterTenantId	문자열	작업을 실행하는 클러스터의 테넌트 ID입니다.
DiskBytesSpilled	long	유출된 디스크 바이트 수입니다.
EndReason	string	작업이 종료된 이유입니다.
ExecutorCPUTime	long	작업 실행기에서 사용하는 CPU 시간입니다.
ExecutorDeserializeCPUTime	long	작업 실행기가 역직렬화하는 데 소요된 CPU 시간입니다.
ExecutorDeserializeTime	long	작업 실행기가 역직렬화하는 데 소요된 시간입니다.
ExecutorId	문자열	ID 실행기입니다.
ExecutorRunTime	long	작업 실행기가 실행하는 데 소요된 시간입니다.
실패	bool	작업이 실패했는지 여부를 설명하는 부울입니다.
FinishTime	Datetime	작업이 완료된 시간(UTC)입니다.
호스트	문자열	작업을 실행하는 호스트의 FQDN입니다.
InputMetrics	long	작업 입력과 연결된 메트릭입니다.
IpAddress	string	작업을 실행하는 노드의 IP 주소입니다.
_IsBillable	문자열	데이터 수집을 청구할 수 있는지 여부를 지정합니다. _IsBillable 수집 시 false Azure 계정에 청구되지 않음
JvmGcTime	long	JVM이 가비지 수집에 소요된 시간입니다.
Killed	bool	작업이 종료되었는지 여부를 설명하는 부울입니다.
LaunchTime	Datetime	작업이 시작된 시간(UTC)입니다.
MemoryBytesSpilled	long	분산된 메모리 바이트입니다.
NumUpdatedBlockStatuses	long	작업 중에 업데이트된 블록 상태의 번호입니다.
OutputMetrics	long	작업 출력과 연결된 메트릭입니다.
PeakExecutionMemory	long	실행 중에 사용되는 최대 메모리 양입니다.
RecordsRead	long	작업 중에 읽은 레코드 수입니다.
RecordsWritten	long	태스크에서 작성한 레코드 수입니다.
지역	문자열	작업을 실행하는 클러스터의 지역입니다.
_ResourceId	문자열	레코드가 연결된 리소스의 고유 식별자입니다.
ResultSerializationTime	long	결과를 가져오는 동안 사용된 serialization 시간입니다.
ResultSize	long	결과의 크기입니다.
역할	문자열	작업을 실행하는 노드의 유형입니다.
SchedulerDelay	long	스케줄러가 경험한 지연 시간입니다.
ShuffleBytesWritten	long	순서 섞기 작업 중에 작성된 바이트입니다.
ShuffleFetchWaitTime	long	가져오기를 기다리는 데 소요된 시간입니다.
ShuffleLocalBlocksFetched	long	순서 섞기 작업 중에 생성된 로컬 블록의 수입니다.
ShuffleReadMetrics	long	순서 섞기 읽기와 연결된 메트릭입니다.
ShuffleRecordsWritten	long	순서 섞기 작업 중에 작성된 레코드 수입니다.
ShuffleRemoteBlocksFetched	long	순서 섞기 작업 중에 생성된 원격 블록의 수입니다.
ShuffleTotalBlocksFetched	long	순서 섞기 작업 중에 생성된 블록 수입니다.
ShuffleTotalBytesRead	long	순서 섞기 작업 중에 읽은 바이트 수입니다.
ShuffleWriteMetrics	long	순서 섞기 쓰기와 연결된 메트릭입니다.
ShuffleWriteTime	long	순서 섞기 작업 중에 쓰는 데 소요된 시간입니다.
SourceSystem	문자열	이벤트가 수집된 에이전트의 유형입니다. 예를 들어 OpsManager Windows 에이전트의 경우 직접 연결 또는 Operations Manager, Linux 모든 Linux 에이전트 또는 Azure Azure Diagnostics
StageId	문자열	작업과 연결된 단계의 ID입니다.
_SubscriptionId	문자열	레코드가 연결된 구독의 고유 식별자입니다.
TaskId	문자열	태스크의 ID입니다.
TaskType	문자열	작업 유형입니다.
TenantId	문자열	Log Analytics 작업 영역 ID
TimeGenerated	Datetime	로그가 생성된 시간의 타임스탬프(UTC)입니다.
Type	문자열	테이블의 이름입니다.
UpdatedBlocks	long	업데이트된 블록의 수입니다.
UserSubscriptionId	string	작업을 실행하는 클러스터의 구독 ID