HDInsightSparkTaskEvents

Eventos de Tarefas do Spark.

Atributos de tabela

Atributo Valor
Tipos de recurso microsoft.hdinsight/clusters
Categorias Recursos do Azure
Soluções Gestão de Registos
Registo básico No
Transformação em tempo de ingestão Yes
Consultas de Exemplo -

Colunas

Coluna Tipo Description
ApplicationID string O ID da aplicação que produz o registo.
ID de Tentativa string O ID da tentativa de tarefa.
_BilledSize real O tamanho do registo em bytes
BytesRead long Os bytes de número lidos durante a tarefa.
BytesWritten long O número de bytes escritos pela tarefa.
ClusterDnsName string O nome DNS do cluster que está a executar a tarefa.
ClusterTenantId string O ID de inquilino do cluster que está a executar a tarefa.
DiskBytesSpilled long O número de bytes de disco derramados.
EndReason string Motivo pelo qual a tarefa terminou.
ExecutorCPUTime long O tempo de CPU consumido pelo executor de tarefas.
ExecutorDeserializeCPUTime long O tempo de CPU que o executor da tarefa passou a anular a serialização.
ExecutorDeserializeTime long O tempo que o executor da tarefa passou a anular a serialização.
ExecutorId string O executor de ID.
ExecutorRunTime long O executor de tarefas de tempo despendido em execução.
Com falhas bool Valor booleano que descreve se a tarefa falhou.
FinishTime datetime A hora (UTC) em que a tarefa foi concluída.
Anfitrião string O FQDN do anfitrião que está a executar a tarefa.
InputMetrics long As métricas associadas à entrada da tarefa.
Endereço Ip string O Endereço IP do nó que está a executar a tarefa.
_IsBillable string Especifica se a ingestão de dados é faturável. Quando _IsBillable é ingestão não é false faturada na sua conta do Azure
JvmGcTime long O tempo que a JVM passou a recolher lixo.
Morto bool Booleano que descreve se a tarefa foi terminada.
LaunchTime datetime A hora (UTC) em que a tarefa foi iniciada.
MemoryBytesSpilled long Os bytes de memória derramados.
NumUpdatedBlockStatuses long O número atualizou os estados do bloco durante a tarefa.
OutputMetrics long As métricas associadas à saída da tarefa.
PeakExecutionMemory long A quantidade máxima de memória utilizada durante a execução.
Registos Lidos long O número de registos lidos durante a tarefa.
Registos Escritos long O número de registos escritos pela tarefa.
Region string A região do cluster que está a executar a tarefa.
_ResourceId string Um identificador exclusivo para o recurso ao qual o registo está associado
ResultSerializationTime long O tempo de serialização gasto durante a obtenção do resultado.
ResultSize long Tamanho do resultado.
Função string O tipo de nó a executar a tarefa.
SchedulerDelay long A quantidade de atraso sofrido pelo agendador.
ShuffleBytesWritten long Os bytes escritos durante a tarefa de baralhar.
ShuffleFetchWaitTime long O tempo passado à espera de ser obtido.
ShuffleLocalBlocksFetched long O número de blocos locais fethced durante a tarefa shuffle.
ShuffleReadMetrics long As métricas associadas às leituras aleatórias.
ShuffleRecordsWritten long O número de registos escritos durante a tarefa shuffle.
ShuffleRemoteBlocksFetched long O número de blocos remotos fethced durante a tarefa shuffle.
ShuffleTotalBlocksFetched long O número de blocos fethced durante a tarefa shuffle.
ShuffleTotalBytesRead long Os bytes de número lidos durante a tarefa de baralhar.
ShuffleWriteMetrics long As métricas associadas às escritas aleatórias.
ShuffleWriteTime long O tempo passado a escrever durante a tarefa de confusão.
SourceSystem string O tipo de agente pelo que o evento foi recolhido. Por exemplo, para o OpsManager agente do Windows, ligação direta ou Operations Manager, Linux para todos os agentes linux ou Azure para Diagnóstico do Azure
StageId string O ID da fase associada à tarefa.
_SubscriptionId string Um identificador exclusivo para a subscrição à qual o registo está associado
TaskId string O ID da tarefa.
Tipo de Tarefa string O tipo de tarefa.
TenantId string O ID da área de trabalho do Log Analytics
TimeGenerated datetime O carimbo de data/hora (UTC) de quando o registo foi gerado.
Tipo string O nome da tabela
UpdatedBlocks long O número de blocos atualizados.
UserSubscriptionId string O ID da subscrição do cluster que está a executar a tarefa