Journaux de diagnostic Apache Spark dans Azure Synapse Analytics

Pour résoudre les problèmes liés aux pools Apache Spark dans l’espace de travail Azure Synapse Analytics, Support Microsoft et l’équipe d’ingénierie Azure Synapse Analytics peuvent afficher et télécharger les journaux de diagnostic associés à vos pools Apache Spark. Microsoft peut accéder aux données de journal ou en effectuer des copies temporaires pour vous aider à résoudre votre incident de support.

Journaux collectés pour la résolution des problèmes

Les tableaux suivants répertorient les données de journal qui seront collectées pour résoudre votre incident de support. En outre, vous pouvez être invité à fournir les mêmes types de données à partir de vos pools Apache Spark à l’aide de Synapse Studio.

Type Description
Journaux du pilote Apache Spark Le programme de pilote Spark est un processus critique utilisé pour négocier des ressources avec le gestionnaire de cluster et planifier l’exécution du travail. Les journaux du pilote contiennent des détails sur la façon dont le travail a été exécuté et les ressources utilisées. Ces informations sont essentielles pour la résolution des problèmes de l’application Spark.
Journaux de l’exécuteur Apache Spark Les exécuteurs Spark sont des processus liés aux nœuds Worker qui sont chargés d’exécuter des tâches individuelles dans un travail Spark donné. Ils sont démarrés au début d’une application Spark et s’exécutent généralement pendant toute la durée de vie d’une application. Une fois que les exécuteurs Spark ont exécuté la tâche, ils envoient les résultats à l’application pilote. Les journaux de l’exécuteur contiennent des détails sur la façon dont les tâches individuelles de votre application ont été exécutées et si l’une d’elles a échoué.
Journaux des événements Apache Spark Les journaux d’événements Spark contiennent des métriques liées à l’exécution et aux performances de tous les exécuteurs. Ils contiennent également la liste des étapes et des tâches du planificateur, ainsi que les informations sur l’environnement d’exécution.

Contactez-nous pour obtenir de l’aide

Pour toute demande ou assistance, créez une demande de support ou posez une question au support de la communauté Azure. Vous pouvez également soumettre des commentaires sur les produits à la communauté de commentaires Azure.