Spark-feladatok monitorozása jegyzetfüzeten belül

A Microsoft Fabric-jegyzetfüzet egy webes interaktív felület Apache Spark-feladatok fejlesztéséhez és gépi tanulási kísérletek elvégzéséhez. Ez a cikk bemutatja, hogyan figyelheti a Spark-feladatok előrehaladását, hogyan férhet hozzá a Spark-naplókhoz, hogyan kaphat tanácsot a jegyzetfüzeten belül, és hogyan navigálhat a Spark-alkalmazás részletes nézetére vagy a Spark felhasználói felületére a teljes jegyzetfüzet átfogóbb monitorozási információihoz.

Spark-feladat állapotának figyelése

A Spark-feladatok előrehaladási mutatója egy valós idejű folyamatjelzővel rendelkezik, amely segít az egyes jegyzetfüzetcellák feladatvégrehajtási állapotának monitorozásában. Megtekintheti az állapotot és a tevékenységek előrehaladását a Spark-feladatokban és -szakaszokban.

Erőforrás-használat figyelése

A végrehajtó használati gráfja vizuálisan megjeleníti a Spark-feladatok végrehajtóinak lefoglalását és az erőforrás-használatot. Jelenleg csak a Spark 3.4 vagy újabb futtatókörnyezeti információi jelenítik meg ezt a funkciót. Kattintson az Erőforrások fülre, és megjelenik a kódcella erőforrás-használatának vonaldiagramja.

Spark Advisor-javaslatok megtekintése

A beépített Spark-tanácsadó valós időben elemzi a jegyzetfüzet kódját és a Spark-végrehajtásokat, hogy optimalizálja a jegyzetfüzet futási teljesítményét, és segítsen a hibák hibakeresésében. Háromféle beépített tanács létezik: Információ, Figyelmeztetés és Hiba. A számokat tartalmazó ikonok jelzik a Spark-tanácsadó által egy adott jegyzetfüzetcellához létrehozott egyes kategóriákban (információ, figyelmeztetés és hiba) megadott tanácsok számát.

A tanács megtekintéséhez kattintson az elején található nyílra a részletek kibontásához és megjelenítéséhez.

A tanácsadói szakasz kibontása után egy vagy több tanács láthatóvá válik.

Spark Advisor ferdeség észlelése

Az adateltérés gyakori probléma, amelyet a felhasználók gyakran tapasztalnak. A Spark-tanácsadó támogatja a ferdeség észlelését, és ha eltérést észlel, az alábbiakban egy megfelelő elemzés jelenik meg.

Valós idejű Spark-naplók elérése

A Spark-naplók elengedhetetlenek a kivételek kereséséhez és a teljesítmény vagy a hibák diagnosztizálása érdekében. A jegyzetfüzet környezetfüggő monitorozási funkciója közvetlenül a futtatott cella naplóit jeleníti meg. Kereshet a naplókban, vagy szűrheti őket hibák és figyelmeztetések alapján.

Navigálás a Spark monitorozási részleteihez és a Spark felhasználói felületéhez

Ha további információkat szeretne elérni a Spark-végrehajtásról a jegyzetfüzet szintjén, a helyi menüben elérhető beállításokon keresztül navigálhat a Spark-alkalmazás részleteinek lapjára vagy a Spark felhasználói felületére.

Kapcsolódó tartalom

• Tudnivalók a Spark Advisorról
• Apache Spark-alkalmazás részletes monitorozása
• Alkalmazások hibakeresése a kiterjesztett Spark-előzménykiszolgáló használatával