Visualizzare la valutazione e i dettagli del modello NER personalizzati

  • Articolo

Al termine del training del modello, è possibile visualizzare le prestazioni del modello e visualizzare le entità estratte per i documenti nel set di test.

Nota

L'uso dell'opzione Suddivisione automatica del set di test dai dati di training può comportare risultati di valutazione del modello diversi ogni volta che si esegue il training di un nuovo modello, poiché il set di test viene selezionato in modo casuale dai dati. Per assicurarsi che l'evalazione venga calcolata nello stesso set di test ogni volta che si esegue il training di un modello, assicurarsi di usare l'opzione Usa una suddivisione manuale dei dati di training e test durante l'avvio di un processo di training e definire i documenti di test durante l'etichettatura dei dati.

Prerequisiti

Prima di visualizzare la valutazione del modello, è necessario:

Per altre informazioni, vedere il ciclo di vita dello sviluppo del progetto .

Dettagli modello

  1. Passare alla pagina del progetto in Language Studio.

  2. Selezionare Prestazioni modello dal menu a sinistra della schermata.

  3. In questa pagina è possibile visualizzare solo i modelli sottoposti a training correttamente, il punteggio F1 per ogni modello e data di scadenza del modello. È possibile selezionare il nome del modello per ulteriori dettagli sulle prestazioni.

Nota

Le entità che non sono etichettate né stimate nel set di test non faranno parte dei risultati visualizzati.

  • In questa scheda è possibile visualizzare i dettagli del modello, ad esempio: punteggio F1, precisione, richiamo, data e ora per il processo di training, tempo totale di formazione e numero di documenti di training e test inclusi in questo processo di training.

    Screenshot che mostra la pagina di panoramica per la valutazione del modello.

  • Verranno inoltre visualizzate indicazioni su come migliorare il modello. Quando si fa clic sui dettagli della visualizzazione , si aprirà un pannello laterale per fornire altre indicazioni su come migliorare il modello. In questo esempio, le entità BorrowerAddress e BorrowerName vengono confuse con $none entità. Facendo clic sulle entità confuse, verrà visualizzata la pagina di etichettatura dei dati per etichettare più dati con l'entità corretta.

    Screenshot che mostra la pagina indicazioni per la valutazione del modello.

    Altre informazioni sulle linee guida del modello e la matrice di confusione nei concetti relativi alle prestazioni del modello .

Caricare o esportare i dati del modello

Per caricare i dati del modello:

  1. Selezionare qualsiasi modello nella pagina di valutazione del modello .

  2. Selezionare il pulsante Carica dati modello .

  3. Verificare che non siano presenti modifiche non salvate, è necessario acquisire nella finestra visualizzata e selezionare Carica dati.

  4. Attendere il completamento del caricamento dei dati del modello nel progetto. Al termine, si verrà reindirizzati alla pagina Progettazione schema .

Per esportare i dati del modello:

  1. Selezionare qualsiasi modello nella pagina di valutazione del modello .

  2. Selezionare il pulsante Esporta dati modello . Attendere che lo snapshot JSON del modello venga scaricato in locale.

Elimina modello

Per eliminare il modello dall'interno di Language Studio:

  1. Selezionare Prestazioni modello dal menu a sinistra.

  2. Selezionare il nome del modello da eliminare e selezionare Elimina dal menu in alto.

  3. Nella finestra visualizzata selezionare OK per eliminare il modello.

Passaggi successivi