Batchtests mit einem Satz von BeispieläußerungenBatch testing with a set of example utterances

Batchtests sind umfassende Tests Ihres aktuellen trainierten Modells zum Messen seiner Leistung in LUIS.Batch testing is a comprehensive test on your current trained model to measure its performance in LUIS. Die für Batchtests verwendeten Datasets dürfen keine Beispieläußerungen in den Absichten oder Äußerungen enthalten, die vom Vorhersagelaufzeit-Endpunkt empfangen werden.The data sets used for batch testing should not include example utterances in the intents or utterances received from the prediction runtime endpoint.

Achtung

Dieses Dokument wurde nicht mit Text und Screenshots für das neueste LUIS-Portal aktualisiert.This document has not been updated with text and screenshots for the latest LUIS portal.

Importieren einer Datasetdatei für BatchtestsImport a dataset file for batch testing

  1. Wählen Sie in der oberen Leiste Test und dann Batch testing panel (Batchtestbereich) aus.Select Test in the top bar, and then select Batch testing panel.

    Link zum Testen in Batches

  2. Wählen Sie Dataset importieren aus.Select Import dataset. Das Dialogfeld Import new dataset (Neues Dataset importieren) wird angezeigt.The Import new dataset dialog box appears. Wählen Sie Datei auswählen aus, und suchen Sie eine JSON-Datei mit dem richtigen JSON-Format, die höchstens 1.000 zu testende Äußerungen enthält.Select Choose File and locate a JSON file with the correct JSON format that contains no more than 1,000 utterances to test.

    Fehler beim Importieren werden auf einer roten Benachrichtigungsleiste am oberen Rand des Browsers gemeldet.Import errors are reported in a red notification bar at the top of the browser. Wenn ein Import Fehler aufweist, wird kein Dataset erstellt.When an import has errors, no dataset is created. Weitere Informationen finden Sie unter Häufige Fehler.For more information, see Common errors.

  3. Geben Sie im Feld Datasetname einen Namen für die Datasetdatei an.In the Dataset Name field, enter a name for your dataset file. Die Datasetdatei enthält ein Array von Äußerungen mit bezeichneter Absicht und Entitäten.The dataset file includes an array of utterances including the labeled intent and entities. Überprüfen Sie die Beispielbatchdatei auf ihre Syntax.Review the example batch file for syntax.

  4. Wählen Sie Fertigaus.Select Done. Die Datasetdatei wird hinzugefügt.The dataset file is added.

Ausführen, Umbenennen, Exportieren oder Löschen eines DatasetsRun, rename, export, or delete dataset

Verwenden Sie zum Ausführen, Umbenennen, Exportieren oder Löschen des Datasets die Auslassungspunkte (... ) am Ende der Datasetzeile.To run, rename, export, or delete the dataset, use the ellipsis (...) button at the end of the dataset row.

Datasetaktionen

Ausführen eines Batchtests mit Ihrer trainierten AppRun a batch test on your trained app

Um den Test auszuführen, wählen Sie den Namen des Datasets aus.To run the test, select the dataset name. Wenn der Test abgeschlossen ist, wird in dieser Zeile das Testergebnis des Datasets angezeigt.When the test completes, this row displays the test result of the dataset.

Batchtestergebnisse

Das herunterladbare Dataset ist dieselbe Datei, die für die Batchtests hochgeladen wurde.The downloadable dataset is the same file that was uploaded for batch testing.

StateState BedeutungMeaning
Symbol mit grünem Kreis für erfolgreichen Test Alle Äußerungen sind erfolgreich.All utterances are successful.
Symbol mit rotem x für Fehler beim Test Mindestens eine Absicht einer Äußerung entsprach nicht der Vorhersage.At least one utterance intent did not match the prediction.
Symbol für Testbereitschaft Der Test ist für die Ausführung bereit.Test is ready to run.

Anzeigen von BatchtestergebnissenView batch test results

Wählen Sie zum Überprüfen der Batchtestergebnisse See results (Ergebnisse anzeigen) aus.To review the batch test results, select See results.

Batchtestergebnisse

Filtern von DiagrammergebnissenFilter chart results

Um das Diagramm nach einer bestimmten Absicht oder Entität zu filtern, wählen Sie die Absicht bzw. die Entität im Filterbereich rechts aus.To filter the chart by a specific intent or entity, select the intent or entity in the right-side filtering panel. Die Datenpunkte und ihre Verteilung im Diagramm werden entsprechend Ihrer Auswahl aktualisiert.The data points and their distribution update in the graph according to your selection.

Visualisierte Batchtestergebnisse

Anzeigen von Einzelpunkt-ÄußerungsdatenView single-point utterance data

Zeigen Sie im Diagramm auf einen Datenpunkt, um die Bewertung seiner Vorhersage anzuzeigen.In the chart, hover over a data point to see the certainty score of its prediction. Wählen Sie einen Datenpunkt aus, um die zugehörige Äußerung in der Liste der Äußerungen am unteren Rand der Seite abzurufen.Select a data point to retrieve its corresponding utterance in the utterances list at the bottom of the page.

Ausgewählte Äußerung

Anzeigen von AbschnittsdatenView section data

Wählen Sie im Diagramm mit vier Abschnitten den Namen des Abschnitts aus, z.B. Falsch positive Ergebnisse rechts oben im Diagramm.In the four-section chart, select the section name, such as False Positive at the top-right of the chart. Unter dem Diagramm werden alle Äußerungen in diesem Abschnitt in einer Liste angezeigt.Below the chart, all utterances in that section display below the chart in a list.

Ausgewählte Äußerungen nach Abschnitt

Im vorhergehenden Bild ist die Äußerung switch on mit der Absicht „TurnAllOn“ bezeichnet, erhielt jedoch als Vorhersage die Absicht „None“.In this preceding image, the utterance switch on is labeled with the TurnAllOn intent, but received the prediction of None intent. Dies ist ein Hinweis darauf, dass für die Absicht „TurnAllOn“ weitere Beispieläußerungen erforderlich sind, um die erwartete Vorhersage zu treffen.This is an indication that the TurnAllOn intent needs more example utterances in order to make the expected prediction.

Die beiden Abschnitte des Diagramms in Rot weisen auf Äußerungen hin, bei denen die Vorhersage nicht mit der erwarteten übereinstimmte.The two sections of the chart in red indicate utterances that did not match the expected prediction. Diese zeigen Äußerungen an, für die LUIS mehr Training benötigt.These indicate utterances which LUIS needs more training.

In den beiden Abschnitten des Diagramms in Grün entsprach die Vorhersage der Erwartung.The two sections of the chart in green did match the expected prediction.

Rollen in BatchtestsRoles in batch testing

Achtung

Entitätsrollen werden bei Batchtests nicht unterstützt.Entity roles are not supported in batch testing.

Nächste SchritteNext steps

Wenn sich in Tests herausstellt, dass Ihre LUIS-App nicht die richtige Absichten und Entitäten erkennt, können Sie die Leistung Ihrer LUIS-App verbessern, indem Sie aktiv weitere Äußerungen bezeichnen oder Features hinzufügen.If testing indicates that your LUIS app doesn't recognize the correct intents and entities, you can work to improve your LUIS app's performance by labeling more utterances or adding features.