Měření výsledků chatbota

Důležité

Schopnosti a funkce Power Virtual Agents jsou nyní součástí Microsoft Copilot Studio po významných investicích do generativní umělé inteligence a vylepšených integracích napříč Microsoft Copilot.

Některé články a snímky obrazovky mohou odkazovat na Power Virtual Agents, zatímco aktualizujeme dokumentaci a obsah školení.

Sledování zapojení a výsledků konverzace je zásadní pro měření metrik výkonu chatbota a pro zjištění oblastí pro zlepšení na analytickém panelu.

Důležité

Konverzace Microsoft Copilot Studio mezi koncovým uživatelem a chatbotem generuje jednu nebo více analytických relací. Všechny analytické relace jsou buď zapojené, nebo nezapojené.

Porozumění výsledkům analytických relací

Každá analytická relace má výsledek:

  • Relace bez zapojení mají vždy výsledek Žádný.
  • Relace se zapojením mají jeden z následujících výsledků:
  • Vyřešeno,
  • Eskalováno,
  • Opuštěno.

Zapojení a výsledky

Analytické relace konverzace, jejich stav zapojení a jejich výsledky jsou k dispozici jako součást analytického panelu nebo v tabulce ConversationTranscript v Dataverse.

Zapojení Výsledek definice
Bez zapojení Žádný (None) Všechny relace bez zapojení mají vždy výsledek Žádný.
Zapojené Eskalováno (HandOff) Relace končí a je považována za eskalovanou, když se aktivuje téma Eskalovat nebo je spuštěn uzel Přepojit konverzaci.
Zapojené Vyřešeno (Resolved) Relace je považována za vyřešenou, když je aktivováno téma Konec konverzace a uživatel potvrdí, že interakce byla úspěšná (impliedSuccess = FALSE), nebo neodpoví a nechá relaci vypršet (impliedSuccess = TRUE).
Zapojené Opuštěné (Abandoned) Relace je považována za opuštěnou, když relace se zapojením skončí a nedosáhne vyřešeného ani eskalovaného stavu.

Správné ukončení konverzace za účelem měření výsledků

Je důležité ukončit konverzaci pomocí tématu Konec konverzace, aby koncový uživatel mohl potvrdit, zda jeho problém byl vyřešen, či nikoli (a případně eskalovat).

Když robot potvrdí úspěch, zobrazí se koncovému uživateli průzkum CSAT, aby získal skóre 0–5.

Pokud jste si jisti výsledkem konverzace založené na logice tématu, můžete ho přímo označit jako potvrzený úspěch nebo přesměrovat na téma Eskalovat.

Tip

Na jednotném plátně pro vytváření obsahu můžete v editoru kódu nastavit conversationOutcome v rámci akce. Například conversationOutcome: ResolvedConfirmed pro potvrzený úspěch nebo conversationOutcome: ResolvedImplied pro předpokládaný úspěch.