衡量聊天機器人結果
重要
在對生成式 AI 進行大量投資並增強 Microsoft Copilot 的整合後,Power Virtual Agents 的功能和特性現已成為 Microsoft Copilot Studio 的一部分。
當我們更新文件和培訓內容時,某些文章和螢幕擷取畫面可能會參考 Power Virtual Agents。
追蹤交談參與和結果對衡量聊天機器人效能計量和發現分析儀表板中需要改善之處而言至關重要。
重要
終端使用者與聊天機器人之間的 Microsoft Copilot Studio 交談會產生一個或多個分析工作階段。 所有分析工作階段若不是已參與,就是未參與。
了解分析工作階段結果
每個分析工作階段都各有結果:
- 未參與工作階段的結果永遠是無。
- 已參與工作階段會有下列其中一個結果:
- 已解決、
- 已上呈、
- 已放棄。
參與和結果
交談分析工作階段、其參與狀態及其結果可做為分析儀表板的一部分或在 Dataverse 的 ConversationTranscript
資料表中提供。
參與 | 結果 | 定義 |
---|---|---|
未參與 | 無 (None ) |
所有未參與工作階段的結果都是無。 |
已參與 | 已上呈 (HandOff ) |
觸發上呈主題,或到達轉移交談節點時,工作階段會視為已上呈。 |
已參與 | 已解決 (Resolved ) |
觸發交談結束主題,且使用者確認反覆運算已成功 (impliedSuccess = FALSE ),或未回答而讓工作階段逾時 (impliedSuccess = TRUE ) 時,工作階段視為已解決。 |
已參與 | 已放棄 (Abandoned ) |
已參與的工作階段結束,且未達已解決或已上呈狀態時,工作階段視為已放棄。 |
正確結束交談以衡量結果
請務必使用交談結束主題來結束交談,讓終端使用者可以確認其問題是否已解決 (也可能會上呈)。
機器人確認成功時,會向終端使用者顯示 CSAT 問卷以擷取 0-5 分數。
如果您根據主題邏輯確定了交談的結果,則可以直接將其標記為確認成功,或重新導向至上呈主題。
提示
在整合製作畫布的程式碼編輯器中,您可以在動作中設定 conversationOutcome
。 例如,conversationOutcome: ResolvedConfirmed
表示確認成功,或 conversationOutcome: ResolvedImplied
表示隱含成功。
意見反應
https://aka.ms/ContentUserFeedback。
即將登場:在 2024 年,我們將逐步淘汰 GitHub 問題作為內容的意見反應機制,並將它取代為新的意見反應系統。 如需詳細資訊,請參閱:提交並檢視相關的意見反應