Copilot Studio의 Copilot 성능 및 사용량 분석

중요

Power Virtual Agents 기능 및 특징은 생성 AI에 대한 막대한 투자와 Microsoft Copilot 전반의 향상된 통합에 따라 이제 Microsoft Copilot Studio의 일부가 되었습니다.

문서 및 교육 콘텐츠를 업데이트하는 동안 일부 문서와 스크린샷에서는 Power Virtual Agents을 참조할 수 있습니다.

분석 페이지의 요약 탭은 Copilot 성능에 대한 광범위한 개요를 제공합니다. AI(인공 지능) 기술을 사용하여 에스컬레이션 비율, 취소 비율 및 해결률에 가장 큰 영향을 미치는 토픽을 보여줍니다.

분석 요약 페이지.

기본적으로 이 페이지에는 지난 7일 동안의 주요 성과 지표가 표시됩니다. 기간을 변경하려면 페이지 상단의 date 컨트롤을 사용하십시오.

분석 세션은 Copilot과의 사용자 참여를 추적하고 Copilot이 사용자 작업을 얼마나 잘 처리하는지 파악하려고 노력합니다. 단일 대화에는 하나 이상의 분석 세션이 포함될 수 있습니다. 각 세션은 특정 토픽과 연결됩니다. 마지막으로 트리거된 비시스템 토픽 또는 비시스템 항목이 트리거되지 않은 경우 트리거된 첫 번째 시스템 토픽은 분석 세션과 연결됩니다.

요약 차트는 Copilot이 얼마나 잘 수행하고 있는지 측정하고 Copilot의 성능에 가장 큰 영향을 미치는 토픽을 찾는 데 도움이 됩니다. 30분 동안 활동이 없으면 세션이 시간 초과됩니다.

  • 사용자가 Copilot과 상호 작용하거나 Copilot이 사용자에게 사전 메시지를 보낼 때 세션이 시작됩니다. 세션은 미참여 상태에서 시작됩니다.

  • 다음 중 하나가 발생하면 세션이 참여됩니다.

    • 비시스템 토픽이 트리거되었습니다.
    • 세션이 에스컬레이션되었습니다.
    • 대체 토픽이 트리거됩니다.
    • 대화 부스팅 토픽이 트리거됩니다.

    세션이 참여하면 참여 상태가 유지됩니다. 참여 세션의 결과는 해결됨, 에스컬레이션됨 또는 취소됨 중 하나입니다.

  • 세션이 종료되고 에스컬레이션 토픽이 트리거되거나 에이전트로 이전 노드가 실행되면 에스컬레이션됨으로 간주됩니다. (대화가 라이브 에이전트로 전송되는지 여부에 관계없이 현재 분석 세션이 종료됩니다.)

  • 다음과 같은 경우 세션이 종료되고 해결됨으로 간주됩니다.

    • 확인된 성공 토픽이 트리거됩니다.
    • 대화 종료 토픽이 트리거되고 사용자는 상호 작용이 성공했는지 확인하거나 세션 시간이 초과되도록 합니다.
  • 참여 세션이 시간 초과되고 해결 또는 에스컬레이션된 상태에 도달하지 않으면 세션이 종료되고 최소됨으로 간주됩니다.

요약 탭에는 Copilot의 핵심 성과 지표를 그래픽으로 볼 수 있는 다양한 차트가 포함되어 있습니다. 이 문서의 나머지 부분에서는 각 차트에 대해 자세히 설명합니다.

요약 차트

요약 차트.

요약 차트는 지정된 기간 및 기간별 비율 변화에 대한 핵심 성과 지표를 요약합니다.

설명 자세히
총 세션 지정된 기간 내 총 세션 수입니다.
참여 비율 참여하게 된 총 세션의 비율입니다.
해결률 해결된 참여 세션의 백분율입니다.
에스컬레이션 비율 에스컬레이션된 참여 세션의 백분율입니다.
중단 비율 취소된 참여 세션의 백분율입니다.
CSAT 고객이 세션 종료 요청에 응답하여 설문 조사에 응한 세션에 대한 평균 고객 만족도(CSAT) 점수의 그래픽 보기입니다.

시간 경과에 따른 참여도 차트

시간에 따른 참여도 차트는 시간에 따라 참여한 또는 참여하지 않은 세션 수를 그래픽으로 보여줍니다.

Description 세부 사항
참여함 참여한 일일 세션 수입니다.
참여 안 함 참여하지 않은 일일 세션 수입니다.

시간 경과에 따른 세션 결과 차트

시간에 따른 세션 결과 차트는 지정된 기간 동안의 일일 해결률, 에스컬레이션 비율 및 취소 비율을 그래픽으로 보여줍니다.

Description 세부 사항
해결됨 해결된 일일 세션 비율.
악화됨 에스컬레이션된 일일 세션 비율.
중단됨 취소된 일일 세션 비율.

해결률 동인 차트

해결률 동인 차트에는 지정된 기간 동안 해결률에 영향을 주는 순서대로 토픽이 표시됩니다.

설명 자세히
주제 Microsoft Copilot Studio 토픽.
요금 해결된 토픽에 대한 참여 세션의 백분율입니다.
영향 토픽의 해결률 영향 점수입니다. 해결률 영향 점수는 토픽에서 토픽을 제외한 전체 해결률을 뺀 것을 포함한 전체 해결률입니다.

차트는 영향을 백분률로 표시합니다. 양수 영향 비율이 있는 토픽은 평균 해결 비율보다 높은 토픽으로, Copilot의 전반적인 해결 비율이 증가했습니다.

음수 영향 비율이 높은 토픽의 해결 비율을 높여 Copilot의 전체 해결 비율을 더 빠르게 개선합니다.

각 토픽에 대한 추가 정보를 보려면 세부 정보 링크를 선택하여 토픽 세부 사항 페이지를 표시하십시오. 자세한 내용은 토픽 세부 정보 페이지를 참조하십시오.

에스컬레이션 비율 동인 차트

에스컬레이션 비율 동인 차트에는 지정된 기간 동안 에스컬레이션 비율에 영향을 주는 순서대로 토픽이 표시됩니다.

설명 자세히
주제 Microsoft Copilot Studio 토픽.
요금 에스컬레이션된 토픽에 대한 참여 세션의 백분율입니다.
영향 토픽의 에스컬레이션 비율 영향 점수입니다. 에스컬레이션 비율 영향 점수는 토픽에서 토픽을 제외한 전체 에스컬레이션 비율을 뺀 것을 포함한 전체 에스컬레이션 비율입니다.

차트는 영향을 백분률로 표시합니다. 양수 영향 비율이 있는 토픽은 에스컬레이션 비율이 평균보다 높은 토픽으로, Copilot의 전반적인 에스컬레이션 비율이 증가했습니다.

영향 비율이 높은 토픽의 에스컬레이션 비율을 낮추면 Copilot의 에스컬레이션 비율을 더 빠르게 낮출 수 있습니다.

각 토픽에 대한 추가 정보를 보려면 세부 정보 링크를 선택하여 토픽 세부 사항 페이지를 표시하십시오. 자세한 내용은 토픽 세부 정보 페이지를 참조하십시오.

취소 비율 동인 차트

취소 비율 동인 차트에는 지정된 기간 동안 취소 비율에 영향을 주는 순서대로 토픽이 표시됩니다.

설명 자세히
주제 Microsoft Copilot Studio 토픽.
요금 취소된 토픽에 대한 참여 세션의 백분율입니다.
영향 토픽의 취소 비율 영향 점수입니다. 취소 비율 영향 점수는 토픽에서 토픽을 제외한 전체 취소 비율을 뺀 것을 포함한 전체 취소 비율입니다.

차트는 영향을 백분률로 표시합니다. 양수 영향 비율이 있는 토픽은 중단 비율이 평균보다 높은 토픽으로, Copilot의 전반적인 중단 비율이 증가했습니다.

영향 비율이 높은 토픽의 중단 비율을 낮추면 Copilot의 중단 비율을 더 빠르게 낮출 수 있습니다.

각 토픽에 대한 추가 정보를 보려면 세부 정보 링크를 선택하여 토픽 세부 사항 페이지를 표시하십시오. 자세한 내용은 토픽 세부 정보 페이지를 참조하십시오.