监控代理性能概览(Microsoft Copilot)

监控标签使开发者能够在上下文中查看代理在生产环境中的运行状况。 利用它来了解使用情况、结果、用户反馈、可靠性以及Copilot信用消耗情况,从而识别趋势并决定改进代理的方面。

Note

用于构建该代理的工具框架采用基于使用量的计费。 使用、组建、测试和评估智能体可能会消耗 Copilot 积分。 了解更多内容,请参阅 基于使用量的计费概览。

Note

你可以在发布代理之前打开监控标签页。 制作使用情况、反馈和信用数据是在你发布代理并有人开始使用后才显示出来的。

你可以监视什么?

Monitor 提供单个代理的摘要视图。 其中包括:

  • 概述:总会话数、用户数、自主运行次数、平均时长、成功率和失败率。
  • 反馈:对智能体回复的点赞和点踩反馈。
  • 预计使用的总额度:代理人在所选期间消耗的点数。
  • 会话:单次互动、其发生位置以及所消耗的额度。

使用日期筛选器聚焦于特定的报告期。 百分比指标将每个指标与上一时期进行比较。

监控与代理操作

Monitor 专为那些在构建和改进智能体过程中需要快速查看单个智能体状态的开发者而设计。 为了实现全舰队监控、治理、详细调查和跨代理和环境的运营优化,请使用代理运营经验。

概述指标

概览部分显示:

  • 总会话数:在所选时间段内的会话数量。
  • 总用户数:在选定期间内与代理互动的用户数量。
  • 平均时长:指会话和运行的平均时长。
  • 成功率:智能体完成会话和运行的成功程度。

估计使用总信用额度

积分卡片显示该代理在所选期间已使用的 Copilot 积分总数,以及与上一周期相比的变化。 与预览和评估中近实时的估计不同,Monitor显示的数值反映了截至该时点处理的所有事件,是用于计费的最终真实数据。

当有细分时,会显示按经验划分的估计消耗分,包括生产使用、预览测试、评估及其他支持的表面。 用它来了解哪些活动或结果消耗了这些积分。

了解更多内容包括 “了解估算信用使用量 ”和“ 基于使用量计费概览”。

反应

反应部分显示用户对客服响应的反馈。 该图表统计用户在收到经纪人回复时选择赞好(正面)或否定(否定)的频率。

代理功能

能力部分帮助您了解用户如何与您的代理互动,以及回答可靠性可以提升的方面。 其中包括:

  • 工具使用:代理在会话中调用了哪些工具。

会话跟踪

会话列表显示的是与你的客服的单独对话会话。 每场会议包括:

  • 状态:会话是否已完成、失败或正在进行中。
  • 持续时间:会话持续多久。
  • 用户消息:交换消息的数量。
  • 所用工具:代理在会话中调用了哪些工具。

按状态过滤会话,如失败、已完成或进行中,快速找到需要关注的会话。

选择会话以查看其完整文字记录,包括用户消息、代理回复以及工具调用和知识源使用的详细信息。

错误监控

“监控”标签页帮助您识别和诊断问题:

  • 通过“ 失败 ”或 “拒绝 ”状态筛选会话,以发现有问题的交互。
  • 查看会议记录,了解哪里出了问题。
  • 检查工具连接状态和认证错误。
  • 在失败会话中寻找可能提示配置问题的模式。

有关使用 “监控 ”标签的逐步指导,请参见 “监控代理”。

下载会议文字记录

你可以在会话结束后几分钟下载会议记录。你可以下载过去29天内的任何时间段。 可以在 Power Apps 门户中使用 Dataverse 下载它们,并在 Copilot Studio 应用中下载为会话聊天记录。 分析会话结束后,相关数据可能要等上一个小时,才会显示在监控标签页上。

评审会话

会谈列表显示了你与经纪人最近的互动。

Note

会话列表只显示过去28天的会话。

根据交互方式,列表可以显示:

  • 姓名:与互动相关的用户。
  • 日期:互动发生的时间。
  • 频道:互动发生的频道或Copilot Studio表面。
  • 消息数量:交互中消息的数量。
  • 持续时间:互动的持续时间。
  • 已使用的额度:互动消耗的 Copilot 额度。

打开会话详情页面以查看汇总会话指标,筛选列表,搜索会话,并下载会话数据。

如需其他转录导出选项,请在 下载代理会话转录中了解更多信息。

如需逐步指导,请参见 “监控与分析代理绩效”。