PolyAI 中文文档 下载 App

Poly Score:每通对话的质量综合评分

为什么需要一个综合评分

Dashboard 上的指标(话题覆盖率、Flow 完成率、CSAT)各自独立,单看某个指标很难判断"这通对话整体好不好"。Poly Score 把多个维度的信号综合成一个 0-100 的分数,让你可以:

评分维度

Poly Score 综合以下维度:

维度权重评分依据
话题匹配准确性高该话题的 RAG 匹配分、示例问题覆盖度、匹配后是否触发了正确的 Action / Flow
Flow 完成度高是否走完了完整 Flow、有没有在中间退出、实体提取是否全部成功
语言自然度中智能体回复的口语化程度、社会存在感标记、是否过度解释
打断处理中用户打断时智能体是否及时停止、是否正确理解打断意图
客户情绪低(但严重情绪问题会拉分)情绪激动的对话扣分,平静 / 积极的对话加分
CSAT 反馈高客户显式评分的对话直接用评分加权

怎么用 Poly Score

用它做优化优先级排序

在 Conversations 面板里按 Poly Score 升序排列 → 排在最前面的低分对话就是最该优化的。

典型高分对话(Poly Score 90+):

典型低分对话(Poly Score 50-):

用它追踪版本效果

每次发布后,看"发布前 vs 发布后"的 Poly Score 变化。如果你改了某个 Flow 或加了一批话题,理论上相关对话的 Poly Score 应该上升。如果反而下降了,说明你的改动有问题,回去检查。

Poly Score 的局限

Poly Score 是 PolyAI 基于自己模型和信号算出来的自动评分,不是人工评审。它可能漏掉一些"看起来好但实际上没解决问题"的对话,也可能给"看起来差但实际完成了核心任务"的对话打低分。

所以 Poly Score 的最佳用法是:用它做初筛,发现低分对话后再人工 review 每一通——它帮你把大海捞针变成了在小范围里精确排查。