抽样规则与校准
将部分 AI 评分的对话交由人工评审,并确保评审员与 AI 的评分一致。
适用于:质检负责人步骤
- 前往 MetriQA → 质检评审 → 抽样规则并添加规则:渠道、得分低于、一票否决、有风险、AI 置信度低于,以及进入队列的匹配比例。
- 每个对话评分后,第一条匹配的启用规则会将其放入“待评审”队列。
- 前往“校准”标签页并选择“新建会话”。为其命名,并最多选择 20 个已由 AI 评分的对话。
- 每位评审员为每个对话评分。在您提交自己的评分之前,其他评审员的评分保持隐藏。
- 按对话和标准比较评审员平均分与 AI 的评分。相差 10 分或以上会被突出显示。完成后结束会话。
温馨提示
- 更改评分卡后使用校准,检查 AI 说明是否清晰。
- 低置信度规则(例如低于 60%)会把 AI 不确定的对话交给人工处理。
仍需帮助? 联系支持团队