工单曲线大概晚七天才动,这一周机器分数只掉了一点、人工评审还在路上。你已经凭「跟着又问一句、口口声声没解决、输出结构坏掉」这些领先切片决定先不发。怎样避免把周末促销涌进来的访问看成质量垮掉?
题目
工单曲线大概晚七天才动,这一周机器分数只掉了一点、人工评审还在路上。你已经凭「跟着又问一句、口口声声没解决、输出结构坏掉」这些领先切片决定先不发。怎样避免把周末促销涌进来的访问看成质量垮掉?
参考答案
点击展开参考答案
- 发版闸门看「可比流量里的率」,不看周末原始计数。
- 会话打上活动/自然来源和意图,领先切片只在自然工作日层、以及「用基线意图混比标准化后的率」上触发否决;活动层单独记账,除非砸了格式/安全硬地板,否则不能单独把周末尖峰判成质量塌方。
- 对照必须是上周同星期时段和上一场同类活动周末,不是和本周均值比。
- 工单从用户重试到建单常常晚约一周,本周机评总分掉一两个点落在噪声带,人审队列还空着,所以要用当周就能算的行为:同一会话里机器人声称办结后用户立刻再问、模型说出「暂无法解决 / 请自行…」这类未解决言外行为、工具 JSON 或必填回复字段解析失败。
- 这三者和下周工单相关,但周末活动会把查库存、兑优惠码等意图放大数倍,二次追问的基数自然升高,冻结模型也会看起来「坏了」。