多意图请求如何做意图识别、路由和低置信澄清?
题目
多意图请求如何做意图识别、路由和低置信澄清?
参考答案
点击展开参考答案
- 先把“意图识别”拆成候选意图、实体槽位、风险和执行优先级,而不是只输出单标签。
- 高频、规则明确的编号/命令可先由规则或小模型处理;复杂、多意图请求再交给 LLM 输出受 Schema 约束的
intents[]、实体、依赖和置信信息。 - 例如“查订单并退款”包含查询前置于写操作,不能简单二选一。
- 路由阈值不应直接相信模型自报概率,应在标注集上校准。
- 高置信且低风险可执行;中间区间展示候选让用户确认;低置信或高风险必须澄清。
- 多意图先构建依赖 DAG,再按权限和可逆性执行。
- 评测单/多意图 F1、实体正确率、澄清率、误路由严重度、任务成功和额外时延。