考点精讲
- 第 216 页用 interrupt 反例说明状态恢复的坑:中断后节点重跑会重复发送,需幂等与状态确认。第 220 页给工具五件套:超时、重试、幂等、审计、降级,并给兜底顺序;第 219 页要求工具描述写到「给初级工程师看」的清晰度。第 220 页点名工具失败时假装成功是最常见翻车。第 221 页给 FP/FN 铁律:敏感件假阴性代价远大于假阳性,验收口径为给定验证集召回率 100%。第 223–224 页给三层护栏(输入过滤、行为约束、输出审查)与 HITL 三层次(环内、环上、环外),要求关键路径双人复核或抽检并记录批准记录;人工不响应时超时默认拒绝或升级。第 225 页给自动化边界三问。
- 前后置引导:前置读「Agent 的定义、六种模式与二维判断」页:先放开自主性,再用本页的护栏收住。;后置读「实操四:工单智能分级路由工作流」页:把护栏落成一条可跑的三分支工作流。
记忆技巧
五件套记「超时、重试、幂等、审计、降级」
铁律记「宁可多升级、不可漏」
三层次记「环内、环上、环外」。
铁律记「宁可多升级、不可漏」
三层次记「环内、环上、环外」。
常见误区
- 误区:把假阳性与假阴性等价看待。第 221 页明确敏感件假阴性代价远大于假阳性。
- 误区:工具失败时假装成功。第 220 页点名这是最常见的翻车,兜底顺序不能越过转人工。
- 误区:认为 HITL 是免死金牌。第 224 页要求关键路径双人复核或抽检并记录批准记录。
真题思路
- 【示例】 按讲义,敏感件场景的验收口径应设为?
整体准确率达到 90% 即可 给定验证集上召回率 100%,宁可多升级不可漏 精确率与召回率取平均值最优 由模型自评置信度决定是否升级
答案:B
解析:第 221 页明确敏感件假阴性代价远大于假阳性,验收定为召回率 100%。A、C 用平均值思路,会容忍漏判;D 与第 229 页「零漏判」及第 215 页不确定一律转人工冲突。
常见问题
Q:工具调用五件套的兜底顺序是什么?
A:失败→有限重试→降级(只读或简化)→转人工,顺序不能越过最后的人工兜底。(解析:第 220 页给五件套(超时、重试、幂等、审计、降级)与兜底顺序,并点明工具失败时假装成功是最常见翻车;第 265 页要求人工兜底必须进入真实流程、不能只是一个标签。)
Q:人在环内、环上、环外分别适用什么?
A:环内关键路径必须暂停等人确认;环上由人设阈值、异常时介入;环外无人工介入,只做事后审计与回滚。(解析:第 224 页给三层次及各自适用:发钱、删数据、对外上报走环内;一般任务走环上;低风险可逆的重复任务走环外。同页三个工程要点还要求人工不响应时超时默认拒绝、升级,绝不超时自动通过。)
Q:自动化边界三问是什么?
A:模式是否固定(固定、重复、低风险则可自动);出错代价多大(影响真金白银、安全、合规、对外承诺则留人工确认环);能否设计兜底(能兜底到人工就不怕自动)。(解析:第 225 页用三问界定能否放手给智能体,并给出用法:任一问指向「留人」就设暂停点;三问全指向「可自动」也仍要留审计——边界要写进 SPEC(自动化范围、转人工触发、兜底动作、人工超时策略)。)
相关知识
教材出处:第11章 Agent 方法 工具五件套、FP/FN 与三层护栏