实操二：市民诉求智能分类器

考点精讲

1. 第 165–167 页给场景与方案：把市民诉求按责任部门分成住建、人社、市监、城管、其他五类，属判定型任务，一次 LLM 调用即可，不需要 RAG 也不需要 Agent。第 161 页给启动提示词七项信息块的具体填法（背景与角色、要做什么、输入输出、技术选型含理由、数据现状与测试集、验收口径、约束与边界），本质是让不熟悉项目的人接手也能直接开干。第 168 页任务书定两条验收口径：自信区准确率≥85%、转人工比例≤30%（转人工不算错），并定义 classify_request 最小工具契约——输入诉求全文，输出类别、置信度与是否建议转人工；同页纪律是转人工不拉低准确率；人在 checkpoint 把关与拍板，并关注低置信度样本的转人工建议。第 169 页做小结，提示这套工作流在实操三、四复用。
2. 前后置引导：前置读「harness 与 gstack：SPEC 三块、八环节与四条工程纪律」页：先有流程约束，再跑一个真实场景。；后置读「RAG 核心链路：开卷问答与三步原理」页：进入需要外部知识与溯源的场景 B。

记忆技巧

常见误区

• 误区：为了显得先进给分类任务上 RAG 或 Agent。第 167 页明确不需要，从最简单开始。
• 误区：把转人工算作错判拉低准确率。第 168 页明确转人工不算错。
• 误区：让 agent 自己定验收阈值。第 161–162 页要求验收口径写进启动提示词并由人拍板。

真题思路

• 【示例】 按实操二的验收口径，下列哪项理解正确？
  自信区准确率不低于 85%，且转人工比例不高于 30%，转人工不算错判　准确率不低于 95%，不得有任何转人工　只要模型自评置信度高就算通过，不必设准确率　准确率与转人工率都不必设阈值，由 agent 自行判断
  答案：A
  解析：第 168 页任务书把 85% 与转人工 ≤30% 写进验收口径，并注明转人工不算错；第 169 页小结把「转人工不算错」定为人能判断、AI 能执行的第一落点。B、C、D 与该页口径相反，其中 D 也违背第 161 页「验收口径必须写进启动提示词」。
  

常见问题

相关知识