「知识缺口分析」Skill 使用检查清单:用前、用中、用后
把「知识缺口分析」交给智能体,难点不在模型能力,而在流程是否说清楚:输入是什么(问答日志),按什么顺序处理,交付什么(缺口清单),哪些事不能做。Skill 就是把这些写下来的载体。
把下面的清单保存下来,每次使用或修改「知识缺口分析」技能时过一遍。
编写时
- description 写清做什么、什么时候用
- 输入写明需要问答日志,并要求缺信息先提问
- 步骤为编号列表:筛选未解答问题、聚类、排序、分配编写
- 输出写明缺口清单的结构
- 约束包含领域底线与不可逆操作的处理方式
- 长资料拆到参考文件
上线前
- 6 类测试输入全部通过
- 权限按最小范围配置
- 技能文件中没有密钥和真实个人信息
- 有负责人和变更记录
每次使用时
- 输入材料已脱敏或确认可以交给所用平台
- 观察智能体是否加载了技能
- 查看“需人工确认”清单
- 对照原始材料抽查关键信息
- 风险较低,但输出仍需快速过目再使用
使用后
- 记录明显的问题样例
- 输出被大幅修改时,分析原因并考虑改技能
- 定期检查平台更新是否影响技能
每一步的快速核对
- 筛选未解答问题
- 聚类
- 排序
- 分配编写
智能体与人的分工
技能不是把工作全部交出去,而是把重复、机械的部分交给智能体,人把住判断和责任:
| 步骤 | 智能体负责 | 人负责 |
|---|---|---|
| 筛选未解答问题 | 按指令完成并给出依据 | 抽查关键处,确认无误 |
| 聚类 | 按指令完成并给出依据 | 抽查关键处,确认无误 |
| 排序 | 按指令完成并给出依据 | 抽查关键处,确认无误 |
| 分配编写 | 按指令完成并给出依据 | 抽查关键处,确认无误 |
| 最终交付 | 整理缺口清单 | 决定是否采用、是否对外 |
风险较低,但输出仍需快速过目再使用。
准备一份好范例
在技能的参考资料里放一份你认可的缺口清单范例,往往比多写十条规则更有效。好范例应当:
- 来自真实工作,但已去除个人信息和敏感数据
- 体现团队习惯的结构、措辞和详略程度
- 包含一处“需人工确认”的标注示范,让智能体学会如何表达不确定
- 篇幅适中,不要比平时的产出长太多
范例不必多,一到两份即可;太多范例反而会让智能体机械模仿某一份的细节。
每一步要产出什么
把每一步的中间产出写清楚,智能体就不容易跳步,人也方便定位问题:
- 筛选未解答问题:产出一段简短的中间结果,并注明依据来自问答日志的哪一部分
- 聚类:产出一段简短的中间结果,并注明依据来自问答日志的哪一部分
- 排序:产出一段简短的中间结果,并注明依据来自问答日志的哪一部分
- 分配编写:产出一段简短的中间结果,并注明依据来自问答日志的哪一部分
最后一步之后,再把这些中间结果汇总成缺口清单。中间结果可以折叠或省略展示,但在技能指令中要求智能体“先完成再汇总”,能明显减少遗漏。
延伸阅读
说明:文中的配置、代码与目录结构均为示意,用于说明思路;各平台的入口、字段名与能力会更新,落地前请以对应官方文档为准。示例中的数据与场景为虚构,不代表真实案例。