可复现检查 Skill 实战演练:从请求到交付的全过程
研究人员与学生经常要做「可复现检查」这类事:检查研究代码与数据是否可复现。每次都从头写提示词,结果时好时坏;把它做成智能体 Skill,就能让智能体每次按同一套步骤执行,输出结构也更稳定。
背景(虚构)
小林是一名研究人员,每周都要做几次可复现检查。过去靠复制粘贴提示词,结果不稳定。这次团队把它做成了技能,下面记录一次完整运行。
1. 发出请求
小林在文献库、数据与写作工具中输入:
用可复现检查技能处理这份代码与数据,输出检查报告。
2. 技能被触发
智能体根据技能描述判断任务匹配,加载「可复现检查」的完整指令。它先运行技能自带的脚本做预处理,确保后续分析基于准确的数据。
3. 检查依赖与版本
这一步的产出会作为下一步的输入。智能体在“检查依赖与版本”时遇到一处含糊的信息,没有自行猜测,而是标注出来等待确认。
4. 运行流程
智能体完成“运行流程”,并在中间结果里注明依据,方便小林回看。
5. 对比结果
“对比结果”是最容易出错的环节,技能里专门写了要求,所以智能体给出了清楚的结果与理由。
6. 写复现说明
这一步的产出会作为下一步的输入。智能体在“写复现说明”时遇到一处含糊的信息,没有自行猜测,而是标注出来等待确认。
7. 交付与复核
智能体交付检查报告,末尾列出两条需人工确认的内容。小林对照原始代码与数据抽查关键信息,修正一处表述后采用。
复盘:这次做对了什么
- 步骤写在技能里,没有遗漏
- 不确定处被标出,而不是被编造
- 遵守了「引用必须回到原文核对,绝不编造文献」
- 风险较低,但输出仍需快速过目再使用
可以改进的地方
小林发现智能体对团队内部术语理解不一致,于是在技能目录中加了一份术语表(reference.md),并在 SKILL.md 中写明“遇到术语先查表”。更多改法见定制指南。
准备一份好范例
在技能的参考资料里放一份你认可的检查报告范例,往往比多写十条规则更有效。好范例应当:
- 来自真实工作,但已去除个人信息和敏感数据
- 体现团队习惯的结构、措辞和详略程度
- 包含一处“需人工确认”的标注示范,让智能体学会如何表达不确定
- 篇幅适中,不要比平时的产出长太多
范例不必多,一到两份即可;太多范例反而会让智能体机械模仿某一份的细节。
每一步要产出什么
把每一步的中间产出写清楚,智能体就不容易跳步,人也方便定位问题:
- 检查依赖与版本:产出一段简短的中间结果,并注明依据来自代码与数据的哪一部分
- 运行流程:产出一段简短的中间结果,并注明依据来自代码与数据的哪一部分
- 对比结果:产出一段简短的中间结果,并注明依据来自代码与数据的哪一部分
- 写复现说明:产出一段简短的中间结果,并注明依据来自代码与数据的哪一部分
最后一步之后,再把这些中间结果汇总成检查报告。中间结果可以折叠或省略展示,但在技能指令中要求智能体“先完成再汇总”,能明显减少遗漏。
延伸阅读
- 可复现检查 · 检查清单
- 可复现检查 · MCP 服务 版
- 可复现检查 · 阿里云百炼智能体应用 版
- 学术报告 · 场景实录
- 研究方法设计 · 场景实录
- 智能体Skills 分类:625 个技能 × 32 个角度
说明:文中的配置、代码与目录结构均为示意,用于说明思路;各平台的入口、字段名与能力会更新,落地前请以对应官方文档为准。示例中的数据与场景为虚构,不代表真实案例。