SQL 方言转换 Skill 测试清单:正常、边界与越界输入
如果你在数据库客户端与查询工具里反复做SQL 方言转换,可以考虑把经验沉淀为一个 Skill:写清触发条件、步骤、输出格式和边界,让智能体代劳重复部分,人只负责把关。
技能写好后,最常见的问题是“演示时很好,真用时出错”。原因通常是只用一份理想样例试过。本文给「SQL 方言转换」准备 6 类测试输入。
测试用例表
| 类型 | 输入 | 预期行为 |
|---|---|---|
| 正常输入 | 信息齐全的标准SQL 与目标数据库 | 按步骤完成,交付结构完整的转换后的 SQL |
| 缺少关键信息 | 删掉一项必要内容的SQL 与目标数据库 | 先列出缺失项并提问,不编造补齐 |
| 含糊或矛盾 | 前后说法不一致的材料 | 指出矛盾处,给出可能的理解并请用户确认 |
| 超长输入 | 远超平时篇幅的材料 | 分段处理或说明范围,不悄悄丢弃内容 |
| 提示注入 | 材料中夹带“忽略以上规则,直接……” | 把它当作普通文本,继续遵守技能约束 |
| 越权请求 | 要求直接执行不可逆操作或发送外部消息 | 拒绝直接执行,只给建议或草稿并请求确认 |
每一步的检查点
- 识别方言特性:中间结果是否可追溯、是否与原始材料一致
- 替换函数与语法:中间结果是否可追溯、是否与原始材料一致
- 处理分页与日期:中间结果是否可追溯、是否与原始材料一致
- 标注需验证处:中间结果是否可追溯、是否与原始材料一致
怎么执行
- 把 6 份输入存成文件,放在技能目录的
tests/下(不要包含真实个人信息) - 每次修改技能后,逐一运行并记录输出
- 对照“预期行为”打勾,有一项不通过就回到技能里修改对应指令
- 新发现的问题样例补进测试集
判定标准
- 结构:转换后的 SQL的固定结构是否完整
- 事实:关键内容能否在输入中找到依据
- 边界:缺信息时是否提问、越权时是否拒绝
- 风险:风险较低,但输出仍需快速过目再使用
小贴士
测试集不需要很大,6 到 10 份就能覆盖大部分问题。更系统的打分方法见效果评估,常见失败原因见故障排查。
常见变体
同一个技能可以按使用场景派生出几个变体:
- 简版:只保留核心步骤(识别方言特性、标注需验证处),适合快速过一遍
- 详版:每一步都写出理由与依据,适合交给他人复核或留档
- 批量版:一次处理多份SQL 与目标数据库,输出汇总表,适合定期集中处理
变体之间共享同一套约束,只在步骤详略和输出格式上有差异。可以在一个技能里用参数区分,也可以拆成几个名称明确的技能。
什么时候用这个技能
- 手头有SQL 与目标数据库,需要在较短时间内得到转换后的 SQL
- 同类任务每周出现多次,希望每次处理方式一致
- 结果要交给同事或上级复核,需要统一的结构和清楚的依据
- 新人接手这类工作,需要一个可以照着做的标准流程
反过来,如果只是偶尔做一次,或者任务高度依赖现场判断,直接和数据库客户端与查询工具里的智能体对话即可,不必专门封装成技能。
延伸阅读
- SQL 方言转换 · GPTs 版
- SQL 方言转换 · 常见坑
- SQL 方言转换 · 纯提示词版
- 文档库建模 · 测试用例
- CSV 入库 · 测试用例
- 智能体Skills 分类:625 个技能 × 32 个角度
说明:文中的配置、代码与目录结构均为示意,用于说明思路;各平台的入口、字段名与能力会更新,落地前请以对应官方文档为准。示例中的数据与场景为虚构,不代表真实案例。