用 promptfoo 搭建提示词回归测试：改提示词前先跑一遍

Sat, 17 Oct 2026 14:58:00 +0800

用 promptfoo 做提示词回归测试，基本流程是：初始化项目 → 在配置文件里写好提示词、模型和测试用例 → 为每个用例设置断言 → 运行评测并在网页界面对比结果。 以后每次改提示词或换模型，先跑一遍测试，就能及时发现「改好了这里、弄坏了那里」。

promptfoo 是什么

promptfoo 是一个开源的命令行工具，用于评测和对比提示词与模型输出。它通过一个 YAML 配置文件定义提示词、模型提供方和测试用例，支持多种断言方式，并提供本地网页界面查看结果。具体功能和参数请以官方文档为准。