用 AI 给问卷开放题编码:建立编码表、批量归类与人工抽检
开放题最有价值,也最难分析。用 AI 做开放题编码,推荐“先定编码表、再批量归类、最后人工抽检”的流程:编码表由人确认,AI 只负责按表归类并给出理由,抽检不合格就修订编码表重来。 不要让 AI 一边归类一边随意发明新类别。
场景
一次用户满意度调研收回 600 份问卷,其中“你最希望我们改进什么?”有 420 条有效回答,需要统计主要改进诉求。
流程
1. 抽样建立编码表
随机抽 60–80 条,让 AI 提出候选类别:
以下是问卷开放题的 80 条回答样本。请提出 6–10 个互斥的编码类别,
每个类别给:编码|名称|定义(一句话)|2 条示例回答。
另设“其他”和“无效回答”两个类别。
回答样本:【粘贴】
研究者审阅、合并或拆分类别,形成正式编码表。
2. 批量归类
每批 50–100 条,带上编号:
按下面的编码表给每条回答归类。一条回答可以有最多 2 个编码。
输出 CSV:编号,编码1,编码2,理由(不超过 20 字)
无法归入任何类别的标为“其他”,不要新增类别。
编码表:【粘贴】
回答:【编号|内容,每行一条】
3. 合并与检查
- 用表格或脚本把 CSV 合并回原始数据,按编号对齐;
- 检查行数是否一致、有无空编码;
- 统计“其他”占比,如果很高,说明编码表需要补充。
4. 人工抽检
- 每个类别随机抽 10 条,由人判断是否同意;
- 不同意的比例较高的类别,修订定义后重新归类;
- 条件允许时,两个人独立编码同一批样本,比较一致程度。
输出结果
编码|名称|回答数|占有效回答比例|代表性原话(2 条)
报告时注明:编码由 AI 辅助完成并经人工抽检,比例基于本次有效回答数。
注意事项
- 隐私:去掉回答中的姓名、手机号、订单号再处理;
- 不要过度解读:编码统计说明“提到的频率”,不等于问题的严重程度;
- 保存版本:编码表和提示词都要存档,下次调研可以复用和对比。
问卷本身的设计可参考 研究者用 AI 设计问卷,数据整理与分析示例见 数据分析师用 AI 做数据分析,数据合规见 AI 时代的数据治理。