Litmaps 产出验收:5 个维度打分法
在「研究与学术」类工具里,Litmaps 的定位是:以引用网络可视化发现相关文献的工具。
用 AI 最容易犯的错是「看着不错就用了」,这篇给出一张可复用的打分表。
评分表(每项 1 到 5 分)
| 维度 | 看什么 | 1 分 | 5 分 |
|---|---|---|---|
| 来源可靠 | 引用是否真实、权威、可追溯 | 明显不合格 | 无需修改即可使用 |
| 忠实原文 | 摘要是否准确反映论文内容 | 明显不合格 | 无需修改即可使用 |
| 批判性 | 是否指出局限与分歧 | 明显不合格 | 无需修改即可使用 |
| 结构合理 | 报告或综述逻辑是否清晰 | 明显不合格 | 无需修改即可使用 |
| 合规 | 是否符合学术诚信与披露要求 | 明显不合格 | 无需修改即可使用 |
建议:任一维度低于 3 分就不要直接使用;总分用于比较不同提示词或不同工具的效果。
用一个任务试打分
论文精读
准备材料:一篇 PDF 论文。
帮我精读这篇论文:研究问题、方法、数据、主要结果、局限性,以及作者没有讨论但值得追问的问题。所有结论请标注对应页码。
检查点:结论标注了页码。
怎么让评分更可靠
- 同一批材料至少测 5 次,不只看最好的一次。
- 两人分别打分,分歧大的维度再讨论标准。
- 把 Litmaps 的结果与人工完成或 Connected Papers 的结果放在一起盲评。
- 每次改提示词后用同一批材料复测。
更多可以试的用法
引用核查
输入:一段带引用的文字。
检查这段文字中的每个引用:论文是否真实存在、引用内容是否与原文一致,无法确认的请明确标出。
检查点:不存在的引用被标出。
研究报告初稿
输入:一个需要调研的行业问题。
围绕【问题】生成一份调研报告初稿,每个观点后附来源;区分事实、观点和推测;最后列出需要人工核实的内容。
检查点:区分事实与推测。
文献初筛
输入:一个研究问题。
围绕【研究问题】检索近年的相关论文,列出 10 篇最相关的文献:标题、年份、研究方法和一句话结论,并注明检索使用的关键词。
检查点:每篇文献都能查到原文。
常见问题:报告观点缺少依据
要求每段观点附来源,没有来源的删除或标注。
常见问题:摘要遗漏关键限制
要求单独列出局限性和样本说明。
常见问题:检索结果偏向英文文献
补充中文数据库检索,并调整关键词。
概念补充:引用网络
论文之间的引用关系,可用于发现相关研究。
概念补充:虚假引用
AI 编造的不存在文献,提交前必须逐条核验。
适合人群:数据分析师
数据分析师可以用 Litmaps 处理取数与 SQL、清洗与可视化等工作。需要注意:确认指标口径,敏感数据脱敏后再交给 AI 处理。
适合人群:记者编辑
记者编辑可以用 Litmaps 处理采访整理、资料核查等工作。需要注意:事实必须多源核实,不得用 AI 生成虚构引语,遵守所在机构的 AI 使用规范。
适合人群:研究生
研究生可以用 Litmaps 处理文献阅读、开题与论文写作等工作。需要注意:遵守学校学术诚信规定,AI 只用于辅助理解和润色。
使用提醒
文中提示词和示例仅作示意,实际效果取决于你的材料和 Litmaps 当前版本,重要内容请人工核对后再使用。
涉及个人信息、商业机密或受监管数据时,先确认 Litmaps 的数据处理条款,再决定能否使用。