用大模型做数据清洗与标注:效率与质量的平衡之道
大模型可以批量完成文本分类、实体标注、情感判断和数据清洗,速度远超人工,成本也更低。但它会犯系统性错误,且难以察觉。本文介绍用大模型辅助标注的流程设计、人机协作模式、质量评估方法,以及哪些任务适合交给模型、哪些必须由人完成。
阅读全文 →共 1 篇关于「数据清洗」的文章。
大模型可以批量完成文本分类、实体标注、情感判断和数据清洗,速度远超人工,成本也更低。但它会犯系统性错误,且难以察觉。本文介绍用大模型辅助标注的流程设计、人机协作模式、质量评估方法,以及哪些任务适合交给模型、哪些必须由人完成。
阅读全文 →