先说清楚它是什么:CosyVoice 属于「音频与语音」方向的开源项目,阿里通义实验室开源的多语言语音合成模型。

这篇写给视频剪辑师:围绕粗剪与选段、字幕与调色和多平台版本这几类日常工作,说明它能帮上什么忙、怎么用、哪些地方必须自己把关。

视频剪辑师的三个高频用法

1. 粗剪与选段

在 CosyVoice 中可以这样提:

从这段素材转写中挑出可用片段,按故事顺序列出粗剪清单:起止时间、内容、用途(开场 / 主体 / 结尾)。

把关:片段时间准确。

2. 字幕与调色

在 CosyVoice 中可以这样提:

校对这份自动字幕:统一人名和专有名词,修正错别字,每行不超过 16 字,不改动时间轴。

把关:时间轴未改动。

3. 多平台版本

提示词示例:

把这条横屏成片改为抖音、视频号和 B 站三个版本,说明每个平台的时长、比例和开头调整建议。

把关:版本参数符合平台习惯。

也可以试试:会议录音转写

这是「音频与语音」类工具的通用任务,视频剪辑师同样用得上。

转写这段录音并区分发言人,生成要点摘要和待办清单,人名和专有名词按我提供的名单校正:【名单】。

边界与合规

确认音乐和素材授权,客户素材不随意上传公共平台。

  • 产出由视频剪辑师本人负责,AI 只是草稿和辅助。
  • 对外内容发布前至少看一遍。
  • 如单位有规定的工具清单,优先在清单内选择;CosyVoice 的同类还有 GPT-SoVITS、F5-TTS。

一周试用建议

选一个最常做的任务连续用 5 个工作日,记录每次节省的时间和需要修改的地方,再决定是否把 CosyVoice 纳入日常流程。

补充练习

有声读物试音

准备材料:一个章节的文本。

用两种不同的声音风格朗读这一章节的前 300 字:一种沉稳叙述,一种轻松亲切,对比后选择更适合的版本。

交付前确认:两种风格差异明显。

分轨练习

准备材料:一首用于练习的歌曲音频。

把这首歌分离成人声、鼓、贝斯和其他乐器,并把伴奏降低两个半音,方便练唱。

检查点:分离后人声没有明显残留伴奏。

播客后期

输入:一期双人录制的原始音频。

处理这期音频:降低底噪、统一两人音量、删除超过 2 秒的停顿,保留自然的语气词,输出前后对比的处理记录。

验收标准:人声没有被处理得发闷。

常见问题:配乐与画面情绪不符

先写清情绪关键词和节奏,再分段生成拼接。

常见问题:转写错字集中在专有名词

提前提供人名、产品名词表,转写后批量替换。

常见问题:合成语音读错多音字

在文本中改用同音字或拼音标注,或使用工具的发音词典。

概念补充:采样率

每秒采样次数,影响音质与文件大小。

概念补充:人声分离

把歌曲或录音拆分为人声与伴奏等音轨。

适合人群:中小学老师

中小学老师可以用 CosyVoice 处理备课与分层练习、批改反馈与评语等工作。需要注意:学生个人信息和成绩不要上传到未经学校批准的工具。

写在最后

涉及个人信息、商业机密或受监管数据时,先确认 CosyVoice 的数据处理条款,再决定能否使用。

本文基于 CosyVoice 公开的定位与通用用法编写,具体功能、套餐与可用地区以官方页面为准,产品更新后界面和名称可能变化。

延伸阅读