配音是把视频里的说话内容,换成另一种语言的语音。以前做配音要请专业配音演员。现在,一个应用就能在手机上完成语音翻译,并生成新的配音音轨。
本教程使用我们开发的 iPhone 应用 CapCap。
工作原理
CapCap 会先识别视频中的语音,再翻译文字,然后逐句生成朗读译文的声音。你会得到新语言的配音音频,以及与之对应的字幕。
第 1 步:新建项目
打开 CapCap,点击 新项目,然后从照片里选择视频。
第 2 步:选择语言和输出模式
- 视频语言:视频里说的语言。
- 翻译语言:你想配成的语言。
- 输出模式:选择 翻译音频 + 字幕。
第 3 步:选择声音
在 声音 下面,你有三种选择:
- 自动:根据视频中检测到的声音,选出与说话人匹配的声音。
- 原声:用模仿说话人本人音色的声音来配音,听起来仍然像你本人。
- 也可以自己从 声音模型 中选择一个。选之前点击播放,可以先试听。
第 4 步:转录并配音
点击 立即转录。完成后,播放视频,把整段完整听一遍。
第 5 步:检查并导出
边听边看译文字幕,并检查人名和数字是否翻译正确。确认无误后,点击 导出,再点击 保存视频到照片应用。
如何获得更好的效果
最好选一段只有一个人清晰说话的视频。背景噪音、多人同时说话和响亮的音乐,都会降低识别准确度,而配音的质量不可能超过识别的质量。
也要留意语速和节奏。同一句话,有些语言需要的词更多,所以配音可能会超出它原本对应的画面时长。
如果你刚开始做某种语言的视频,前几条发布之前,最好请懂这门语言的人先看一遍。
它做不到的事
CapCap 只改音频,不改画面。它不会调整说话人的嘴型来匹配新语言,所以仔细看的观众会觉得特写镜头里的人声和口型对不上。配音最适合旁白、教程、产品演示,以及说话人没有占满画面的视频。
如果你更想保留自己的声音,可以选择 翻译字幕。
- 视频配音
- AI 配音
- 视频翻译
- iPhone