指南

如何用 AI 把视频配音成另一种语言

用 AI 给视频配音分三步:转写原声、翻译台词,再用泰语、英语或中文配音,最后把新的音轨对到画面上。适用于短剧出海、课程和产品视频。

· Paxa Labs · 阅读约 7 分钟

用 AI 给视频配音分三步:转写原片里的对白,翻译文字稿,再把译文逐句配成声音。之后在剪辑软件里把新的音频铺到画面下面。整个流程在同一个账户里完成。

什么是 AI 配音,哪些部分保持不变?#

AI 配音把视频里的人声换成另一种语言说出的同一段台词。语音转文字写下原话,翻译把它改写成目标语言,文本转语音再把译文读出来。Paxa TTS Flash v2 可以说中文、英语和泰语,所以在这里做出的配音是这三种语言之一。把中文短剧、课程和产品视频配成泰语或英语,或者把泰语视频配成中文,用的都是这套流程。

这些工具返回的是音频和文字。画面保持原样,演员的口型仍然对着原来的语言。配音的声音来自音色库,或者来自您用文字描述设计出的音色,没有任何一步会复制原片演员的声音。

第一步:如何转写原片?#

  1. 导出音频从剪辑软件里把音轨导出为 M4A 或 MP3 文件。单个文件最长 120 分钟,最大 95 MB。
  2. 打开说话人和词级时间戳打开“转写”工具并上传文件。说话人选项会给每一轮发言编号,您就知道每句台词是谁说的。词级时间戳返回每个词的起止时间,不另外收费。
  3. 填入专有名词把角色名、品牌名和地名加入词汇表,最多 50 个。它们会按您写的样子出现在文字稿里。
  4. 通读一遍文字稿听错的词现在就改。文字稿里的错误会被翻译,再被配成声音,到后面要改三处。

说明

Paxa STT Lite 目前是研究预览版,转写结果和可用选项可能随版本变化。

第二步:如何翻译台词?#

把文字稿粘贴到“翻译”工具,选择目标语言。Paxa Translate Lite 支持 15 种语言之间任意互译。把输入形式设为按行,每句台词都会按原来的顺序各自返回一行。

  • 把每个角色名和品牌名连同您想要的译法放进术语表。同一个名字在不同集里译法不一致,观众最先注意到的就是这个。
  • 培训视频把语体设为正式,朋友聊天的戏设为非正式。泰语几乎每句话都带礼貌标记,泰语翻译中的礼貌用语指南说明了这个选项会改变什么。
  • 在背景信息里写一句说明,例如谁在对谁说话,这场戏发生在哪里。
  • 产品名和编号需要保留原文时,填进“保留原样”一栏。

给耳朵听的台词比给眼睛看的文字短。把每句译文念一遍,如果说出来比原句用时更长,趁它还是文字就先改短。

第三步:如何给译文配音?#

打开“语音”工具,从 Paxa TTS Flash v2 的 50 个音色里给每个角色选一个。同一个角色在每场戏、每一集都用这个音色。音色页面可以逐个试听,音色库里没有合适的,音色设计工具可以根据一段文字描述生成新的音色。

把演绎方式用平常的话写在句子前面的方括号里。像 [耳语] 站到我身后。 这样的一句会用耳语读出,[叹气] 好吧,再来一次。 会以一声叹气开头。每个音色都能说三种语言,同一个角色在泰语版、英语版和中文版里可以用同一个声音。

每句台词生成一段音频,同一角色连续说的几句也可以合成一段,文件名写上场次和句子编号。短的音频容易摆放,台词改动时重做的费用也低。

第四步:如何把配音对到画面上?#

第一步的文字稿给出了原片每句台词开始和结束的秒数。在剪辑软件里把原来的人声静音,再把每段配音放到对应台词的开始时间上。如果音乐和音效是单独的音轨,可以继续沿用。

  • 超出时长的音频可以用更快的语速重新生成。“语音”工具的语速可在该音色正常语速的 0.5 到 1.5 倍之间调节。
  • 调快之后仍然超时,说明这句话字数太多。删掉一个虚词,或者换一个更短的说法,再重新生成这一句。
  • 提前结束的音频可以留在原处。台词后面有一小段停顿,配着画面听起来很自然。
  • “语音”工具的时间戳会返回配音里每个词的起止时间,新语言的字幕文件可以据此切分。

给一条十分钟的视频配音要多少钱?#

每一步都有各自公布的价格。转写每分钟音频 8.33 积分,翻译每 1,000 个字符 25 积分,语音每 1,000 个字符 10 积分。下面的例子假设视频长 10 分钟,原文台词和译文各 9,000 个字符,翻译时不附带参考资料,语音时间戳关闭。

步骤计量方式积分费用
转写10 分钟音频83.34$0.08
翻译9,000 个字符225$0.23
配音9,000 个字符90$0.09
合计398.34$0.40

重新生成的句子会按这一句的字符数再计一次费。按同样的假设,新账户的 100 免费积分大约可以给 2 分钟的视频配音,无需绑卡。泰语配音的价格把这些价格和录音棚报价放在一起比较。

可以给谁的视频配音?#

只给您自己制作的视频,以及版权方授权您改编的视频配音。配音是他人作品的一个新版本,剧本、表演和画面都各有归属。用配音冒充真实人物本人说话,违反每个账户都接受的规则。

免费积分仅限个人使用和评估。购买任意套餐或积分包后,账户里的音频、文字稿和译文都可以商用,包括购买之前生成的内容,详见服务条款。

接下来读什么、试什么?#

常见问题#

AI 能把视频配成泰语吗?#

可以。先转写原片,把台词翻译成泰语,再用 Paxa TTS Flash v2 配音,它的每个音色都会说泰语。泰语句子里的英文词,例如品牌名,会按英语读出。

短剧出海做泰语配音,每一集都要重新选音色吗?#

不需要。每个角色选定一个音色后,整季都用它。台词改了,重新生成改动的那一句即可。

配音会保留原片演员的声音吗?#

不会。每个角色由音色库里的音色,或由根据文字描述设计的音色来读。音色设计与声音克隆的区别解释了这两种做法。

AI 配音能让口型对上新的语言吗?#

不能。工具返回一条新的人声音轨,画面保持不变。每句台词按开始时间摆放,长度合适的句子配着画面看起来就很自然。

有泰语地方口音的音色吗?#

有。口音页面可以试听带东北部、北部和南部口音的泰语音色,并与中部泰语音色对照。

可以免费试用吗?#

可以。新账户自带 100 免费积分,无需绑卡,按例子里的假设大约够给 2 分钟的视频配音。免费积分仅限个人使用和评估。

继续阅读

更多指南