博客

AI 音色设计现已上线

音色设计把一段文字描述变成一个新的 Paxa TTS Flash v2 音色,您可以用文字继续调整,并保存到控制台和 API 中使用。

· Paxa Labs · 阅读约 1 分钟

在此之前,每个 Paxa 语音请求都使用音色库中 50 个 Paxa TTS Flash v2 音色之一。需要特定声音的产品,只能从中挑一个最接近的。

音色设计可以按描述生成新音色。在控制台输入一段描述,例如“一位五十多岁的纪录片男旁白,声音低沉平稳,语速从容。”工具会回给您一个音色,附带名称、角色和一段简短介绍,并朗读一句为它撰写的台词。输入想改的地方,就会播放下一个版本。保存您满意的那一个,它即可在语音工具和 API 中使用。

所有账号都可以使用音色设计,免费账号也不例外。每一轮设计或调整消耗 5 积分,含朗读的台词。使用已保存音色的语音在 Paxa TTS Flash v2 上运行,按标准费率的 1.25 倍计费,即每百万字符 $12.50。

如何设计一个音色#

  1. 描述音色输入谁在说话、声音听起来怎样,或者从工具里的四个示例开始:纪录片旁白、咖啡师、客服专员和睡前故事讲述人。
  2. 试听名称、角色和介绍会先出现。随后音色会以角色的口吻,用它被设计时设定的语言朗读一句简短的台词。
  3. 调整音色输入一处修改,例如“更温暖”或“年纪再大一点”,就会播放下一个版本。您输入的台词最多 120 个字符,会用当前版本朗读。
  4. 保存音色为音色命名并保存。它会出现在语音工具的“您的音色”下,并获得一个用于 API 的 ID。

描述里写什么#

描述可以写明谁在说话、怎么说话、用什么语言,以及音色会用在哪里。描述里没写的部分,由工具自行决定。

简短描述更完整的描述
一位亲切的女性一位三十多岁的亲切药剂师,用泰语缓慢而清楚地讲解用药剂量
低沉的男声一位四十多岁的深夜电台主持人,声音低沉放松,贴近麦克风,说英语
适合广告的活力嗓音一位曼谷街头美食频道的主持人,语速快,声音明亮,句子之间会笑出声,说泰语
一位旁白一位历史播客的旁白,沉稳从容,声音里带着一丝笑意,说英语

写明音色要说的语言:中文、英语或泰语。如果没写,工具会根据描述的其余部分来判断。例如,描述里出现曼谷的咖啡馆,就可能得到一位说泰语的说话人。

想要接近某位名人的声音,请描述这种声音本身的特质。点名真实人物的描述会得到一个原创音色,名字由工具另起。

调整音色#

一次调整就是针对当前音色的一条指令,例如“让她听起来年纪再大一点”或“语速再放慢一点”。下一个版本只改指令要求的部分,其余保持不变。

每个版本都保留在历史记录面板里,回到任何一个版本都不收费。输入的台词会用当前版本朗读,不会改变音色,按字符以自定义音色的费率计费。

在自定义音色中使用指令#

自定义音色在 Paxa TTS Flash v2 上发声,也能读懂它的指令。在一行台词前写 [whispering],或在一句话前写 [excited],在已保存的音色里和在音色库音色里效果一样。指令指南列出了所有指令和音效,Paxa TTS Flash v2 发布文章里可以逐一试听。

常见用途的描述示例#

用途可以从这段描述开始
产品视频和广告一位三十多岁、为护肤品牌出镜的女主持人,自信温暖,语速轻快,说泰语
有声书和广播剧一位上了年纪的客栈老板,嗓音粗粝,说话缓慢,说英语
客服热线和语音智能体一位耐心的女客服,声音温暖清晰,用泰语平稳地说话
YouTube 和 TikTok 解说一位四十多岁的历史频道男解说,语调平稳从容,说英语
儿童应用一位爷爷用泰语讲睡前故事,声音轻柔,语速缓慢,带一点幽默

已保存的音色无法编辑。用它制作的系列内容从第一集到最后一集都是同一个声音,剪成三种时长的广告,每个版本也都是同一个声音。

使用已保存的音色#

  • 在控制台中,到语音工具里选择它,已保存的音色排在选择器最前面的“您的音色”分组下。
  • 在 POST /v1/tts 上,把它的 ID(以 voice_ 开头)作为 voice 发送,并把 model 设为 paxa-tts-flash-v2。
  • 兼容 OpenAI 的 POST /v1/audio/speech 接受同一个 ID。指向 Paxa API 的 OpenAI SDK 无需改动即可使用这个音色。
  • 实时连接 /v1/tts/live 在 start 帧中接受这个 ID。

这个 ID 只对保存它的账号有效,该账号的任意 API 密钥都可以使用。转售 Paxa Labs 语音的模型市场,以及本站的演示,只提供音色库音色。ID 的全部规则见自定义音色指南。

重命名音色不会改变它的 ID。删除音色会释放它在套餐中占用的名额,仍然指定它的请求会返回 unknown_voice。降级套餐后,所有已保存的音色照常可用,等账号重新低于套餐上限后才能保存新音色。

价格#

每一轮设计或调整消耗 5 积分,含朗读的台词。未生成音色就失败的一轮会退还积分,您中途停止的一轮照常计费。新账号的 100 免费积分可用 20 轮。使用自定义音色的语音按 Paxa TTS Flash v2 费率的 1.25 倍计费,请求词级时间戳时为 1.5 倍。

音色每 1,000 字符所需积分
音色库音色10
自定义音色12.5
带时间戳的自定义音色15

套餐决定一个账号可以保留多少个自定义音色。

套餐自定义音色
免费1
Starter3
Standard10
Pro50

各套餐及其每月积分见价格页面。

音色设计做不到的事#

音色设计只根据文字工作。它不接受录音,也无法根据录音复刻某个人的声音。工具无法据以设计的描述会被拒绝,这一轮的积分会退还。

在控制台打开音色设计即可开始。

常见问题#

可以免费试用音色设计吗?#

可以。所有账号都能设计音色并保留 1 个,免费账号也包括在内。每一轮消耗 5 积分,新账号的 100 免费积分可用 20 轮。

可以保留多少个音色?#

免费账号可保留 1 个。Starter 套餐可保留 3 个。Standard 套餐可保留 10 个。Pro 套餐可保留 50 个。

已保存的音色可以编辑吗?#

可以重命名。它的声音保持保存时的样子,想要不同的声音就需要重新设计。

自定义音色能在 Paxa TTS Flash 上使用吗?#

不能。自定义音色在 Paxa TTS Flash v2 上发声。指定自定义音色的 Paxa TTS Flash 请求会返回 unknown_voice。

音色设计能克隆我的声音吗?#

不能。音色设计不接受录音,它根据描述设计一个新音色。

自定义音色说哪种语言?#

说描述中指定的语言:中文、英语或泰语。描述本身可以用这三种语言中的任意一种来写。

可以在 API 中使用自定义音色吗?#

可以。用保存它的账号下的任意 API 密钥,把它的 ID 作为 voice 发送,并把 model 设为 paxa-tts-flash-v2。

继续阅读

博客的其他文章