简体中文 English 日本語 Русский язык 한어

472

主题

36

回帖

5万

修为

创始合伙人

积分
110580


作者:@T8star-Aix

Audio8 TTS 0.6B:11语种零样本声音克隆与ComfyUI实测

Audio8 TTS 0.6B:11语种零样本声音克隆与ComfyUI实测


一句话导读:视频围绕 Audio8 TTS 0.6B 展示多语种零样本声音克隆与 RunningHub/ComfyUI 工作流,重点观察模型体积、生成速度、音色迁移和短音频使用边界。

核心内容:
1. 作者先说明实时数字人只是演示入口,本期主体是 Audio8 TTS。视频将它与 Fish Audio S2 Pro 放在同一类架构和质量方向下讨论,但这属于作者基于演示的比较,不应理解为所有场景中的固定排名或质量保证。
2. 官方项目资料显示该 Preview 模型约 0.6B 参数,采用 DualAR 架构:24 层 Slow AR 负责语义序列,4 层 Fast AR 预测声学码本,并使用 44.1 kHz 编解码器。视频中对模型层数、架构和体积的讲解与官方资料基本一致。
3. 项目推荐粤语、中文、荷兰语、英语、法语、德语、意大利语、日语、韩语、波兰语和西班牙语共 11 种语言。视频试听了中文、英文、韩文和粤语片段;作者认为英文与中文更稳,小语种虽然可用但会有取舍,这只是本次试听结论。
4. RunningHub 工作流通过参考音频、参考音频对应文本和目标文本完成声音克隆。官方文档也明确要求参考文本与参考录音的实际内容匹配;视频特别提醒需要逐字对齐,不能把不对应的文本当作参考。
5. 本次云端工作流单段生成约需二十多秒。作者指出本地常驻模型或专业显卡可能更快,但普通消费级设备不应直接把“实时”理解为必然达到;速度会受硬件、模型加载、平台调度和采样设置影响。
6. 视频试听显示粤语口音、说话语气和停顿能够得到一定程度迁移,同时也强调速度、模型体积与音色相似度之间存在平衡。官方文档建议单次输入控制在 150 字以内;视频则从实际使用角度建议不要生成超过约 30 秒的单段音频。
7. 模型上下文上限为 2048 个打包后的文本/音频位置。作者认为它不适合直接承担很长的多人对话,因此更适合短句、多语种试听、单说话人克隆和可拆分的语音片段。

适合人群:希望在 ComfyUI 或 RunningHub 中试用轻量多语种 TTS、零样本声音克隆,或评估 Audio8 TTS 在短音频和数字人语音环节表现的用户。

补充说明:本文根据授权视频约 648.7 秒完整音频转写、视频元数据、默认首屏 3 条评论及 Audio8 TTS 官方仓库资料整理。官方仓库与视频演示会持续更新,实际语言质量、速度、显存和音色相似度请以自己的硬件、参考音频和目标文本复测。

相关夸克网盘链接:
【无限画布整合包v2.6.8:https://pan.quark.cn/s/5871a0142ff3
【贞贞整合包V4.8A:https://pan.quark.cn/s/ed4f5cc2db75
【T8 CF整合包V12:https://pan.quark.cn/s/af20c54c9a13
贞贞的AII工坊限时开放注册:https://ai.t8star.org/register?aff=dP7j

商用级图像/视频工作流:https://my.feishu.cn/wiki/EcErwNCz4iFi47kqiKqcfgYpn3d?from=from_copylink
海外版RH(宽审核):https://www.runninghub.ai/user-center/1907375370302308353/userPost?inviteCode=rh-v1121

无限画布整合包v2.1.4:https://pan.quark.cn/s/5871a0142ff3
画布开源项目(非商用授权):https://github.com/T8mars/T8-penguin-canvas
企鹅在线画布:https://art.pebbling.cn/?invite=T8STAR
海外版贞贞工坊:https://ai.t8star.org

Aix:https://aix.studio?partnerCode=10562
我们公司最新AI产品通过链接注册送300积分,快来体验!
如果注册只有100点,右上角有个礼物盒的图标,点邀请人,输入:10562,就有300点

T8唯一云端镜像:https://lincore.wuying.aliyun.com/,登录后右上角核时算力,购买,右上角兑换码,输入t8stargo,可领取200核时(如显示9.9,是没有实名认证,实名后则变成0)

Discord频道:https://discord.gg/sAK2THPWhZ
T8 Comfyui整合包V10:https://pan.quark.cn/s/9b0cd761bf8e
贞贞整合包V4.6B(新增充值系统):https://pan.quark.cn/s/ed4f5cc2db75
comfyui节点:https://github.com/T8mars/Comfyui-zhenzhen

Anima AItoolkit训练器:https://www.chenyu.cn/api/s/zKRe2OVO
Anima 秋叶训练器:https://www.chenyu.cn/api/s/s8DVsTL9
https://www.chenyu.cn/api/s/s8DVsTL9
FireRed1.1训练器:https://www.chenyu.cn/api/s/hLSXfdh1
Ernie训练镜像:https://www.chenyu.cn/api/s/mwh6j8DW
LTX2.3音画同步训练镜像:https://www.chenyu.cn/api/s/oswYwWwg
None-Z-Trainer训练器:https://www.chenyu.cn/api/s/WAXeJBA7
Z-image-base-Lora训练器:https://www.chenyu.cn/api/s/udv8rEst
Z-image-base-大参数Lokr训练器:https://www.chenyu.cn/api/s/saImzeeC
Flux.2 Klein全功能训练器镜像:https://www.chenyu.cn/api/s/73ymtHZD
Qwen 2512满血版ai toolkit训练器:https://www.chenyu.cn/api/s/CvdMi80M
Wan2.2 DP全能训练器:https://www.chenyu.cn/api/s/9i0q1alv
Z image turbo Ai Toolkit极速训练器:https://www.chenyu.cn/api/s/1YW0uLnQ
Qwen Edit 2511 Ai Toolkit满血版训练器:https://www.chenyu.cn/api/s/7NeThb65
Qwen Image Ai toolkit满血版训练器:https://www.chenyu.cn/api/s/NFEGJsmc
更多镜像陆续更新,可搜索:t8star
0.1=5的券 300张:W6TGFF
30 =45的券 300张:T8AIGC
50=100粉丝福利每个都可领取,每个号一次: 50VS50
卡:24G 3090 32G 4080 48G 4090

贞贞音乐:https://music.163.com/#/artist?id=122256042
海外账号星球:accboy7t8star.acceboy.com
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

简体中文
繁體中文
English(英语)
日本語(日语)
Deutsch(德语)
Русский язык(俄语)
بالعربية(阿拉伯语)
Türkçe(土耳其语)
Português(葡萄牙语)
ภาษาไทย(泰国语)
한어(朝鲜语/韩语)
Français(法语)
QQArchiver手机版小黑屋粤ICP备2026002389号-1粤ICP备2026002389号-1 简体中文 English 日本語 Русский язык 한어 |网站地图