简体中文 English 日本語 Русский язык 한어

435

主题

36

回帖

5万

修为

创始合伙人

积分
110348


作者:@T8star-Aix

MOSS-TTS V1.5 + Bernini-R S2V:开源高动态数字人工作流

MOSS-TTS V1.5 + Bernini-R S2V:开源高动态数字人工作流


一句话导读:这套开源数字人组合先用 MOSS-TTS V1.5 生成情绪充沛的语音,再交给 Bernini-R S2V 完成参考图与音频驱动,重点是兼顾长文本、高动态和较低显存占用。

核心内容:
1. MOSS-TTS 不是单一模型,而是覆盖多音色、长文本、声音设计、双人对话和环境音效的系列。作者将语言支持、真实度与情感连贯性、可用音色库作为选择 TTS 的主要维度。
2. 开源 1.5 版支持较长文本,也能完成单人、多人和音效任务;但不同节点对应不同模型,模型加载、Transformers 版本与显存配置不匹配时可能报错。
3. Bernini-R S2V 将多视角或单张参考图与音频一次性用于视频生成,相比把多个模态拆开计算,可提高生成速度并降低显存压力。
4. 参考图是稳定效果的关键:复杂场景建议先按音频和目标环境生成一张上下文一致的图片,再用提示词控制动作。图像与文本场景差异太大时,可能退化为普通图生视频或丢失场景设定。
5. 人脸占比、输出尺寸和画面比例会影响人物相似度。视频演示采用 1024 尺寸平衡速度与质量,并演示了约 16 秒的长镜头;具体时间和显存需求仍取决于本地硬件。
6. 已观察到音频结束后约一秒仍有嘴部动作的尾帧问题;多视角参考也不保证每次成功,需要结合参考图、文本与抽卡调整。

适合人群:想在本地或 ComfyUI/RunningHub 中搭建开源情绪语音与音频驱动数字人流程,并关注长文本、高动态和显存占用的用户。

补充说明:本文根据授权视频完整音频转写整。模型版本、节点依赖、硬件占用与平台积分规则可能变化,请以原视频和项目说明为准。

相关夸克网盘链接:
【无限画布整合包v2.5.3(支持贞贞平价AI小屋API):https://pan.quark.cn/s/5871a0142ff3
【贞贞整合包V4.7A:https://pan.quark.cn/s/ed4f5cc2db75
贞贞的AII工坊限时开放注册:https://ai.t8star.org/register?aff=dP7j

商用级图像/视频工作流:https://my.feishu.cn/wiki/EcErwNCz4iFi47kqiKqcfgYpn3d?from=from_copylink
海外版RH(宽审核):https://www.runninghub.ai/user-center/1907375370302308353/userPost?inviteCode=rh-v1121

无限画布整合包v2.1.4:https://pan.quark.cn/s/5871a0142ff3
画布开源项目(非商用授权):https://github.com/T8mars/T8-penguin-canvas
企鹅在线画布:https://art.pebbling.cn/?invite=T8STAR
海外版贞贞工坊:https://ai.t8star.org

Aix:https://aix.studio?partnerCode=10562
我们公司最新AI产品通过链接注册送300积分,快来体验!
如果注册只有100点,右上角有个礼物盒的图标,点邀请人,输入:10562,就有300点

T8唯一云端镜像:https://lincore.wuying.aliyun.com/,登录后右上角核时算力,购买,右上角兑换码,输入t8stargo,可领取200核时(如显示9.9,是没有实名认证,实名后则变成0)

Discord频道:https://discord.gg/sAK2THPWhZ
T8 Comfyui整合包V10:https://pan.quark.cn/s/9b0cd761bf8e
贞贞整合包V4.6B(新增充值系统):https://pan.quark.cn/s/ed4f5cc2db75
comfyui节点:https://github.com/T8mars/Comfyui-zhenzhen

Anima AItoolkit训练器:https://www.chenyu.cn/api/s/zKRe2OVO
Anima 秋叶训练器:https://www.chenyu.cn/api/s/s8DVsTL9
https://www.chenyu.cn/api/s/s8DVsTL9
FireRed1.1训练器:https://www.chenyu.cn/api/s/hLSXfdh1
Ernie训练镜像:https://www.chenyu.cn/api/s/mwh6j8DW
LTX2.3音画同步训练镜像:https://www.chenyu.cn/api/s/oswYwWwg
None-Z-Trainer训练器:https://www.chenyu.cn/api/s/WAXeJBA7
Z-image-base-Lora训练器:https://www.chenyu.cn/api/s/udv8rEst
Z-image-base-大参数Lokr训练器:https://www.chenyu.cn/api/s/saImzeeC
Flux.2 Klein全功能训练器镜像:https://www.chenyu.cn/api/s/73ymtHZD
Qwen 2512满血版ai toolkit训练器:https://www.chenyu.cn/api/s/CvdMi80M
Wan2.2 DP全能训练器:https://www.chenyu.cn/api/s/9i0q1alv
Z image turbo Ai Toolkit极速训练器:https://www.chenyu.cn/api/s/1YW0uLnQ
Qwen Edit 2511 Ai Toolkit满血版训练器:https://www.chenyu.cn/api/s/7NeThb65
Qwen Image Ai toolkit满血版训练器:https://www.chenyu.cn/api/s/NFEGJsmc
更多镜像陆续更新,可搜索:t8star
0.1=5的券 300张:W6TGFF
30 =45的券 300张:T8AIGC
50=100粉丝福利每个都可领取,每个号一次: 50VS50
卡:24G 3090 32G 4080 48G 4090

贞贞音乐:https://music.163.com/#/artist?id=122256042
海外账号星球:accboy7t8star.acceboy.com
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

简体中文
繁體中文
English(英语)
日本語(日语)
Deutsch(德语)
Русский язык(俄语)
بالعربية(阿拉伯语)
Türkçe(土耳其语)
Português(葡萄牙语)
ภาษาไทย(泰国语)
한어(朝鲜语/韩语)
Français(法语)
QQArchiver手机版小黑屋粤ICP备2026002389号-1粤ICP备2026002389号-1 简体中文 English 日本語 Русский язык 한어 |网站地图