|
重磅更新!KJ新增OneToAll骨骼绑定功能,完美解决WanAnimate姿势参考中因尺寸不一导致的人物拉伸变形。无需复杂设置,自动适配骨架比例,实测效果稳如泰山,视频党速更! 一、OneToAll骨骼绑定介绍最近KJ更新了个骨骼绑定的一个功能,在视频姿势参考里面可以用的上,我们以前在WanAnimate中人物参考视频姿势的时候,如果参考图比较小,和视频的人物大小不一样的时候,就会存在被拉新的问题,这个问题前几天分享的SteadyDancer有解决。 这次KJ自己的插件也同步了这块功能,所以今天就带大家一起来看看效果如何。 二、相关安装用到两个插件,都同步更新到最新即可。 然后模型有一个新的:Wan21-OneToAllAnimation_fp16.safetensors 放在网盘里面,大家自行前往下载
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
三、测评体验超好玩,推荐给你!
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
说一些工作流调整的地方。 首先是模型加载这边,底模+一个lightx2v加速模型
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
目前只有bf16的,fp8再等等,回头有了我再上传到网盘。 然后就是今天的核心节点,绑定骨骼这块的。 给你们看下对比,左边是以前的,右边是今天这个最新的节点
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
看视频这边,可以明显的发现,右边是不是缩短了,原视频的姿势是和左边这样的,右边这个参考了我给的熊猫的参考图,直接就变小了,这个就是今天的核心分享,视频姿势自适应,会根据我们传入的参考图大小自动调整。 这个插件给出了参数选择,ref的话就是会根据参考图来调整视频的骨骼姿势,如果选择pose就和原来的一样。
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
下面两个draw_face_points和draw_head参数是用来展示面部点以及骨骼是否隐藏用的。 对比如下
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
下面这3个也是新增的,把前一步的姿势骨骼图和参考图都传过来就行。
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
最后就是采样环节,没啥复杂的
拒绝人物拉伸!KJNodes 更新骨骼绑定神技,WanAnimate 终于不“变形”了!
我分别测试了ref和pose两种情况,特意拿体型差距比较大的来跑。 ref的视频 pose的视频 可以很明显看到差别了吧,ref的话就会和原图的保持比较好,pose的就会被视频姿势拉升。 再看看其他案例 我最开始测试的时候,卡通的图会发现风格会变,变成真人了一致性有点问题,不像了,后来发现是我分辨率设置太低导致的,设置832效果不大行,我改成1280效果才好起来。 下面是最开始跑的,最长边限制832的时候,很明显不大像对吧。 这也是我最开始有点懵逼的地方,怎么效果这么差- -,后来提高分辨率到1280就好了。 注意事项
分辨率记得要设置高一些,不然效果不好。 ref模式就是骨骼会根据原参考图调整 pose的话就和以前一样,图片根据参考视频骨骼拉升。 其实这个新的节点可以用在之前那个SteadyDancer中,效果会更好,回头我工作流去更新下
|