|
FMLF 多帧参考插件解决多张首尾帧两两拼接的繁琐问题,支持多图直接传参,一次采样即可生成完整结果,大幅提升视频创作效率,操作便捷。 一、FMLF多帧参考介绍今天来介绍一个非常不错的处理首尾帧的插件FMLF,我们以前做首尾帧默认就是2张图,如果想要更多的图片做首尾帧,就需要两两做首尾帧然后再拼接对吧,有点繁琐,现在这个FMLF技术直接支持多张图传参,一次采样就全部出来结果了,非常的Nice。 今天就来给大家介绍下这个插件以及如何使用。 二、相关安装目前该插件支持ComfyUI并且优化的不错了,可以放心使用了。 插件地址:https://github.com/wallen0322/ComfyUI-Wan22FMLF 我们这里配合之前推荐的RemixV2版本的I2V模型使用,详细见这篇: [ComfyUI]Wan2.2-Remix V2 实测:人体动力学 + 场景一致性双突破,动态稍逊 Smooth 但细节封神 三、测评体验工作流已发Runninghub,前往体验or下载:
多帧参考不用拆!FMLF 插件支持多张图传参,一次采样直接出结果,太省心
工作流大体上和之前分享的Remix图生视频版本一样,这里模型加载就不多说了,列一下这次变动的核心节点:
多帧参考不用拆!FMLF 插件支持多张图传参,一次采样直接出结果,太省心
上面这组节点就是最关键的,我这里测试的是3张图的多帧视频,如果想要更多,大家在这个基础上自己添加即可。 我首先把图片缩放裁剪下,统一成相同宽高,然后通过图像组合批次节点合并下,传入到最关键的Wan Multi-Frame Reference节点的ref_images入参中,不管是3张还是5张都是这样操作。
多帧参考不用拆!FMLF 插件支持多张图传参,一次采样直接出结果,太省心
这个节点其他参数配置如上图,这个是作者的最优推荐,如果是单人,使用SINGLE_PERSON可以实现最好效果,解决闪烁问题。 如果是变化比较大的图,就选择NORMAL选项。 其他就不用变动了。 案例展示
我们来看几个视频,经过我实际测试,这种多帧的比较适合一致性比较强的分镜图,就是背景和主体很接近的效果最好。 来看一个效果不大好的,这个目前我还在测试中,估计是参数没调对,回头去问问作者。 注意事项
尽量使用官方模型,不要使用量化模型,新增单人模式可有效杜绝颜色累积和亮度闪烁, 低分辨率推荐:480x832/832x480/576x1024 高分辨率对剑:704x1280/1280x704 注意:720*1280会导致中间帧闪烁问题, 如果是变化场景较大,(如变身等)可以切换为normal模式按以下参数设置,使用normal模式,并且低噪lightx2v的Lora权重需要降低到0.6左右,不然低噪会破坏掉你的变化效果。
四、在线使用云端镜像
大家如果没有本地 ComfyUI 环境,或者本地显卡配置低于 16G 的,可以使用嘟嘟部署的仙宫云镜像,可直接加载使用。后续分享的工作流都会更像到镜像中,一周更新一次,方便大学学习。 目前整合了2个镜像,一个是Flux绘图用的,另外一个是针对视频模型的,之所以分开是一些模型兼容问题,分开比较好处理。 镜像名称:嘟嘟AI绘画趣味学
多帧参考不用拆!FMLF 插件支持多张图传参,一次采样直接出结果,太省心
多帧参考不用拆!FMLF 插件支持多张图传参,一次采样直接出结果,太省心
云平台镜像地址: https://www.xiangongyun.com/image/detail/d961a7dc-ade3-4bd5-a7c6-92ac49ff5e4b?r=37BCLY https://www.xiangongyun.com/image/detail/81716d29-4461-4b0b-ba4b-7b9b7dd569d3?r=37BCLY 新用户通过邀请码注册,总共可获得 8 元奖励,体验 4 个小时的 4090 作图时长。
|