经常使用Stable Diffiusion的朋友都知道,webUI和comfyUI底层都是Stable Diffiusion,但是它们的显示界面有非常大的区别:webUI界面简洁,新手比较容易上手;而ComfyUI 是采用基于节点的图形界面,通过连接不同的节点来构建图像生成工作流程,稍显复杂。

​ComfyUI-AdvancedLivePortrait:实时编辑人脸让图像动起来_新版本


但是通过了解ComfyUI的工作流逻辑,会发现它有一些非常明显的优势,比如:更低的内存消耗,更低的配置要求,更快的出图速度,更好的出图质量以及能实现更加丰富的效果,例如可以制作视频动画,同时跑不同的Lora效果、实时渲染等等,让效率直接起飞。


前不久,ComfyUI进行了0.20版本的重大更新,引入了许多易用性改进。

更新亮点包括:


增加了对Flux ControlNets的技术支持;

优化了队列管理;

增强了节点库的功能;

提高用户体验质量等。

总之,新版本的界面,用起来很方便。

​ComfyUI-AdvancedLivePortrait:实时编辑人脸让图像动起来_图像处理_02


除了新版本的更新,同样应该受到更多关注的,也是Bulu今天想给大家重点介绍的是ComfyUI的一个扩展插件ComfyUI-AdvancedLivePortrait,可以实时编辑上传人物的人脸,精准调控各种表情细节。对设计师来说非常友好,简单的表情编辑再也不用在PS里用液化一点点抹了。

(GitHub地址:https://github.com/PowerHouseMan/ComfyUI-AdvancedLivePortrait)


具体来说,ComfyUI-AdvancedLivePortrait包括以下功能:

ComfyUI-AdvancedLivePortrait

亮点功能:


可以从一张静态照片中提取出人物的面部表情,并对这些表情进行编辑和调整;


可以将编辑过的面部表情插入到现有的视频中,使视频中的人物表现出新的表情变化;


甚至在没有视频的情况下,用户也可以通过这些面部表情创建出全新的动画视频。

其中的表情编辑功能支持:

上下点头、左右摇头、旋转头部;

左右、前后、上下移动头部;

睁眼、闭眼、单眼、眼珠左右上下看;

张嘴、闭嘴以及微笑。


使用教程


1

下载安装插件:该项目已经注册到ComfyUI-Manager,用户可以通过该管理器自动安装、更新和管理项目;

2

下载安装好后,插件仓库里自带了几个工作流,分别是基础图片、视频和进阶图片、视频,拖到comfyUI里

3

第一次运行会自动下载模型,时间较长,之后都很快;

4

每一个参数的正、负数代表不同的方向,比如rotate_pitch的-20是抬头,+20是低头等等

​ComfyUI-AdvancedLivePortrait:实时编辑人脸让图像动起来_新版本_03


以下是部分参数代表的意思:


rotate_pitch:抬头和低头

rotate_yaw:向左向右转头

rotate_roll:向左向右歪头

blink:闭眼和睁眼

eyebrow:皱眉和挑眉

wink:左眼闭上

pupil_x:眼睛向左向右看

pupil_y:眼睛向上向下看

aaa:闭嘴和张嘴

eee:抿嘴和咧嘴

woo:咧嘴和嘟嘴

smile:微笑

src_ratio:脸部比例变小

sample_ratio:没变化


随着技术的进步,我们已经见证了越来越多令人惊叹的图像处理应用。ComfyUI-AdvancedLivePortrait正是这一趋势中的佼佼者,它不仅简化了复杂的人脸编辑过程,还为创作者们提供了无限的创作可能性。感兴趣的朋友可以快去尝试吧!