ComfyUI-AdvancedLivePortrait

更新

2024年8月21日

无需视频即可创建视频。

跟踪源视频中的人脸。

工作流已更新。

简介

AdvancedLivePortrait 速度更快，并支持实时预览。

https://github.com/user-attachments/assets/90b78639-6477-48af-ba49-7945488df581

编辑照片中的面部表情。

将面部表情插入视频中。

使用多种面部表情制作动画。

从示例照片中提取面部表情。

安装

该项目已注册到 ComfyUI-Manager。现在您可以使用管理器自动安装它。

使用方法

工作流和示例数据位于 '\custom_nodes\ComfyUI-AdvancedLivePortrait\sample' 目录下。

---

您可以为视频添加表情。请参阅 'workflow2_advanced.json'。

描述了 'workflow2_advanced.json' 中的 'command'：

[运动索引] = [改变帧长] : [等待下一动作的帧数]

运动索引 0 是原始源图像。

它们按照导致 motion_link 的顺序编号。

将驱动视频链接到 'src_images'，即可为驱动视频添加面部表情。

---

您可以使用 'Load Exp Data' 和 'Save Exp Data' 节点来保存和加载表情数据。

保存文件夹路径：\ComfyUI\output\exp_data\

---

感谢

原作者链接：https://liveportrait.github.io/

本项目使用由 kijai 转换的模型。链接：https://github.com/kijai/ComfyUI-LivePortraitKJ

ComfyUI-AdvancedLivePortrait 快速上手指南

ComfyUI-AdvancedLivePortrait 是一个基于 LivePortrait 的高级节点，支持实时预览、更快的处理速度，以及无需驱动视频即可生成动画、从图片提取表情并应用到视频等功能。

环境准备

在开始之前，请确保满足以下系统要求和前置依赖：

• 操作系统: Windows 10/11 或 Linux (推荐 NVIDIA GPU)
• 核心软件: 已安装并配置好的 ComfyUI
• 显存要求: 建议显存 8GB 及以上以获得流畅的实时预览体验
• 前置插件: 推荐安装 ComfyUI-Manager 以便自动管理依赖

安装步骤

本项目已注册至 ComfyUI-Manager，推荐使用管理器进行自动化安装。

方法一：通过 ComfyUI-Manager 安装（推荐）

1. 启动 ComfyUI，点击右侧菜单中的 "Manager" 按钮。
2. 选择 "Install Custom Nodes"。
3. 在搜索框中输入 AdvancedLivePortrait。
4. 找到 ComfyUI-AdvancedLivePortrait 并点击 "Install"。
5. 安装完成后，重启 ComfyUI 以加载节点。

方法二：手动安装

如果无法使用 Manager，可手动克隆仓库：

cd ComfyUI/custom_nodes
git clone https://github.com/smthemex/ComfyUI-AdvancedLivePortrait.git

注意：模型文件通常由节点首次运行时自动下载，或参考原作者 kijai 的仓库获取转换后的模型。

基本使用

安装重启后，您可以在节点列表中找到 AdvancedLivePortrait 相关节点。示例工作流和数据位于 \custom_nodes\ComfyUI-AdvancedLivePortrait\sample\ 目录下。

场景一：为视频添加表情（基础流程）

这是最常用的功能，将源图片的表情驱动目标视频。

1. 加载工作流: 在 ComfyUI 中加载 sample/workflow2_advanced.json（或根据需求新建）。
2. 连接节点:
   • 将 源图片 (Source Image) 连接到 src_images 输入端。
   • 将 驱动视频 (Driving Video) 连接到对应的视频输入端。
   • 节点会自动追踪源视频面部并将表情插入到驱动视频中。
3. 运行: 点击 "Queue Prompt" 生成视频。

场景二：自定义表情动画序列

您可以使用多个表情样本创建动画，或通过命令控制表情切换节奏。在 workflow2_advanced.json 中，通过 command 参数控制运动索引：

命令格式说明：

[Motion index] = [Changing frame length] : [Length of frames waiting for next motion]

• Motion index 0: 代表原始源图片。
• 编号顺序: 按照连接到 motion_link 的顺序编号。
• 示例逻辑: 设置特定帧数来改变表情，并设置等待帧数以保持该表情。

场景三：保存与加载表情数据

您可以提取图片中的表情数据并复用：

1. 保存表情: 使用 Save Exp Data 节点，表情数据将保存至 \ComfyUI\output\exp_data\ 目录。
2. 加载表情: 使用 Load Exp Data 节点读取之前保存的文件，直接应用于其他视频或图片生成。

进阶功能提示

• 无视频生成: 更新后的工作流支持在不提供驱动视频的情况下，仅通过多张表情图片创建动画视频。
• 实时预览: 利用节点的实时预览功能调整表情参数，直至满意后再进行最终渲染。