正在整理你需要的资料…
lucataco/open-source-higgsfield ↗
同一条素材换个人演,动作、运镜和原声都留着。Body Double 在本地 ComfyUI 上用开源权重做:SAM 3.1 跟踪演员,FLUX 3 Image Klein 把新角色画进真实首帧定身份,SCAIL-2 重绘替换只把演员贴回原分辨率底片,背景和颗粒保持原样;长镜头按 81 帧一段分段生成,每段接上一段末的五帧,崩溃可以续跑。
适合想在本地复刻 Higgsfield Genjutsu 那类换角玩法、又不愿依赖闭源 API 的视频创作者。方案只用 ComfyUI 核心节点,不装合作节点包也不调闭源接口,模型权重得自己备齐。
open-source-higgsfield
同一条素材换个人演,动作、运镜和原声都留着
下面是把仓库 README 逐节读完后归纳出的中文要点。
Body Double 把视频里的演员换成一个新角色,动作、运镜、镜头其余部分和原声都保持不变;在本地 ComfyUI 上用开放权重模型(SAM 3.1、FLUX 3 Image Klein、SCAIL-2)运行,是 Higgsfield Genjutsu 的开源替代;示例为 15 秒预览,完整 30 秒 1080p 版本可点击查看
跟拍换角用 SAM 3.1 追踪演员并渲染虚拟摄像机,只把换角演员贴回未改动的原始分辨率画面,因此布景、群众与颗粒保持像素一致;丢失目标时重新识别;FLUX 3 Image Klein 用真实首帧锚定身份,每 81 帧一段、段间用前一段末五帧做条件,下一段开始前先做接缝与背景漂移质检并可重跑;只用核心节点,不依赖自定义节点包或封闭接口
分阶段跑:ffmpeg 做全分辨率帧与音频并生成 960 宽的跟踪代理,SAM 3.1 检测并窗口化追踪演员产出平滑跟拍裁切作为锚点,FLUX 3 Image Klein 做首帧两图编辑生成新角色,SCAIL-2 按每 81 帧一段替换并做质检,最后把演员合成回原画面并复用原音频;每段起始帧为 76k,末段补齐到 4n+1 再裁剪,进多少帧出多少帧
以 30 秒、720 帧的演示为例,跟拍裁切 1280×704、合成 1920×1080、每段 6 步:DGX Spark 上单个 81 帧段约 8 分钟、10 段 80 分钟,整条含跟踪与首帧约 100 分钟;H100 PCIe 80 GB 上分别约 2.5 分钟、24 分钟与 48 分钟;分段用 int8 矩阵乘与块稀疏注意力,约需 50 GB 显存,合成在 CPU 上跑
在 DGX Spark 与 H100 PCIe 上以 ComfyUI 某个提交版本测试通过;需要 uv、git、ffmpeg、ffprobe、curl、sha256sum 与约 42 GB 磁盘放模型,还要有接受过 FLUX 3 Image Klein 许可的 Hugging Face 令牌并按参数接受 SAM 许可;ComfyUI 预期放在指定目录,快速内核需要 CUDA 13 版 torch;输出进 runs 目录,崩溃后可续跑
命令行选项覆盖源片段与时长、角色图与描述、尺寸、要换角的人、首帧选项、重新打光、清理角色图中的手持物、分镜命名与随机种子、只跑部分阶段;手持的香烟、手机或麦克风应从角色图与描述里去掉,由模型从原视频取来,检出时会停下并可用参数本地清理;画面有多人时需指定换谁,否则首帧编辑可能改动所有人,最终合成只替换被追踪的那一个
| 主要语言 | Python | 许可 | Apache-2.0 |
|---|---|---|---|
| 创建时间 | 2026-10-30 | 最近提交 | 2026-10-30 |
| 站内采集 | 2026-11-06 起,连续观察 13 天 | 最近一次 | 2026-11-18 |
最近 13 次采集
2026-11-06 68 ★ → 2026-11-18 77 ★ (累计 +9)
数据来自 GitHub 公开接口的每日采集快照,star 数为采集当时读到的值, 与 GitHub 页面上显示的实时数字可能有几分钟的差距。 项目名点击可回到 本页。