HunyuanVideo:视频换脸工作流方案
🌹大家好!欢迎来到破狼公众号。感谢大家的支持与鼓励。在AIGC探索道路上,我将与你一路同行。喜欢就星标关注破狼公众号或文末扫码加入交流群 !
HunyuanVideo简介
今天文章核心主题为:基于HunyuanVideo混元视频结合换脸插件实现视频人物换脸工作流。关于HunyuanVideo混元视频在之前文章中已经多次介绍过腾讯最新开源的迄今最大13B参数的文生视频模型(支持NSFW):HunyuanVideo。一款全新的开源视频生成具有130 亿参数大模型,具有与领先的闭源模型相媲美甚至更优的视频生成表现。同时具有影视级画质体验,并具备原生切镜能力,可在真实与虚拟风格之间自由切换。拥有强大的语义对齐能力,能够生成高动态、流畅的运动画面,并一次性完成多个连续动作。模型具备导演级运镜能力,实现艺术镜头的无缝衔接,完美融合真实效果与虚拟场景。同时遵循物理定律,大幅降低违和感。
另外混元开源视频模型具有稳定的视频生成,还支持NSFW。更多详情参见:
• [ComfyUI]腾讯混元视频:v2v视频驱动,最强开源视频模型,影视级画质与导演级运镜,本地16G可体验 • [ComfyUI]腾讯混元视频:虚实完美融合创意无极限!130亿大杯&影视级画质&导演级运镜&原生切镜&遵循物理运动&连续动作 • 在线体验地址:腾讯元宝注册链接 https://yuanbao.tencent.com/bot/app/share/chat/HKDTKRA/videoTrafficDiversion
HunyuanVideo换脸 ComfyUI体验
当前社区 @kijai大佬已发布最新的ComfyUI-HunyuanVideoWrapper ComfyUI插件支持。更多安装详情参考文章:[ComfyUI]腾讯混元视频:虚实完美融合创意无极限!130亿大杯&影视级画质&导演级运镜&原生切镜&遵循物理运动&连续动作
• ComfyUI-HunyuanVideoWrapper视频插件:需要通过管理器Git安装,地址:https://github.com/kijai/ComfyUI-HunyuanVideoWrapper
• 换脸插件:https://github.com/Gourieff/comfyui-reactor-node
• 混元视频模型:模型文件已更新,新下载地址为:https://huggingface.co/Kijai/HunyuanVideo_comfy/tree/main
• 注意:原生的HunyuanVideo需要至少45G的显存运行,因此本文选择fp8的量化版本。
Flux文生图工作流
• F.1-绮梦流光-水湄凝香:
https://www.liblib.art/modelinfo/134c6dd95aef48e98a22b24e003e026b
• 工作流-Flux文|图生图+LORA+提示反推一键切换工作流:
https://www.liblib.art/modelinfo/782aacd70f604da39e83368c696a02a8
HunyuanVideo视频换脸工作流
注意:
• 目前sdpa已工作,显存足够情况下不再黑屏。追求更快速度可以选择安装flash_attn或sgeattn。文末附有sgeattn安装指南。 • 注意调整帧数读取上限或跳过起始帧数量,保证最终输出帧数能被4整除(例如101-1等),否则会不能被整除的报错。 • 本文采用文生视频方式换脸,也可以使用上节文章Video2Video视频驱动方式增加换脸使用。关于视频驱动方式参见:[ComfyUI]腾讯混元视频:v2v视频驱动,最强开源视频模型,影视级画质与导演级运镜,本地16G可体验
01. 冬雪
一个穿白色羽绒服和戴白色围脖的青年中国女性,正面看这观众,走在哈尔滨的大街上,看着四周下着雪
02.中医布道
镜头固定在一个精心布置的书房内,一位百岁老中医坐在书桌前正对着观众,身穿传统的中医服装,背最是书架上排列整齐的古籍和药柜。他的眼神中透露出深邃的智慧,面对镜头,用温和而坚定的声音讲述着中医的故事,画面以高质量呈现,色彩沉稳,光影柔和,营造出一种庄重而温馨的氛围。
03.舞蹈
在健身房里,一位穿着红色紧身运动服的年轻中国女性在跳舞。正对着观众,镜头聚焦在脸部,写实风格,室内灯光,专业拍摄。清晰的身体动作和运动节奏。
04.会议室
镜头固定在一个精心布置的会议桌前,一位女性坐在会议桌前正对着观众,身穿黑色西装讲述中国历史文化。镜头锁定在这位女性脸部。画面以高质量呈现,色彩沉稳,光影柔和,营造出一种庄重而温馨的氛围。
感兴趣加入[AGI技术交流群]+V
如果觉得文章不错,就请赞、在看与转发三连