腾讯混元视频:v2v视频驱动,影视级画质与导演级运镜,
🌹大家好!欢迎来到破狼公众号。感谢大家的支持与鼓励。在AIGC探索道路上,我将与你一路同行。喜欢就星标关注破狼公众号或文末扫码加入交流群 !
HunyuanVideo简介
在之前文章中已经介绍过腾讯最新开源的当前最大参数的文生视频模型:HunyuanVideo。这是一款全新的开源视频生成具有130 亿参数大模型,具有与领先的闭源模型相媲美甚至更优的视频生成表现。采用了一个全面的框架,集成了数据整理、图像-视频联合模型训练和高效的基础设施以支持大规模模型训练和推理。详情参见:[ComfyUI]腾讯混元视频:虚实完美融合创意无极限!130亿大杯&影视级画质&导演级运镜&原生切镜&遵循物理运动&连续动作
在之前的文章中介绍了由社区kija大佬的ComfyUI-HunyuanVideoWrapper插件体验。当时还在开发中进支持 文生视频。如今kija大佬又升级了插件,支持了 视频到视频(Vid2vid) 的能力。本文这是视频到视频(Vid2vid) 续篇体验内容。
• github:https://github.com/Tencent/HunyuanVideo
• huggingface:https://huggingface.co/tencent/HunyuanVideo
• 项目主页:https://aivideo.hunyuan.tencent.com/
HunyuanVideo ComfyUI体验
当前社区 @kijai大佬已发布最新的ComfyUI-HunyuanVideoWrapper ComfyUI插件支持。更多安装详情参考文章:[ComfyUI]腾讯混元视频:虚实完美融合创意无极限!130亿大杯&影视级画质&导演级运镜&原生切镜&遵循物理运动&连续动作
• ComfyUI-HunyuanVideoWrapper:需要通过管理器Git安装,地址:https://github.com/kijai/ComfyUI-HunyuanVideoWrappe
• 混元视频模型:模型文件已更新,新下载地址为:
• 注意:原生的HunyuanVideo需要至少45G的显存运行,因此本文选择fp8的量化版本。尽管如此如此,显存的使用完全取决于分辨率和帧数,即使在24GB的GPU上也没法处理很高的分辨率和帧数。但幸好,HunyuanVideo在即使较低的分辨率下,模型也能生成功能正常的视频。
Flux文生图工作流
• F.1-绮梦流光-水湄凝香:
https://www.liblib.art/modelinfo/134c6dd95aef48e98a22b24e003e026b
HunyuanVideo-V2V工作流
01.奔跑
high quality nature video of a excited brown bear running down a stream, masterpiece, best quality
02. 轮船
高质量的自然视频,一艘轮船在海上疾驰而过,杰作,最好的质量
03.真人转绘
通常人物速度比较快速,这里采用剪影基础延长放慢帧速和配音结合实现。
High quality, high quality nature video, masterpiece,Japanese 3D anime style, 1 3D animated woman, wearing white tracksuit, gym treadmill rhythm running
04.真人健身
通常人物速度比较快速,这里采用剪影基础延长放慢帧速和配音结合实现。
高品质,高品质的自然视频,杰作,1个女人穿着白色的运动服,健身房跑步机节奏跑步
05.真人舞蹈
通常人物舞蹈速度比较快速,这里采用剪影基础延长放慢帧速和配音结合实现。
高质量,高质量的自然视频,杰作,1个中国女人身穿红色长裙,跳舞
如果觉得文章不错,就请赞、在看与转发三连