近期AI工具快速预览:AI自动配音!视频AI动捕!AI补帧!重构灯光......

科技   2024-10-29 17:58   湖南  

【AI动捕】

Metive:AI动作捕捉工具,免费公测

需要使用Google帐户登录,上传单眼视频,AI捕捉运动数据形成3D 动画
目前仅支持加载单角色、,MMD(PMX、PMD)模型,以 VMD 格式导出运动数据

🌟地址:

https://www.metive.app/editor/
https://www.metive.app/docs/


【AI配音/配乐】

MuVi:自动为视频配乐

通过专门设计的视觉适配器分析视频内容,提取特征用于生成不仅与视频的主题相匹配,而且与其节奏相匹配的音乐。

用户可以控制音乐风格和流派。

使用场景:游戏CG配乐,卡通配乐,默片配乐


🌟地址:
https://muvi-v2m.github.io/



PersonaTalk:字节可精准给视频进行AI配音的模型

具有自然的口型匹配,保留面部细节!

由两个平行的交叉注意力层,Lip-Attention/Face-Attention,分别采样渲染脸部。

用户只需要上传参考视频与音频,就能生成。

同时支持多语言翻译场景!估计后期会上线即梦或剪映

🌟地址:
https://grisoon.github.io/PersonaTalk/


Runway Act-one已上线

功能已上线,无需动作捕捉即可快速完成最长30s角色面部动画,你可以通过上传视频图像来完成!

🌟使用说明:
https://help.runwayml.com/hc/en-us/articles/33927968552339-Creating-with-Act-One-on-Gen-3-Alpha

🌟猫叔测试效果:



Framer:首尾帧视频生成,还能控制运动轨迹

一种帧补全模型,可以交互地插入两个图像帧。还可以自定义选定关键点的轨迹来控制其运动。

🌟地址:
https://aim-uofa.github.io/Framer/



重构灯光

IC-Light v2发布,目前可以在 FLUX 上运行。以自然方式重构灯光

🌟地址:
https://github.com/lllyasviel/IC-Light/discussions/98
https://huggingface.co/spaces/lllyasviel/iclight-v2



-End-
更多免费CG资产
欢迎前往CG模型网下载:
https://www.cgmodel.com/

热文推荐


Maya&3ds Max双双更新,布尔运算迎来升级!

Adobe发布九大黑科技,2D矢量图一键转成3D、快速修图、自动排版、动效视频应有尽有!

CGMODEL
CG模型网(cgmodel.com)是一个针对全球所有CG设计行业用户的互动、展示平台,以3D模型为主的资源共享平台。
 最新文章