海螺AI上线新功能,保障视频一致性

科技   2025-01-13 22:05   四川  

早上起床,看到海螺的 AI 视频,又双叒叕加强了。


他们悄悄上了一个新功能:主体参考。

描述非常简单:

Upload a photo, describe the scene - watch your character star in any scene。

一张照片+一段描述,让你的角色出演任何场景。

这就是冲着“取代”演员来的。

人物参考,绝对会是 AI 视频未来的标配。也是 AI 能进军影视行业的必经之路。更是解决一致性的第一步。

X 上老外已经玩疯了。

比如这个,有老外做了一个同一张脸在不同的服装和场景剧情的 case。

非常的稳定。

除了真人,3D 角色效果也都不错。

甚至还能做动物。

目前应该是全量了,因为我自己的小号也能用了。

国内版网址在此:https://hailuoai.com/video

海外版:https://hailuoai.video/

不过我自己一般喜欢用海外版的,原因不说了,你懂的。

登录海螺后,进入 AI 视频生成页面。模型标签栏里选【主体参考】,海外版的叫【Subject Reference】

上传你的角色照片,就点击【添加参考角色】,就会弹出角色库。

传图就很简单了,jpg、png 啥的都可以,只要海螺能识别出“脸”。而且你上传的角色都会保存在角色库里,如果之后还要复用这张脸,直接去库里找就行。

【添加参考角色】的下方,就是写 Prompt 的位置。

这里没啥好说的,就是强烈建议开启海螺自带的提示词优化功能,点一支笔的那个 icon 就行。roll 出的视频效果会好非常多,小白友好。

传好你的角色人脸、写好 prompt,OK 了。就这么简单两步。

直接点击生成,坐等海螺给你跑出视频就行。

我跑了几个好玩的。

比如直接打开了科技圈大佬们的衣柜,让他们来一个经典皮肤互换。

让库克穿上周老板红色 polo 衫。你别说,是有内味儿了。

黄仁勋穿上黑色高领……好家伙,有一股子当年乔老爷子的味道了。

还有,让奥特曼穿上皮衣来宣传英伟达显卡。

就,非常的欢乐。

在我跑了几个小时以后,总结一下我自己测评的感受,大概就是:

很强的人脸稳定性和一致性,以及无与伦比的情绪表演。

一、很强的一致性

首先最重要的,一致性。

简单来说就是:你给谁的照片,生成的视频里就稳定是谁的样子,不会突然变成隔壁老王。

玩过 AI 视频的都懂,人脸不稳定多让人崩溃。

同一个 prompt 的结果,今天是马冬梅,明天是马东锡,后天不知道又变谁了。尤其是想拍个完整剧情的时候,前后两个镜头主角的脸对不上,观众直接出戏。

我去年 4 月做过的一个的 CCTV6 的短片,光调整人脸一致性就折腾了三天。。。

现在,人脸一致性就非常的爽。

比如这个 case,老人面部的皱纹纹路、神态,细节稳定得不行,转个头都不带跑偏的。

甚至面部彩绘都能完美保持。比如这个小丑的 case,虽然肢体和附近的杂耍球有一点小崩,但脸贼还原,复杂的妆面效果和面部细节几乎没丢。

还有一个我摸索出来的很骚的玩法。就是只要用一张照片加个 prompt,就能看到演员“增重”的效果。。。

这种效果要搁传统拍电影,不得上 CG、特效化妆折腾半天,现在写个 prompt 的功夫就搞定,立省百分百。

二、连续性很强

其次连续性,也就是同一个视频里人脸得稳定。你总不能角色转个头的功夫,突然变成另一个人吧。

所以我测试了一下让角色转头、抬头、低头……连贯展示多个面部角度。你们感受下这个稳定性。

只用一张照片就能做到这个效果,真的牛。

还有这个 case。我让角色:先戴上墨镜,说话,然后突然摘下来。

这个衔接。。。纵享丝滑。墨镜遮挡前后的五官细节一点没变形。

三、表情演出稳定发挥

还有海螺 AI 的看家本领:角色表演。

海螺 AI 的人物表情细节和真实感,一直是我认为目前所有 AI 视频模型里做得最好的。

这次的 S2V 模型保持了情绪表演的优良传统。虽然整体来说,我觉得有点不如海螺的 T2V 和 I2V 的演技好。但在同类的人脸参考模型里,已经很不错了。

比如这个女人的喜怒哀乐。

有了这个功能,以后大家拍视频说不定真的能省下一大笔演员费。。。

用一张照片就能当演员,拍一个属于你自己的大片,自此,真的不再是幻想。

在X上我还看到不少老万拿自己的照片玩儿穿越,科幻片、动作片、文艺片。。。

啥风格都有,真就“重生之我是好莱坞巨星”。

我有一部很喜欢的电影《瞬息全宇宙》,里面有一段很经典的剪辑,就是杨紫琼在不同的平行宇宙的样子快速切换。短短几秒体验了十几种人生的感觉,很酷。

作为一个二次元加老中二病,我也想整个活,看看平行宇宙的自己是啥样子。

于是,我拿着自己的证件照,决定整个活,开启我自己的“多元宇宙”之旅。

在《加勒比海盗》里征服大海,在《哈利波特》怼伏地魔,在某部韩剧当霸总,在《赛博朋克 2077》勇闯夜之城,在《007》搞定“Mission impossible”,在《飞驰人生》挑战自我。。。甚至在《蝙蝠侠》守护哥谭市。

“地球 Online2025”(钱不够演员未定剧本暂无版),敬请期待。

我可太喜欢了。。。

最后来说一下缺点,海螺 AI 的人物参考很棒,但是也不是一点问题都没有。

首先就是整体来说还是得抽抽卡,大概跑个三四次之后能 roll 出比较好的效果。

然后就是肢体方面,比较安静的状态和小幅度动作都挺稳的,但是舞蹈、蹦跳之类的大幅度动作,海螺确实还有进步空间,可以再练练。

其他的就没啥可说的,瑕不掩瑜,海螺 AI 在 AI 视频的道路上,还是一路向前的。

从 23 年到现在,我也算是一路看着 AI 视频从最初的 PPT,发展到现在逼近真实的质感。

一开始崩得不行的“吃面”,早就克服了;情绪表演,比如海螺已经做得很出色了;舞蹈之类的大动作,可灵 1.6 也把天花板打得无限高,也越来越稳定。

再加上这次的人物参考,视频越来越可控。

AI 生成内容的头顶一直有三朵乌云:风格一致性、人物一致性、场景一致性,风格一致性已经被解决的很好了,人物一致性,现在海螺也能非常好的解决。

AI 视频的玩法也不再只是零散片段,它可以尝试着,去完整地拍完一个故事了。

AI 电影从概念照进现实,似乎,只差临门一脚了。

那个临门一脚,就是最后的,场景一致性。

期待海螺在这块,能继续迭代,给出一个很好的方案。

那曾经的幻想,我觉得都将成为可能。

我突然想起庄子在《逍遥游》里说的那只鲲鹏。

翅膀遮天蔽日,能凌空九万里。

这一次,我们都是鲲鹏。

工具已经摆在眼前,只待你脑海中精彩绝伦的故事。

每个人都将可以成为导演,

而 AI,正在等待你的第一声“Action”。

推荐阅读

CES 2025:井喷的AI陪伴与AI眼镜

找猫的魅力?DAU破百万,厂商融资上亿元

一款“长在Instagram上”的App,上线3年赚了4000万美金

3个月DAU增长2.8倍,这款AI图片App避免了“一波流魔咒”?

被吹爆的终迎来增长,又一国内产品加入AI商品图竞赛 | AI图片出海洞察第5期

商务合作

Cassie | 微信:18506490569

Ares | 微信:18606066421

Lina | 微信:13381020131

David | 微信:13809501924

Ania | 微信:13720814733

媒体合作

Echo | 微信:13003974360

游戏、应用等APP出海对接

Shadow | 微信:18650708568

卖家对接

Demerly | 微信:18150844790

客户服务

Lia | 微信:baijing018

与CEO聊合作

白鲸出海魏方丹 | 微信:bjbandari02

(添加请备注姓名、公司及职位)

长按识别二维码,备注“白鲸”申请加入白鲸社群,获取更多资讯、活动、资源


白鲸出海
白鲸出海,泛互联网出海服务平台,白鲸专注于具备互联网属性的行业、公司、产品和服务的出海,包括应用、游戏、电商、区块链、智能手机及硬件、旅游、网络文学、影视、动漫、教育、体育和金融等。
 最新文章