作者:Sia、 杨文

「这可能是目前海内最好的视比年夜模型。

家人们,这难道不是一部电影的切片?

视频加载中...

5周访问量暴增8倍多 这款国产AI视频生成器压番Runway

来自@StevieMac03(I2V,图生视频)

谁能不被这头清醒过来的小飞象萌化?

利用了图生视频(I2V)last frame功能,来自@alexgnewmedia

讲真,要不是在 X 上晃荡时溘然被这几个视频 「砸中」,咱还真不知道 MiniMax ,中国估值最高的大模型公司之一 ,又闷声整了个大活儿。

绷不住了,咋说碎就碎?

邪术降临,石膏天使也会醒来。

这些外洋「自来水」们秀出的「邪术」,正出自海螺 AI 10 月才上线的新功能「图生视频」。

五周前,MiniMax 发布了视频模型 abab-video-1,并在海螺 AI 网页版上线了视频创作入口(紧张是文生视频),正式入局 AI 视频赛道。

旋即,海螺 AI 在过去一个月内迎来爆发式增长,月访问量超 8 倍, 增速领跑环球 AI 产品。

在 AI 产品榜·网站榜( web )上,海螺 AI 网页版 9 月访问量在两个增速榜排名第一,环球增速榜 TOP 1、海内增速榜 TOP 1,增速高达 867.41%。

视频链接:https://mp.weixin.qq.com/s/Qh5ySlq4L3tnYmWM_66SGw

海螺 AI 官网链接:https://hailuoai.com/video

封印解除,创意狂欢

2024 年,没有比 AI 视频天生更「卷」的沙场。

海螺 AI「出征」不算早,上线仅过月余,就吸引了大批专业人士,包括电影导演、制片人、数字艺术家、游戏开拓者、KOL 等,遍布环球 180 多个地区。

无论创作者想要创作超现实主义作品、探索抱负和科幻主题,还是深入研究动漫和抽象视觉效果,海螺 AI 都能供应广泛的选择,知足不同创作需求。

一系列恶搞英国「地狱厨神」Gordon Ramsey 的 AI 视频,火爆出圈,网友用的正是海螺 AI 。

这位以爆粗口有名的厨师总是卷入各种奇怪场面,要么和一只夹住裆部的龙虾搏斗,要么穿着 Slayer(美国重金属乐队)的 T 恤敲打肉排,又或者坐在厨房中间的马桶上。

再配上欢畅的背景音乐,全体笑剧效果拉满。

现实题材中,感情表达一贯是一个难题——无论是对 AI 、还是明星来说,但「自来水们」已册封海螺 AI 为「动画表情之王」。

AI 设计师 Pierrick Chevallier 用过后惊呼「细节和真实感已经属于另一个 Level 了。

来自Pierrick Chevallier | IA @CharaspowerAI

新加坡电影导演 EHuanglu 用它天生了一位女性的面部特写( T2V ),从快乐到悲哀,末了捂脸哭泣,感情变革演绎相称到位。

该视频已有近 30 万次不雅观看,评论区上百位网友争相抄作业。

科幻创作,也是很多专业人士、AI 爱好者一展创意的主要场景。

有名导演 Dave Clark 第一次利用海螺 AI 创作的星球大战片段( T2V ),一度在网络疯传。

试用了最新的图生视频( I2V )后,这位导演直言,「我一贯在等待这种类型的恐龙运动。

这只外星生物的面部细微动作( I2V ),可还行?

来自Alexandra Aisling@AllaAisling

动漫题材( I2V )也不在话下。
请把稳,主人公的鞋子细节。

来自@02121976_yama2

除了供应广泛的风格选择,媲美电影的质感也给海螺 AI 再上大分。

看看这个视频( T2V )。
人物身体运动、情绪表现以及整体画面质感,越来越靠近纯粹的电影。

来自Particle Panic@Magiermogul

视频链接:https://mp.weixin.qq.com/s/Qh5ySlq4L3tnYmWM_66SGw

听说,海螺 AI 不用殊效模板,只依赖模型综合能力实现最顶级的影视殊效。

有导演曾在电影中利用 3D 软件进行这种灾害场面制作,但要达到类似效果非常困难。

现在,海螺AI( I2V )可以轻松完成。

来自tabi_yume@U7991688174711

一些网友、YouTube 主在比较海螺 AI 与最好的视频天生器 Runway、海内快手的可灵后创造,在天生运动方面,海螺 AI 明显属于下一个 Level,尤其是人体动作的流畅性和逼真性,比 Runway、Luma AI 等竞对都要好。

有博主乃至认为,在人物动作上,海螺 AI 的性能足以媲美乃至超越市情上其他领先的 AI 视频天生器。

你看,这个视频中( I2V )的女人转向一侧,从眼镜、头发、衣服到所有东西,均保持同等,海螺 AI 合乎逻辑地补充了缺失落信息!

一位电影制作人利用海螺 AI( I2V )后以为很猖獗。

看第一帧,只能瞥见责物的一只胳膊和手。
但海螺 AI 居然可以自己「脑补」出新胳膊和手,还完美地融入了现有视频。

来自 Uncanny Harry AI@Uncanny_Harry

X 用户 Heather Cooper 曾发起线上投票,针对同样的提示,谁的表现最好?

评论区多数人将票投给了海螺 AI。

来自Heather Cooper@HBCoop_,提示词,"Tracking shot of a curator standing and speaking to the camera as she welcomes museum guests. Warm, inviting atmosphere."

除了天生动作方面的领先,险些所有用户都承认海螺 AI 文本相应很好,能够较为准确地将提示词中的元素表示在视频中。

士兵转向摄像机,走向镜头,并用枪对准它,海螺 AI 捉住了每一个方位细节。

严格遵照指令中的运镜哀求,也是一个范例例子。

凭借对 90 年代人物着装风格、建筑样式的准确还原,以及分外鱼眼镜头下滑板动作的精准把控,这个视频让海螺 AI 在 reddit 中迎来好评。

目前,海螺 AI 视频模型在 VBench(视频天生模型评测框架)的第三方独立测试结果中综合排名第一,在画面质量、连贯性、流畅性等多维度均处于领先地位。

最近,喷鼻香港中文大学和腾讯研究职员通过「 VideoGen-Eval 」项目,对当前主流AI视频天生模型进行了全面评估,肯定了海螺 AI 在文本掌握方面突出能力,尤其在人物表情、运镜、多镜头天生和主体动态方面表现精良。

除了老司机,对付此前未打仗过 AI 的新人而言,海螺 AI 也非常友好。

一位名叫 Ksenia_Galushkina 的艺术家新手,花了两天半韶光,用海螺 AI 天生 80 多条视频,制作完成了这条迷你艺术片。

视频链接:https://mp.weixin.qq.com/s/Qh5ySlq4L3tnYmWM_66SGw

超「戏精」的海螺 AI,要干掉好莱坞?

俗话说得好,光说不练假把式。
海螺 AI 视频模型的实力究竟如何,还得看一手评测。

接下来,我们从海螺 AI 的拿手绝活开始试水。

打个响指,金箍棒秒变笛子

海螺 AI 上新的图生视频功能,不仅能准确识别上传的图片,还能准确理解超过图片内容之外的繁芜文本。

换句话说,创作者可以化身任性的导演,只需下个指令,海螺 AI 就会发挥充分的想象力予以实现。

例如,让《武林外传》中的佟掌柜和邢捕头,上演一出苦情戏。

(图生视频。
Prompt:女人悲哀地哭了起来,男人抱住并安慰她。

不得不说,海螺 AI 的天生效果相称惊艳。
佟掌柜眉一皱、嘴一撅,哭泣的表情非常逼真,邢捕头拥抱的动作也很自然流畅。

更难能名贵的是,虽然表情变革和动作幅度都较大,但画面并未崩坏。

再比如被网友玩坏了的「分心男友」经典梗图。
我们输入 Prompt:穿红衣服的女生转身,三个人拥抱在一起。

海螺 AI 完美遵照了笔墨指令,红衣女子转身,和身后的一对情侣拥抱,整套动作一气呵成,没有任何卡顿。

尤其是六只胳膊交叠在一起,很随意马虎涌现扭曲变形,但它天生的视频中,险些没什么明显的 bug。

我们还拿它各种「折腾」天下名画《蒙娜丽莎》。

(Prompt:蒙娜丽莎拿起手机,然后打起了电话。

(Prompt:蒙娜丽莎戴上墨镜。

海螺 AI 很会「无中生有」,手里要么取出个大哥大式儿的手机,扣在耳边假装打电话;要么摸出个赛博朋克风格的墨镜,骂骂咧咧地架在鼻梁上,光影、色调等细节处理得都挺到位。

最让人惊喜的,还得是它对图片中物品的精准掌握。

比如那张著名的地铁老人看手机的表情包。

不少人该当都见识过他吃手机的 AI 视频,这次我们来一次难度升级:老人拿着的手机变成鸡腿,并吃了起来。

上一秒老人还嫌弃地看动手机,下一秒就变成了鸡腿,然后大快朵颐。

为了表示地铁的高速运行,海螺 AI 对背景的渲染也很逼真,窗外的绿树快速后撤,环境不断变革,增强了沉浸感。

还有让猴哥的金箍棒秒变笛子,由此可见,海螺 AI 能够很好地解构指令框架和深层语义,并在视频天生中加以整合。

(prompt:男子手中的棍子变成了笛子。

一张自拍 + 一个目的地,想去哪就去哪

在电影《镜像天下》中,导演利用大量分外镜头和后期制作技能,让小哥从镜子中穿越到另一个时空。

而现在要完成这一效果,只须要一张自拍和一个目的地,海螺 AI 就能实现「跨屏」联动。

例如,将一位美女的照片和一幅风景图拼在一起,然后输入 prompt:女子走向绿地,站在草地上,望着俏丽的湖面,镜头缓缓左移。

来瞅瞅效果:

右边的美女完美领悟到左边的草地场景中,并且主体从原场景进入目标场景后,光影、色调都会完美嵌入新场景的设定。

(prompt:女子走向赤色的森林列车,镜头缓缓左移。

海螺 AI 按照笔墨描述,镜头随着女子的运动轨迹而移动,拼接处也逐渐消逝。

轻松搞定好莱坞级殊效

AI 时期,要有一颗会整活儿的心。

网友们就开拓出各种殊效玩法,比如 CG 合成、碎片化、变身、爆炸、流体……

要知道,殊效这玩意儿,那是嘎嘎费钱。
就拿《阿凡达》来说,它的总制作本钱为 2.37 亿美元,个中殊效本钱就占了 1.5 亿美元。

财大气粗的电影制作公司可以狠砸真金白银,但对付独立电影人来说,一分钱都难倒英雄汉。

如今海螺 AI 不用殊效模板,只依赖模型综合能力就能轻松实现好莱坞级别的殊效,真・大家都能当导演。

X 网友 Stylez Morales 就用了一张图和一句提示词,得到一段变身殊效镜头。

一个变形金刚机器人溘然变身成一辆超跑,在赛博朋克的街道上奔跑,这画面,真有一种电影级别的超现实视觉效果。

(Prompt:dramatic action scene dynamic camera shot of a transformer robot running down a futuristic dystopian cybersteampunk street avoiding explosions and transforms into a highly advanced supercar to get away atmospheric cinematic hyperreal photorealistic award winning blockbuster movie directed by Michael bay)

再比如拟人殊效。
毛茸茸的玩具小鹿溘然奔跑起来。

(Prompt:小鹿向前跑动。

玩具小狗溘然「复活」,还招朋引伴。

(Prompt:另一只小狗走进画面,两只小狗玩了起来。

爆炸殊效。
《浴血黑帮》中的三兄弟大步流星往前走,身后的建筑在一片爆炸中摧毁。

(Prompt:三个男人往前走,后面的建筑爆炸。

艺术审美在线

海螺 AI 在艺术审美上,也超能打。

它能用专业级调光与构图营造美学氛围,风雅掌握光影效果与景别变革,画面质感媲美大片。

比如一只拟人化的小羊在森林里舞蹈。

画质高清,镜头缓慢推进,毛茸茸的小羊羔蹦跶着,耳朵也有节奏地高下扇动,效果丝毫不输迪士尼动画。

再来看看海螺 AI 制作的时尚大片。

女模特摆着各种时尚 pose,表情自然且富有表现力,头发也会随着动作而飞舞,大衣纽扣等细节也处理得很风雅。

(Prompt:Fashion blockbuster, the female model strikes a fashionable pose, with the camera following closely.)

我们还上传了一张戴着墨镜、身穿西装、端着羽觞的男模特图片,然后输入 Prompt:男人愉快地举起羽觞,然后从画面左侧走出来一位美女。

海螺 AI 完成度相称高,画面也没有模糊、扭曲等问题。

与 Runway 同台竞技

没有比拟,就没有发言权,让海螺 AI 和 Runway 打个擂台,谁强谁弱也就一览无余。

我们就先用 OpenAI 创始四人组的照片打头阵。

上传同样的照片,输入同样的提示词:The three people sitting on the sofa stand up and walk out of the frame to the left.

这是海螺 AI 的天生效果:

这是 Runway Gen-3 Alpha Turbo 的效果:

海螺 AI 严格遵照提示词,坐在沙发上的 Ilya、Greg、Murati 站起来,向左走出画面,独留 Altman 站在原地缭乱;而 Runway 天生的画面则崩得离谱,照片中的四个人飞出沙发,完备没有遵照物理天下的运动规律,乃至还涌现了脑袋 360 度旋转的诡异画面。

再来一个多人物场景。

Prompt:strong man with cowboy hat in bar drinking beer with several women

海螺 AI 天生的画面,细节更丰富,场景更繁芜,人物表情也更自然。

比较之下,Runway 的镜头较为大略,男子喝啤酒时,杯中的啤酒没有减少,左边女生的手部也涌现了莫名其妙的动作。

Prompt:flying toward of a wide shot of an extremely large nuclear powered monster emerging from a fierce storm vortex walking over a city, epic shot in a cinematic fashion, pure destruction.

海螺 AI 的电影质感、画面丰富度更高,怪兽展现得也更生动。

Runway 则直接缺失落了怪物主题,没有准确理解 prompt 的含义。

这可能是目前海内最好的视比年夜模型。

而在已经体验过的人群中,他们毫无例外地将海螺 AI 归入第一梯队。

如果说,9 月的海螺 AI 已经令人印象深刻,那么,新增 「图生视频」的海螺 AI 又更上一层楼。
它并不完美,但频年夜家试过的许多 AI 视频模型都要好。

神奇海螺的聪慧和魔力是不容被质疑的,既然 Sora 迟迟不来,为什么不问问神奇海螺呢?

大家还等什么?快去体验一波吧。

海螺AI官网链接:https://hailuoai.com/video