跳到主要内容

🟢 [Runway] Gen3 VS [国产Sora] Vidu,我又用100个镜头来测评图生视频效果了!

昨天在靠手速刷可灵积分的时候,

Runway Gen3的图生视频功能突然上线!

那我的无限积分账号可不能浪费了(偷笑)……

我正打算左右开弓来给新片子好好提提速,

结果预热早餐都还没吃完,Vidu也宣布全球上线🌍!

你们是不是约好了?这两天是什么良辰吉日吗?

那我这,那我这,不测也不行了啊!!!

我相信没人能忍住不去对比它们两个的效果吧,

  • Runway:老牌AI视频种子选手,第一梯队的文生视频效果

  • Vidu:4月份硬拼Sora,填500次表单都申请不上,反手沉寂了3个月,再见面就是全球上线的“弹跳小子”(为啥说是“弹跳小子”,往后看就知道了)

按照惯例,先来几个我喜欢的case

Realism Comparison

这次同样是抽了100个视频来大家看个过瘾,

评测的种类也在上周的基础上进行了延续和扩展,这次我们分为⬇️

写实、动画、仙侠国风、科幻、特效、动作,多人场面

开始之前,简单总结一下参数:

Runway Gen3 图像生成视频目前支持16:9,生成时长可选5或10s 中国版Sora - Vidu每月提供 80 个免费积分,免费用户单次生成4秒视频,付费用户8s,比之前宣传的16s少了一半

Parameters Summary

  • Runway Gen3 图像生成视频目前支持16:9,生成时长可选5或10s

  • 中国版Sora - Vidu每月提供 80 个免费积分,免费用户单次生成4秒视频,付费用户8s,比之前宣传的16s少了一半

Interface Comparison

为了让对比效果真实可靠,我关闭了 Vidu 的提示语增强,没有使用 Runway 的标准提示语结构,图生视频仅使用简单的描述语句,

按照GPT给我生成了50中英文提示语对后( Runway 用英文,Vidu 用中文),我和阿汤一人一句又又又开测了!

文章限制,能发的视频数量有限😌,我们将所有的case都放到文档里了, 关注我的公众号后私信 "抽卡"就能看到

Realism Example

Realism

老规矩,写实基本是目前必测风格了,主流主体分为人物、风景、动物。

大家可以多留意人物的细微表情、动物动作的连贯性以及景色的光影变化。

Image-to-Video Characters

  1. 男人抬手遮挡阳光

    Man Blocking Sunlight

  2. 男人慢慢向前走

    Man Walking

  3. 女人眨眼睛,眼睛中有漂亮的光影流转

    Woman Blinking

整个写实人物的动作、光影、还有细节,两个工具做的都很好,几乎没啥可挑的(出了第一张男人手里不知道拿了个什么东西)。对比起来,能很明显的看到vidu的动作幅度要大于gen3很多。

图生动物

  1. 毛绒绒的水怪消失在海浪里

    Water Monster

  2. 一只可爱的松鼠向前跳跳

    Squirrel Hopping

我可爱的小松鼠不仅多动症而且还会隐身了?vidu你小子究竟在想些什么?总体来说,不管是未知的生物还是已知的生物,gen3和vidu都能很好的识别并让它们合理的动起来,只是vidu生成出来的却是太活泼了哈哈。

图生风景

  1. 太阳缓缓升起,日出,延时摄影

    Sunrise

看到这里,我要开始吹vidu了!gen3对于风景的诠释在我意料之中,但vidu这个穿越效果真的很让我惊喜!非常自然连贯好看,就是清晰度差了一些,vidu赶快更新高分辨率!

总结:各大工具现在在写实风格上基本上都挑不出什么大毛病了现在,区别无非也就是动作幅度大不大,运镜效果好不好。那目前来看,vidu除了清晰度是硬伤以外,视频效果完全可以跻身一流了!

动画

由于鲜明的风格,动画也是被频繁提及的画面形式之一。

这次,我们还是对使用频率较高的皮克斯风格、新海诚、经典2D等动画类型进行了效果测试。

图生人物

  1. 女孩露出惊恐的表情

    Terrified Girl

  2. 魔术师手中展开带火花的烟雾

    Magician with Smoke

  3. 一个男生坐在窗台看外面的风景,风轻轻吹过

    Boy on Windowsill

第一组镜头,vidu秒变印度小女孩?另外,gen3真的很喜欢在不限制镜头运动提示语的情况下做推近镜头啊!

  1. 一只可爱的小动物歪头眨眼睛

搞了一张可爱的不知名小动物来生成,vidu至少还是个动物,动作也比较自然,gen3咋直接给我变成毛绒玩具了喂!

图生动物

  1. A cute little animal tilts its head and blinks.

    Cute Animal

搞了一张可爱的不知名小动物来生成,vidu至少还是个动物,动作也比较自然,gen3咋直接给我变成毛绒玩具了喂!

图生风景

  1. 原图直出(无提示语)

    Raw Landscape

总结:整体来说,两者对于这种非现实的动画风格的展现都还不错,vidu更有想象力,gen3对于细节的展现更好,两者各有千秋。

Xianxia (Chinese Fantasy)

国风类,水墨类视频是我们擅长做的,这类视频制作难点就是图生视频,图不会动,纯纯PPT!

  1. 女侠客骑马飞奔,衣服随风飘动

    Warrior on Horseback

  2. 一个侠客手里拿着一把剑向远处的宫殿飞去

    Warrior Flying

  3. 花瓣从空中飘落,风轻轻轻吹过,镜头推近

    Falling Petals

  4. 风吹过,一个女孩看着远处的灯火,镜头从女孩身边缓缓向远处的灯火推近

    Girl Looking at Lights

总结:要说国风,还得是咱们国产大模型,动的就是好。第一组的女侠骑马的镜头,我测过好几个工具,vidu是第一个让马跑起来的!惊喜惊喜!更不说后面镜头中对于远处仙境的想象和补充,都可圈可点!这要是更新高分辨率和长时长,那效果我都不敢想!(vidu听到了么,点你呢!)

Sci-Fi

大家应该都很熟悉科幻类镜头了,

现在对这种风格进行测试,主要考察它在光影和变换特效方面的能力。

  1. 原图直出(无提示语)题外话:大家知道钢铁侠变成杜姆博士了吗🤯

    Sci-Fi Scene

  2. 宇宙爆炸

    Cosmic Explosion

  3. 末日战士向飞船走去,尘土飞扬,天空风云变幻

    Doomsday Warrior

总结:科幻风格的效果对比也基本和上面的结果差不多,vidu动作幅度大,gen3细节更好,各有各的优势。

Special Effects

特效镜头主要用于测试模型模拟真实世界的能力。

通常包括物体的移动、碰撞、旋转以及其他物理现象的仿真。

  1. 一桶油漆泼在雕像上

    Paint on Statue

  2. 一个花苞缓缓生长绽放

    Blooming Flower

  3. 几种颜色慢慢流淌融合在一起

    Color Flow

  4. 抽象的形状变换,几何形状的眼睛随着画面形状颜色变换眨动

    Abstract Morphing

总结:抽象特效类型的镜头,目前还真没有能和gen3比的,最后一个对于几何形状的变换和眼睛的展示,我真的爱惨了!

Action

把动作单拎出来是因为实际做视频的时候,我非常希望能多一点人物交互的镜头,现阶段很多模型做出来的效果都是移动的PPT🤣

  1. 两个人在切磋,手中的光剑交错形成火花

    Lightsaber Duel

  2. 男人正在打铁

    Man Forging

总结:打起来了!打起来了!动作戏这么连贯的,vidu真的是第一个!!

Multi-person Scenes

多人广角大场面目前还是AI生成视频的一个软肋。

很多情况下,使用AI实现多人场景时,会出现人物重叠、变形,甚至无法生成对应画面的情况。

  1. 原图直出(无提示语)

    Multi-person Scene

  2. 原图直出(无提示语)

    Multi-person Scene

总结:我们之前用好多工具都测过这种大场面的多人镜头,对于烟雾火焰和多人行进的展现,vidu是真的厉害!

写在最后

呼,一口气放了66个视频!

由于文章篇幅限制,欢迎大家来观看所有视频及对应的图片,评论区发布“vidu"获取文档。

Ai视频更新速度开始按小时计算了,

版本更新后,抽卡出金的概率更高了!

本以为vidu这次赶在百花齐放的时候上线会是意料之中的效果,

没有想到带来这么多的惊喜🤯

这让我对于vidu后续的版本更新有了更高的期待!vidu冲啊!

也很开心这段时间能见到这么多工具一起更新,

真的有种【百家争鸣】的感觉,

也真的感受到,这些工具在帮助更多的人自由表达自己心里的画面,这真好!

这篇文章发出的时候,

Midjourney v6.1更新了!

我半个脑子已经在跑图了,

鉴于图生视频一半的功劳都在图上

我开始期待下一次测评了🐱