让图片变动态视频,现在可能动动鼠标就够了

你一用鼠标画,画里的东西就会跟着动。

这种堪称马良神来之笔的操作,确实发生在我们的生活中。。。

而这一切都是通过一个叫做Runway的视频制作网站来完成的。

如果有熟悉这家公司的朋友,会知道他家之前给电影《瞬发宇宙》做过特效。

今年年初,他们还凭借文声视频的功能,在AI圈子里小有名气。

在本次更新中,Runway推出了一个名为运动刷的“炸王”功能。只要是画出来的,画面每秒钟都会变成视频,对于世通理解AI生成视频工具来说是一个刷新。

从Demo的效果来看,相比耗资百万的动画制作,虽然不能说一模一样,但也有七八分的形象。

反正看完之后,我又一次被AI的进化速度震惊了。照这样下去,我以后怎么用人拍电影和动画?

但是演示通常比我们尝试要好得多。

所以为了看看这个运动刷到底怎么了,还是老样子。史超会先帮你评估一下。

从官网打开Gen-2,页面是这样的。

然而,并不是所有生成的视频都是免费的。开始前官方会弹出一个说明,一共525分,1s算5分。根据一个视频4s,我们在白嫖可以得到26分。

接下来我们先上传一张这样的照片,也可以采用图文结合的描述方式。

下面,有一个“运动画笔”的BETA按钮。

点进去,左上角可以调整画笔和橡皮擦的大小。以下三个参数值分别代表左右、上下和离镜头的距离。

这里可能不得不注意的是,不仅仅是用画笔绘画的问题,参数的调整也很重要。

否则,你可能会得到这样一个奇怪的视频。。。

第一部失败的作品

像这张图,我想展示的是银杏叶随风飘落的画面。用笔刷画完一些叶子后,把向下吹的方向调整到左下方。

参数调整好之后,点击生成,等1分钟,就差不多好了。

看这效果,我只想说:妈妈,我要拍电影了!

说真的,我觉得t台更新有点太强了。。。

包括头发和波浪,效果也不错。关键是整个过程只需要2-3分钟,新手完全无压力。

如果你想调整相机的角度,运动刷旁边有一个相机运动,可以控制镜头的移动和变焦,就像拍电影一样。

比如这个视频,我设置了相机镜头向右移动,生成的产物叫梵高的爆破贝克汉姆

虽然生成的东西看起来和梵高没什么关系,但是从面部轮廓和光线的变化来看效果还是不错的。

还有这个老马烧烤,很多细节看起来很奇怪,但到目前为止,其实还算正常。

但是随着使用,我发现二代的主要目的还是看心情。

这个经典的迷因图大家都很熟悉吧?

本来打算通过Gen-2给这个兄弟一个“华丽”的转身,没想到,一切都出了问题。

衬衫男生变成POLO衫大叔的因素太多了,女人的白眼,女朋友在大街上的反串。我都不知道从何说起。。。

然后,我用另一张蜘蛛侠的图试了一下,这次我想让蜘蛛侠飞进去空。

为了防止事情出错,我加了一个文字描述。

结果,还是翻车了。

移动效果是有的,但是这个蜘蛛侠的后背已经完全变形了。

而且推翻的不止这一个。像这种事情更是重量级的。

想象:海浪拍打在沙滩上,海风吹动女孩的头发和裙子,女孩转向另一边。

现实中:鬼!!

这个AI,就是在人冒烟的时候直接飘走。。。

试用后,我觉得这款运动画笔处理一些简单的自然景物还不错,但是如果图片元素比较多,很容易在细节上出现问题

从一个刚起步的新人的角度来说,想把二代培养好,可能需要一些门槛。

史超在这里给出了一点建议。如果想生成一个效果不那么离谱的视频,除了用画笔绘画和调整参数之外,最好用文字描述。

正如你所看到的,Gen-2生成的视频非常慢,不太流畅。

一般来说,是混合的。

然而,自今年年初以来,像Gen-2这样的人工智能生成的视频工具实际上发展很快。

今年8月,一个老哥还用Runway蹭出了一个《流浪地球3》的预告片。

包括Stability AI,以及最近发布的开源AI视频模型Stability Video Diffusion。

也许我们在看待技术的发展时,可以更宽容一些。

毕竟AI画图刚出来的时候,关于生成结果的稳定性、可控性、细节描述能力,有很多段子。

从文生视频到图生视频,从单模到多模,现在的AI生成视频感觉有点像爆发前夕。

大概是去年这个时候,一批AI画图工具,比如稳扩散、中旅,爆发了。都说地球上一天,AI上一年,说不定明年就轮到视频了。

作者: Xixi 编辑:蒋蒋&;顶线:环燕

图片和数据来源:

跑道

未经允许不得转载:科技让生活更美好 » 让图片变动态视频,现在可能动动鼠标就够了