全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

国内外其他公司也纷纷发力,把手里的技术封装成一个个人人可用的 AIGC 产品,Runway 前几个月发布的 Gen-1、Gen-2 便是其中之一。

这几天,很多人的朋友圈都被 9 块 9 生成的 AI 写真 刷了屏。这些写真来自一个名叫「妙鸭相机」的微信小程序,主打一个低门槛、人人可用,而且效果媲美花大几百在照相馆拍的写真,因此俘获了大批网友。

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

「妙鸭相机」的走红是生成式 AI 技术逐渐破圈的标志性事件,它用一个非常明确的应用场景向大众展示了这些技术的具体能力。与此同时,国内外其他公司也纷纷发力,把手里的技术封装成一个个人人可用的 AIGC 产品,Runway 前几个月发布的 Gen-1、Gen-2 便是其中之一。

和很多文生图类应用不同,Runway 的 Gen-1、Gen-2 挑战的是一项更有难度的事情 —— 视频编辑和生成。其中,Gen-2 不仅可以像 Gen-1 一样在原视频的基础上编辑出符合用户要求的视频,还可以从头生成视频。但遗憾的是,在最初发布时,Gen-2 只能在有限的候补名单中使用。

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

Gen-1 视频编辑效果。来源:https://twitter.com/runwayml/status/1681335709850824704

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

Gen-2 视频生成效果。来源:https://twitter.com/javilopen/status/1683493099450793984

不过,这一限制在今天被彻底打破。刚刚,Runway 宣布,Gen-1 和 Gen-2 已经彻底开放,任何人都可以注册一个账号免费尝试。生成的视频长度为 4 秒,每秒消耗 5 个积分,利用免费额度可以生成二十几个视频。如果免费积分耗尽,付费标准为 0.01 美元 / 积分,也就是生成一个视频需要 0.2 美元。

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

这一限制的解除让已经发布数月的 Gen-2 再度走红,越来越多的人晒出了自己的试用结果。在欣赏网友的大作之前,我们先看看这个应用能做什么。

刷屏的 Gen-2 到底能做什么?

今年 2 月份,Runway 发布了 Gen-1。它的功能非常丰富,包括风格化、故事版、蒙版、渲染、自定义等等。

风格化可以理解为参考某张图像修改视频风格。比如给出以下原始视频:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

再给定一张参考图像:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

Gen-1 就能将视频编辑成上述图像的风格:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

故事版是一个电影学名词,指在影片的实际拍摄或绘制之前,将剧本的文字描述转换成一格一格叙述故事进展的图画。Gen-1 可以将一个类似故事版的视频转换为具有特定场景的视频。

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

蒙版(mask)可以理解为修改视频中的指定部分,而其他部分保持不变。比如,给定以下原始视频:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

然后向 Gen-1 输入文字指令「白毛上有黑点的狗。」我们就可以得到编辑后的视频。

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

渲染是指将计算机生成的 3D 场景或特效图像转换成最终影像。比如,给定以下原始视频:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

Gen-1 可以生成渲染后的视频:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

此外,Gen-1 还支持自定义视频编辑:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

今年 3 月份发布的 Gen-2 延续了这些功能,可以将图片或文本提示的构图和风格应用于原视频上。同时,它还新增了文字、图片生成视频功能。也就是说,仅需输入文字、图像或文字加图像的描述,Gen-2 即可在很短的时间内生成相关视频。它是市场上第一个公开可用的文本到视频模型。

比如,我们输入一段纯文字:「午后的阳光透过纽约阁楼的窗户照进来。」Gen-2 会直接「脑补」出视频:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

输入一张照片 + 文字「低角度镜头:一个男人走在街上,被他周围酒吧的霓虹灯照亮。」

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

Gen-2 会返回以下结果:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

仅输入一张图像,Gen-2 也可以将其扩展为视频:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

目前,Runway 已经开放了网页端的免费体验窗口,相关应用(RunwayML)也已经在苹果的应用商店上线。

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

官网地址:https://research.runwayml.com/gen2

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

Gen-2+Midjourney = 无限可能

Gen-2 限制的解除让这款应用在社交媒体再次刷屏,网友纷纷晒出了自己的试用效果:

全面开放,无需排队,Runway视频生成工具Gen-2开启免费试用

视频来源:https://twitter.com/dr_cintas/status/1683473643462860808

未来,这些工具还有哪些潜力?我们拭目以待。

相关资讯

Runway Gen-3的视频转绘功能太牛了!大片制作0门槛!

大家好我是花生~ Runway 在推出 Gen-3 Alpha 视频生成模型后,还一直有一些小的更新,比如推出了新的 Turbo 模型,生成速度比原来快了 7 倍;支持尾帧控制;支持将视频延长至 40s 等,都是非常符合用户需求的优化提升。 而它前几天推出的 V2V (Video to Video) 功能,更是将 AI 视频在风格转绘上的水平提升到了一个新的高度,再次秀了一波「AI 视频生成王者」的实力。该功能一经推出就受到众多专业 AI 视频创作者的称赞,并迅速衍生出多种玩法,很有潜力成为一个新的流量风口,喜欢

Runway 发布第三代视频生成模型,90 秒生成 10 秒片段

专为电影和图像内容创作者打造生成式 AI 工具的公司 Runway 发布了 Gen-3 Alpha 视频生成模型。IT之家附 Gen-3 Alpha 官方网站: 表示,与其之前的旗舰视频模型 Gen-2 相比,该模型在生成速度和保真度方面有了“重大”改进,并且对生成视频的结构、风格和运动提供了细粒度的控制。Gen-3 将在未来几天内向 Runway 订阅用户提供,包括企业客户和 Runway 创意合作伙伴计划中的创作者。Runway 联合创始人 Anastasis Germanidis 表示,Gen-3 的视频生成

Runway版Sora发布:高保真、超强一致性,Gen-3 Alpha震撼到网友了

虽然生成的视频只有10秒左右,但在清晰度、细节、角色一致性等方面看起来可以匹敌现有一切视频生成模型。刚刚,AI视频生成初创公司Runway推出了新的视频生成基础模型Gen-3 Alpha。该模型可以创建具有复杂场景变化、多种电影风格和详细艺术指导的高精细视频。Runway表示,Gen-3 Alpha是即将推出的一系列模型中的首个。系列模型是在为大规模多模态训练而构建的新基础设施上训练的。与Gen-2相比,Gen-3 Alpha在保真度、一致性和运动性方面有了重大改进,并朝着构建通用世界模型迈出了重要一步。在博客中,