今年 2 月,OpenAI 发布了全新的文生视频模型 Sora,致使 AI 视频生成领域迎来了一系列令人瞩目的突破。
在这一系列技术浪潮下,AI 视频生成赛道也给传统视频创作行业带来了冲击。传统视频制作获取素材成本较高,且需要大量人员投入时间精力参与视频制作。
而 AI 视频生成则无需烦恼这些。首先,通过 AI 生成视频素材,可以减少对外购买版权素材的依赖,降低视频制作的成本。其次,借助 AI 可以通过智能渲染和特效应用的即时完成视频的剪辑和处理,大幅缩短后期处理时间。最后,使用 AI 生成视频技术可以根据用户偏好生成大量且丰富的视频风格,以满足不同用户的需求。
但是,AI 生成的视频也并非没有缺点。首先是 AI 视频对于细节把控、转场和运镜流畅度、视频生成时长上还需要优化提升。此外,相较于传统视频制作,AI 视频在生成视频的过程中会消耗一定的算力资源。
我们调研了现下热门的 AI 视频生成工具的情况,具体内容如下。
一、可灵 AI-快手
在整体的生成视频的体验中,可灵 AI 生成的画面中的环境在运动的过程中产生崩坏或者形变几率很小,基本都随着拍摄角度的变化而变化。甚至能做到清晰的光影关系。
收费形式:每天可以免费生成 6 个视频,支持付费增加视频生成数量。
推荐方向:画面动作幅度小、需要细腻的的镜头转场的视频生成。
生成视频展示:
二、即梦 AI-字节跳动
即梦 AI 在清晰度方面不错,可控度相对较高。文生视频的自然语言理解能力没有问题,但针对真实物理特性方面,即梦还有很高的提升空间。
收费形式:每天有随机的积分赠送,支持订购会员升级产品。
推荐方向:以自然场景为主、展现具体人物的视频生成。
生成视频展示:
三、Haiper-Haiper
Haiper 每天可允许用户生成大量最高 4s 的视频,但是生成 8s 的视频则需要一定的花费。视频清晰度不够,但在人像的流畅程度上,让人感到惊艳。
收费形式:普通用户支持生成 4s 高清视频,8s 高清视频需要消耗 80 金币,新用户注册可免费获得 300 金币。
推荐方向:人像, 主体物相对清晰的视频生成。
生成视频展示:
四、Liblib AI-北京奇点星宇科技
Liblib AI 提供在线 Stable Difusion 图片生成、视频生成功能和海量的模型素材库,图生视频功能的效果较为一般。
收费形式:生成一次视频需要生成 8s 的视频需要消耗 50 多个金币不等,用户可以免费获得 300 金币。
推荐方向:动作轨迹明显的视频生成。
生成视频展示:
五、剪映 AI-字节跳动
剪映 AI 是通过自然语言处理与计算机机器视觉生成,会抓取网站上现有的视频片段进行整合生成,且会自动生成字幕和配音。
收费形式:免费版视频生成数量无上限,某些功能需要开通 VIP 方可使用。
推荐方向:时长较长的视频,需要自动配音和字幕的视频生成。
生成视频展示:
六、神采 AI-杭州王道控股
神采 AI 在室内设计、建筑设计、游戏设计、产品设计方面有不错的图片生成效果,但是在视频领域还不够完善。
收费形式:生成一次视频需要消耗 2 个金币,平台每月赠送 10 个金币。
推荐方向:暂不推荐。
生成视频展示:
七、一镜流影-百度
一镜流影是百度文心一言 4.0 会员专属的 AI 文字转视频工具,能够根据主题词、语句、段落篇章等文字描述内容,一键生成视频。
收费形式:文心一言 4.0 会员可使用,价格为每月 59.9 元。
推荐方向:时长较长的视频生成。
生成视频展示:
请打开链接查看: https://yiyan.baidu.com/share/uD7o5RhZsw
八、Runway-Runway
作为 Sora 之前最为出名的 AI 产品之一,且是最早为大众广泛认知的产品,这些早发优势为 Runway 获得了更多用户的认可和更高的评价。现有 gen-3 和 gen-2 两种模型。
收费形式:新用户赠送 300 点,在使用 gen-2 模型的时候每生成 1 秒消耗 5 点,生成的视频清晰度为 720p。支持付费生成 2k 的视频。
推荐方向:人像, 主体物相对清晰的视频生成。
gen-2 模型生成视频展示:
九、Pika – Pika Labs
作为 Sora 发售前 Runway 的最有力竞争者,目前 Pika 的相关能力目前是最接近 Runway 的, 在部分操作在接近 Runway 的同时,Pika 还较有特色的增加了对嘴型的功能。
收费形式:普通用户支持生成 4s 高清视频,8s 高清视频需要消耗 80 金币,新用户注册可免费获得 300 金币。
推荐方向:需要对嘴型(购买会员后可用)的视频生成。
生成视频展示:
十、Dream Machine – Luma
Dream Machine 是 Luma AI 新推出的一款视频生成模型,这家公司专注于 3D 内容生成技术。
收费形式:注册用户每月可获得 30 次生成视频机会,如有更多需要购买会员。
推荐方向:科幻画面场景的视频生成。
生成视频展示:
十一、Deforum
Deforum 这个产品是基于 Deforum.art 这个团队为 Stable Diffusion 开源项目(webUI 和 comfyUI)打造的插件。由于是开源项目,基本允许用户免费试用,门槛在于用户是否可以完成 webUI 的本地部署。
收费形式:不收费, 但需要在本地部署。
推荐方向:“平行宇宙转场”——丝滑转场的视频生成。
生成视频展示:
最后我们综合各产品属性特点,结果如下表:
以上,便是我们目前针对目前相对主流的 AI 视频工作的调研。AI 技术正处于蓬勃发展阶段,产品迭代迅速。针对新功能我们会继续进行补充。后续我们会针对 AI 视频生成工具的实际使用案例进行介绍,欢迎关注。
今天的分享到此结束,感谢您的阅读,我们下期再见。