Adobe Premiere Pro 将撑持 AI 视频编写功效! 可接入 Sora、Runwa 等模型

大家好,这里是和你们一起探索 AI 的花生~ AI 技术目前在视频生成领域有广泛应用,出现了很多成熟的东西,比如 Sora、Runway、Pika、Stable Video、Dreamina 等,它们都可以直接通过文本或图象生成静态视频。与此同时,AI 技术在视频编写方面的应用也越来深入,Runway 早就在其视频编写东西中加入了智能抠图、静态追踪、部分重绘、智能调色的功效,我们熟悉的剪映曾经撑持智能字幕、音色克隆、视频无痕翻译、数字人等功效。 相关推荐:这两天,Adobe 也宣布将为其旗下的专业视频编写软件 Pr

Adobe Premiere Pro 将撑持 AI 视频编写功效! 可接入 Sora、Runwa 等模型

大家好,这里是和你们一起探索 AI 的花生~

AI 技术目前在视频生成领域有广泛应用,出现了很多成熟的东西,比如 Sora、Runway、Pika、Stable Video、Dreamina 等,它们都可以直接通过文本或图象生成静态视频。与此同时,AI 技术在视频编写方面的应用也越来深入,Runway 早就在其视频编写东西中加入了智能抠图、静态追踪、部分重绘、智能调色的功效,我们熟悉的剪映曾经撑持智能字幕、音色克隆、视频无痕翻译、数字人等功效。

相关推荐:

这两天,Adobe 也宣布将为其旗下的专业视频编写软件 Premiere Pro 接入一系列生成式 AI 功效,包括添加东西、简略东西、视频实质缩短以及根据文本生成视频,为用户提供更便捷精准地视频编写服务。

Adobe Premiere Pro 将撑持 AI 视频编写功效! 可接入 Sora、Runwa 等模型

「新增东西」可以让用户框选视频画面的某个区域,然后结合用提示词来重新生成该部分的实质。从演示视频来看一共撑持矩形、椭圆、钢笔三种框选方式,新生成的实质与周围的环境也融合地相当不错。

「简略东西」撑持智能识别某个东西并一键将其无痕简略。这种选择是跨帧的,一旦选中后,之后画面中实质都会同样被简略,无需重复操作。这项功效将对影视后期非常有帮助,用户可以轻松去除画面中不需要的人物或者道具,以及一些可能会涉及到侵权的实质。并且简略操作是非破坏性的,撑持恢复至原始状态。

最后是「视频实质缩短」,可以基于视频片断的最后一帧,继续生成静态实质。

以上三项功效都是由 Adobe 自研的 FireFly 模型提供撑持。这个模型之前曾经为大家介绍过好几次了,它撑持文生图、图象部分重绘、图象外绘拓展、文生矢量图形、矢量图自动上色、文生设计模板等多种功效,曾经被内置到

Photoshop、Illustrator 和 Express 软件中。如今 FireFly 又新增了视频生成功效,发展速度令人惊喜。

Adobe Premiere Pro 将撑持 AI 视频编写功效! 可接入 Sora、Runwa 等模型

除了 FireFly 模型,Premiere Pro 还撑持接入第三方模型来生成视频,比如用 Pika 来缩短视频、用 Sora 或 Runway 生成新的视频片断,给用户更多样的选择,只是不知道是否会额外收费。而且既然 Sora 曾经可以提供 API 接口给第三方使用,是不是也离开放测试应该也不远了?

官方称 Premiere Pro 的这些生成式功效会在今年晚些时候上线,因为有 AI 参与到创作流程中,所以 Adobe 将会为生成的实质附加实质凭证,以便人们查看其中 AI 的参与程度以及具体使用的模型,这为维护正常的创作秩序起到了一个很好的的示范作用。

前段时间还有消息称,Adobe 正在每分钟 2.62 美元的价格收购视频资源,以训练自己的文生视频模型,看来 Adobe 也曾经正式加入 AI 视频模型的 “军备竞赛” 中了。而付费购买视频资源应该是为了更好地应对 AIGC 一直存在的数据集版权问题,保证 Adobe 服务的用户可以安心的地使用自家模型生成的实质而不用担心会侵权。

Adobe Premiere Pro 将撑持 AI 视频编写功效! 可接入 Sora、Runwa 等模型

在剪映、Adobe PremierePro 这些传统视频编写东西积极拥抱 AI 生成式技术的同时时,新兴的 AI 视频生成东西也在积极拓展它们在视频编写方面的应用。比如 Pika 目前曾经有了视频部分重绘、音效生成、角色唇形一致等功效;LTX Studio 则正在打造一个全 AI 流程的视频建造平台,从创意构思、视频生成到视频编写可以一站式完成,未来 AI 肯定会给我们更多新鲜的视频建造体验。

Adobe Premiere Pro 将撑持 AI 视频编写功效! 可接入 Sora、Runwa 等模型

好啦以上就是本期为大家分享的 Adobe Premiere Pro 撑持 AI 视频编写功效的相关实质,喜欢的话记得点赞收藏撑持一波,我会有更动力为大家推荐新的干货实质~ 想了解更多 AI 新鲜资讯的话,欢迎关注 优设 AI 自学网 和优设微信视频号,每天都会分享最新的 AIGC 资讯和神器,让你轻松掌握 AI 发展静态。

另外我最新建造的课程《零基础 AI 绘画入门》曾经上线,课程包含对 Midjourney 及 Stable Diffusion WebUI 的系统入门教学,并提供配套资源、各类实用东西和提示词库,能帮助初学者快速掌握这 2 款目前最热门的 AI 东西,感兴趣的小伙伴可以戳的链接了解详情:夏花生的《零基础 AI 绘画录播课》。

给TA打赏
共{{data.count}}人
人已打赏
应用

5000字 AIGC 爆肝测评!最新最全 AI 资讯及实用测评合集

2024-4-17 7:41:19

应用

中国首个音乐SOTA模型「天工音乐大模型」今日公测

2024-4-17 11:21:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索