一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

2 月 18 号,昆仑万维开源了面向 AI 短剧创作的大模型 SkyReels-V1、中国首个 SOTA 级别基于视频基座模型的表情动作可控算法 SkyReels-A1,出于好奇,我们对这个模型目前的使用情况进行了搜索,从而发现了在海外的视频生成平台 SkyReels,在进行体验之后,我们惊讶于这个平台在 AI 生视频垂直领域的技术能力。 它以一种更加落地和成熟的姿态出现在我们面前。 随着短剧潮的到来,使得短剧拍摄成本越来越高。

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

2 月 18 号,昆仑万维开源了面向 AI 短剧创作的大模型 SkyReels-V1、中国首个 SOTA 级别基于视频基座模型的表情动作可控算法 SkyReels-A1,出于好奇,我们对这个模型目前的使用情况进行了搜索,从而发现了在海外的视频生成平台 SkyReels,在进行体验之后,我们惊讶于这个平台在 AI 生视频垂直领域的技术能力。它以一种更加落地和成熟的姿态出现在我们面前。

随着短剧潮的到来,使得短剧拍摄成本越来越高。因此,借助 AI 工具快速生成短剧无疑是短剧拍摄者一个很好的尝试。

更多AI视频工具:

PixVerse V4正式上线!5秒出一个AI视频还自带AI音效

就在刚刚,PixVerse 的 v4 版本上线了。

阅读文章 >

一、产品介绍

虽然 SkyReels 的发行商昆仑万维是一家国内公司,但 SkyReels 主打海外市场。界面目前是全英文,定价也是基于美元进行的。

官网:https://www.skyreels.ai/home

从产品首页可以看到,右侧主要区域展示了产品的两个核心功能,AI 视频与 AI 短剧,在左侧的侧边栏还可以看到对口型,生图等主要功能,下面让我们完整看一下目前产品支持的全部 AI 工具。

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

点击侧边栏的 “All tools” 可以进入此页面,可以看到产品支持小说转剧本,生图,对口型,文本转语音,文本生成音乐,AI 音效,视频编辑,视频生成和故事板 9 个功能

从这里可以看出 SkyReals 几乎将短剧制作的所有工具都集成在了自己的平台里,打造出了一个一站式的 AI 短剧制作平台。

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

二、参考定价

作为一个主打海外市场的软件,定价采用美元进行结算,包年情况下基础套餐仅需 7.9 美元/月。虽然与其他国内 AI 视频工具相比价格偏高,但与 20 美元/月的 Sora 相比,其价格还是极具竞争力的。

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

SkyReels 会对新用户连续三日赠送免费积分,每日 50 积分。可以用来生成两小节 5s 的视频片段,允许用户浅试这个工具。

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

三、AI 短剧制作

接下来我们将为大家演示如何用 SkyReels 生成一个 AI 短剧。我们先从故事大纲开始。

1. 故事大纲

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

一个短剧一定是从一个大纲开始。在 SkyReels 我们可以上传或者直接输入想要生成的剧本,这里官方提供了一些剧本进行格式和内容方面的参考。我们的短剧直接借用官方的模版。

故事大纲如下:

场景设置:

一座在岁月重压下摇摇欲坠的破旧庄园,斑驳的墙体见证着时光流逝。它静候着重生,而破解其闹鬼遗产的重任,落在建筑师曼努埃尔的肩上——这位温文尔雅的建造者掌握着某种神秘的诀窍。

社会环境:

在爱丁堡错综复杂的上流社会迷宫中,这座被视作诅咒之地的庄园,既令人畏惧又暗藏机遇。那些自诩勇敢或被视为愚莽之人,总在阴影中蠢蠢欲动。

人物设定:

「曼努埃尔」坚定而富有趣味性的建筑师,正与整个社会的蔑视抗争。他大胆宣称目睹过庄园幽灵——悲剧女主角埃琳娜的鬼魂,这使他在精英阶层中沦为笑柄。

「吉玛」神秘的历史学者,兼具学术造诣与空灵气质。时常出没于历史尘埃堆积的阴暗角落,她的研究轨迹与庄园的黑暗核心产生致命交集。

「马特」表面持怀疑态度的迷人记者,实则追逐着可能成就或毁灭其职业生涯的惊天报道。他的摄像机镜头始终对准着这场风波。

核心冲突与转折:

冲突 1

曼努埃尔意外寻获的尘封日记颠覆历史认知——埃琳娜实遭谋杀,而非传统认知中的自杀。当他的发现遭人嗤笑时,吉玛携相同结论强势介入。

转折 1

正当曼努埃尔与吉玛即将锁定日记藏匿点时,关键证据离奇自燃。曼努埃尔被推上嫌疑席,汹涌的舆论浪潮将他淹没在耻辱漩涡中。

冲突 2

吉玛精心策划的音乐会上,哀婉旋律竟化为对曼努埃尔的泣血控诉。当镇民们的嘲笑声达到顶点时,更为黑暗的真相正从深渊中浮现。

转折 2

马特曝光的神秘遗嘱犹如定时炸弹——埃琳娜的巨额遗产竟与曼努埃尔被掩埋的血脉产生勾连。在漫天非议中,这成为他沉默的救赎凭证。

冲突 3

曼努埃尔直面企图通过庄园交易牟利的屋主,揭穿其精心编织的阴谋网络。腐朽横梁震颤的宅邸中,百年悬案迎来最终审判时刻。

2. 生成脚本

在故事的大纲完成后要生成实际的剧本可以进行实际拍摄,就需要将其划分场景,区分不同脚本。

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

1. 确定角色

下面我们需要确定短片的主角团,这里 SkyReels 会根据剧本自动生成适当角色。比如这里我们自己上传一张照片生成一个主角

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

剩余两个都是默认生成的角色,并未进行修改,在这个界面可以更改角色嗓音,形象或者添加删除角色

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

2. 故事板生成

下面产品基于我们之前的设置,讲剧本拆分为两个场景,生成了故事板

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

我们可以生成某个短脚本的视频,每个视频需要花费 25 积分

接下来我们看一下生成效果

总结

我们可以看到视频在角色一致性方面有很好的表现,角色的表情相比其他 AI 视频生成平台而言也更为合理。虽然还是有一些恐怖谷效应,但考虑到 “208” 们的演技,就会觉得 AI 短剧极具性价比。

更重要的是,SkyReels 将多种 AI 工具合理整合,依据用户的使用路径,串联成了一个专为短视频制作所设计的产品。由于当前的 AI 视频生成方面在角色一致性和人物生成方面较差,因此之前的 AI 短剧往往大量以山海经,西游记等非人生物作为主角,尽量减少人物的出场以规避这一缺陷。而 SkyReels 不同于大多数公司钻研的通用平台,而是针对短视频场景整合了功能,定向优化了模型在角色表情与角色一致性方面的表现,同时针对目标用户优化了整体的使用流程,使其在短剧赛道可以说一枝独秀。

虽然目前 SkyReels 的表现并不能说可以完全替代真人演员,但它目前看来,可能是专业模型开发应用的先驱,为更多的专业模型开发和设计方法做出了不错的示范。

最后,我们会觉得在通用大模型还无法覆盖所有行业的情况下,像类似 SkyReel 这种工具,仅针对某一非常垂直领域的行业进行全流程覆盖并尽量做到最好,这似乎就是当前的版本答案。你觉得呢?

欢迎关注我们的微信公众号:「TechUX 试验田」

一个人就能拍短剧!国产AI视频神器SkyReels太强了(附教程)

相关资讯

昆仑万维开源国内首个面向 AI 短剧创作的视频生成模型 SkyReels-V1

昆仑万维官方介绍称,SkyReels-V1 针对表演细节做了打标,还对情绪、场景、表演诉求等进行处理,利用“千万级别、高质量”的好莱坞级别数据进行训练微调。

国内首个短剧创作大模型开源了,一个人就能拍短剧,单卡80秒出大片

AIxiv专栏是AI在线发布学术、技术内容的栏目。 过去数年,AI在线AIxiv专栏接收报道了2000多篇内容,覆盖全球各大高校与企业的顶级实验室,有效促进了学术交流与传播。 如果您有优秀的工作想要分享,欢迎投稿或者联系报道。

昆仑万维推出全球首款 AI 短剧平台 SkyReels,「一人一剧」时代来临

8月19日,昆仑万维发布全球首个集成视频大模型与3D大模型的AI短剧平台SkyReels。SkyReels平台集剧本生成、角色定制、分镜、剧情、对白/BGM及影片合成于一体,让创作者一键成剧,轻松制作高质量AI视频。这是一个2分半时长的短剧作品。「 我们应该放下固化和抵抗的思维,拥抱这个碎片化信息时代。」 2023 年 12 月初,导演黄建新在北京电影学院北影大讲堂上感慨,比起电影,竖屏短剧兴起才真正形成了全球输出。 几分钟到十几分钟的单集时长、强烈的娱乐性和快节奏剧情,频繁踩中用户「爽点」,短短三年(到 2023