Pika推出音画同步新功效一天后,翻车视频来了

Pika 的音效新功效「Sound Effects」,有大大的欣喜,也有小小的「惊吓」。Sora 的出现让文生视频模型及应用火了起来。不过,此类模型生成的视频大多数都是无声的。因此,人们开始探索为 AI 生成的视频「配音」。这一领域的代表有 AI 语音克隆首创公司 ElevenLab,此前该公司为 Sora 的演示视频生成配音,音效与视频画面几乎没有违和感。现在,曾经引爆了 AI 圈的视频生成首创公司 Pika 终于有了新动作 —— 推出 Sound Effects,可以为 Pika 生成的视频无缝加音效了。Pik

Pika 的音效新功效「Sound Effects」,有大大的欣喜,也有小小的「惊吓」。

Sora 的出现让文生视频模型及应用火了起来。不过,此类模型生成的视频大多数都是无声的。因此,人们开始探索为 AI 生成的视频「配音」。

这一领域的代表有 AI 语音克隆首创公司 ElevenLab,此前该公司为 Sora 的演示视频生成配音,音效与视频画面几乎没有违和感。Pika推出音画同步新功效一天后,翻车视频来了

现在,曾经引爆了 AI 圈的视频生成首创公司 Pika 终于有了新动作 —— 推出 Sound Effects,可以为 Pika 生成的视频无缝加音效了。

Pika 生成音效的方式有两种:一种是给出 prompt,描写你想要听到的声响;一种是直接根据视频内容自动生成声响。

Pika推出音画同步新功效一天后,翻车视频来了

至于音效与视频内容的立室效果如何?我们先一睹为快。Pika推出音画同步新功效一天后,翻车视频来了

不过,Pika 的 Sound Effects 功效只对超级合作者(Super Collaborator)和 Pro 用户凋谢测试。普通用户只能再等等了。

Pika推出音画同步新功效一天后,翻车视频来了

目前,Pika 民间放出了许多 Demo。Pika推出音画同步新功效一天后,翻车视频来了

感受地址:https://pika.art/

例如滋滋啦啦的烤肉声响,还能隐约看到烤肉时冒出的烟雾,高清的画面配上逼真的音效,让人顿时感觉焦酥,鲜咸,麻辣涌入舌尖:Pika推出音画同步新功效一天后,翻车视频来了

如果你想换个声响,也没问题,点击视频下方的 Redo 按钮,在出现的对话框中,输入你想要的音频描写就可以了:

Pika推出音画同步新功效一天后,翻车视频来了

小田鸡趴在荷叶上呱呱的叫,如果你仔细聆听,还能听见远处的蝉鸣声(不过生成的视频看起来缺陷很明显,例如荷叶是红色的,田鸡腹部有腿):Pika推出音画同步新功效一天后,翻车视频来了烟花在空中绽开,绽开瞬间发出响亮的爆竹声,点卡的很准: Pika推出音画同步新功效一天后,翻车视频来了

以上只是民间示例,生成的音频效果到底如何,我们还得看看第一波感受用户的真实感受。

第一批试用感受出炉:有欣喜,也有翻车

在 Pika 推出 Sound Effects 功效之后,第一批试用用户已经晒出了他们加上音效的 AI 视频。

比如用户 @TomLikesRobots 生成的雨中人物视频,他表示音效似乎与视频非常立室,增添了很多氛围感。

Pika推出音画同步新功效一天后,翻车视频来了Pika推出音画同步新功效一天后,翻车视频来了比如用户 @RetropunkAI 生成的兔子大片,生成的音效非常有趣。 Pika推出音画同步新功效一天后,翻车视频来了

比如用户 @AiFreak_tool,为生成的视频添加了不同的音效。

Pika推出音画同步新功效一天后,翻车视频来了Pika推出音画同步新功效一天后,翻车视频来了

当然,Sound Effects 生成的音效并不总是能够契合视频主题和画面,比如下面这个示例。

Pika推出音画同步新功效一天后,翻车视频来了Pika推出音画同步新功效一天后,翻车视频来了

                            图源:@TomLikesRobots

还有用户 @DavidmComfort,他表示生成音效有时会驴头不对马嘴,但毕竟 beta 阶段,情有可原。

Pika推出音画同步新功效一天后,翻车视频来了Pika推出音画同步新功效一天后,翻车视频来了

虽然偶有翻车,但更多人还是期待 Pika 可以赶紧凋谢 API。

Pika推出音画同步新功效一天后,翻车视频来了

给TA打赏
共{{data.count}}人
人已打赏
应用

零一万物自研全导航图向量数据库,横扫威信榜单6项第一

2024-3-11 14:37:00

应用

前端不存在了?盲测64%的人更喜欢GPT-4V的计划,杨笛一等团队新作

2024-3-11 15:03:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索