机器之能报道
编纂：SIA
最喜欢的视频里有前男友？现在，你可以轻松将他删除了。
事实再次证明，AI 生成视频技术的发展速度令人瞠目。
过去几个月，我们一直挣扎在 AI 生成的威尔·史密斯吃意大利面的尴尬场景里，以至于一段再正常不过的吃面场景被视为视频生成领域的“图灵尝试”。今天，google又研发出全新的时空扩散模型 Lumiere，将 AI 视频生成程度推向新高度。
法语里， Lumiere 意思是启蒙者。Lumiere 几乎集齐了常见视频生成和编纂性能，也是迄今为止我们所见过的最先进的视频生成器。
Lumiere 会根据用户自然语言提醒，创造出十分逼真（高质量超现实主义）视频，时间长达五秒。
模型的图片到视频性能可以根据用户提醒，让停止的图象动起来。
和当下火热的 Runaway 动态画笔性能十分相似， Lumiere 的动画性能还能让选定的图象个人运动起来，其他个人仍然保持停止。
根据指定图片气概，Lumiere 可以克隆出一系列类似气概主题的视频。比如，结合输出散发荧光的菌类照片和文本提醒（比如奔跑的马），模型就能生成一系列带有荧光动机的动物视频。
在修理性能中，用户可根据需要框定视频中的任何个人、输出文本提醒，模型就可以把该个人替换成你要的实质——无论是乐高积木、鲜花还是其他怪异的实质……. 自此，你可以简单地划掉不喜欢的图象实质（比如前男友），让模型为你弥补指定实质，十分自然。
修理性能令人难以置信，剜掉一个人实质，零碎会为你自动弥补。
文本到视频生成器的关键挑战在于合成出真实、多样化且运动连贯的视频动机。为此，google研究人员在 Lumiere 中引入了一种“时空 U-Net 架构”，一次构建了整个视频长度，而不是像以前的模型那样——先生成一个开始帧和一个结束帧，然后尝试猜测中间会发生了什么，这一传统方法的局限性在于很难实现全局的时间一致性。
时空 U-Net 架构
尝试结果说明了一切，这是 AI 生成视频领域的新技术，坦率地说，动机惊人。模型可以轻松创建、编纂广泛的视频实质，包括图象到视频、视频气概生成等。
文本到视频的生成
图片到视频的生成
气概化的视频生成
修理性能，对于每个输出视频(每帧的左上角)，可以根据提醒自动修理遮罩区域
框定个人，零碎即可让这个人动画起来，其他个人仍然保持停止。这个性能十分类似Runaway的动态画笔性能。
视频气概的一致化
目前，Lumiere 只是一个研究项目，还不是产品——这也让google免于版权、错误信息、安全、仇恨言论、隐私和其他各种政策压力，保全零碎的输出程度。这是一次巨大的技术飞跃，如果大家也能体验 Lumiere，看看它的动机到底有多好，将是一件很有趣的事情。
欣赏更多作品，请移步至：https://lumiere-video.github.io/