机器之能报道
编辑:Sia
有人预测 2024 将是视频之年,其实今年已经看出端倪。
年终将至,图象、视频生成战场仍然高潮迭起。前阵子上线的 Pika Labs 1.0 炸了一波,Meta 又推出一个免费的 AI 图象生成器,口碑不错。
google DeepMind 最新文生图模型 Imagen 2 毫无悬念地登上了今天的头条 。如果有内测资格,你会发现google搜索居然可以直接生图。
进入google实验室,测试中的google搜索可以直接生图了。
与此同时,之前热度不减、但一直处在内测阶段的 AI 设计东西 Krea AI Beta 版也终于开放,现在可以免费感受(部分功效)。
与一般文生图东西稍有不同的是,Krea AI 主打一个及时性。它是一个创意东西包,除了当红的及时生成东西(Real-time Generation )、增强东西( upscale&enhance ),还有几个特定功效的小东西。
背靠 2,500 多个 AI 模型,Krea AI 可以应对不同艺术风格品味的需求。尤其是及时生成东西,凭借惊人的生成速度和对画面成效的精准控制,备受瞩目。及时生成东西提供四种生成方式(界面左边):文本到图片、图生图、屏幕(比如截屏、壁纸)生图、直接拍摄生图。还可以选择几种图片成效(界面右边),比如没有指定风格、插图、电影、流光等。
Krea AI的网页产品界面
中间是一个看板,也是感受何谓「及时」的地方—— 输出文本提醒时,每敲一个单词、或者删除一个单词,图片实质都会立刻随之变化。比如,当我们输出「一个叫尼尔斯的男孩」时,画面是这样的:
输完 「一个叫尼尔斯的男孩儿,骑着一只飞翔的大鹅」时,画面变为了这样:
当我们继续添加「带条围巾」时,画面又变了:
与「文生图」不同,「图生图」对作品成效控制力更好。因为除了文本,你还可以借助一些简单的线条、色块东西,涂鸦几笔,勾勒作品的大致轮廓,供机器加强「理解」。我们先用东西画了个非常简单的猪头:
然后,输出文本提醒「一头微笑的猪」,结果就出来了:
这是网友的作品,是不是很漂亮:
一位网友仅用四分钟,就将自己孩子一样的涂鸦变为了一幅逼真的 AI 肖像:
来自 x平台网友 titus
这是官方给到的展示:
正如前文所述,除了文本、涂鸦,你还可以通过捕获设备屏幕的实质(比如网页、视频)或者用摄像头获取图片来源,然后输出文本提醒,生成新的图象作品。
及时生成图片,难免模糊、分辨率低,你还想让作品细节更完美,这时, Upscale & Enhance 就派上用场了—— AI 能以更高分辨率、甚至想象力重新创建视觉实质。因为是付费服务,我们选用了一些官方和网友的感受案例:
你可以调节 AI 发挥自己创造力的程度,如果很高的话,原图被修改的幅度也会很大。比如,这个作品里,美女的脸都被换了。
来自x平台 Dona Mara
这也是 AI 生成东西和传统数学算法类润色东西的主要区别,前者会用自己的想象力替换像素实质,而不是刻板遵守。
除了速度和成效,任何新设计东西要想具有生命力,还必须具有良好的兼容性——能与常见的设计东西无缝对接,比如 Photoshop、Illustrator、Figma、Blender、Sketchfab 等。Krea 也是如此。
另外,Krea AI 还有一个引人注目的功效——能与 iPad 无缝连接。看,这个孩子寥寥数笔就创造了蜘蛛侠:
另外,Krea AI 还有两个特定功效的小东西,但都不提供及时生图感受。输出要求后,需要等一定时间才能看到结果。一个是 AI pattern ,输出文本提醒,再选择你要的图案,即可以生成带有该图案的图象。
图片来自 https://ratemyaitools.com/author/rakeshai/
图片来自https://ratemyaitools.com/author/rakeshai/另一个是 Logo Illustration 。和 pattern 功效类似,只不过图案变为了这里的 Logo,专门生成 Logo 形状相关图象。图片来自https://ratemyaitools.com/author/rakeshai/图片来自https://ratemyaitools.com/author/rakeshai/
写到这里,还没卷完。其实,在 Krea AI 推出增强东西之前,他的竞争对手 Magnific AI 已经发布了类似功效:
x平台网友Dave Villalva,用Magnific AI重制《星球大战》预告片
除了图片,AI 的增强能力还被扩展到视频上。
Upscale-A-Vide 是南洋理工大学 S-Lab 实验室开发的一个用于视频超分辨率的时间一致性扩散模型,结合低分辨率视频和文本提醒,能将低分辨率视频转换为高分辨率。
是啊,谁不想看到童年最爱卡通片的 4k 版本?
及时生图方面,不想 Krea AI 专美于前, Leonardo AI 前几天也宣布推出及时绘图东西「及时画布」。
Freepik 的及时草图到图象生成器「Pikaso」也上线了,让涂鸦立刻变为画作:
更疯狂的,Decohere AI 也预告了他们新的及时 AI 视频生成平台。
有兴趣尝试的网友,这里是一些传送门
https://www.krea.ai/home
https://www.freepik.com/pikaso
https://leonardo.ai/
https://magnific.ai/