人人好,这里是和你们一起探索 AI 的花生~
之前为人人推荐过一个 AI 神器 Meshy,可以通过文本生成一个完整的 3D 模型,今天要说的 Genie 也是一个 3D 模型生成东西,但生成的模型更精致真切,还可以修改表面材质。Genie 目前正免费开放测试,我们一起看看来如何运用~
相关推荐:
一、Genie 简介
Genie 是一个可以通过文本生成 3D 模型的 AI 神器,由 Luma AI 推出,一经发布就受到了很多关注,因为它的 3D 模型处理速度极快,可以生成多种风格,精度上比也目前其他东西都更好,还支持调节模型的样式和材质,先来感受一下它的生成成果:
模型滥觞: “chibi naruto” created by @fishball#6786 (lumalabs.ai)
模型滥觞: “a cute plushie chibi godzilla” created by @mmeyz (lumalabs.ai)
模型滥觞 : “Challah bread” created by @matheusrl (lumalabs.ai)
模型滥觞: “Lady Gaga, modern art sculpture by modigliani melted face, bronze bust”=
模型滥觞: “goldfish with giant lips” created by @ravewater#1076 (lumalabs.ai)
看完之后人人有没有和我一样被小小地震撼了一下,这些完全根据文本生成的 3D 模型不仅在精度上有了明显的提升,复杂的细节被清晰地呈现了出来,不再糊成一团,甚至表面的材质也非常真切,比如玩偶的毛绒质感、面包烤焦的表皮,以及雕塑做旧的质感等。本期文章封面的汉堡包也是由 Genie 生成的,模型的整体精度是不是很高?
生成性 AI 技术越来越强大,给图像生成,图像处理、3D 模型生成、视频生成等领域带来了工作方式的革新。如果你想用 AI 生成高质量的图像,提高工作效率,欢迎了解我最新制作的 《AI 绘画入门完全指南》 ,我会带你系统地了解目前最热门的两款 AI 绘画东西 Midjourney 和 Stable Diffusion WebUI,并分享超多干货技巧和 AI 效率神器,让你在 AI 学习上快人一步。
二、Genie 运用方法
Genie 邀请链接: https://lumalabs.ai/genie
Genie 的运用方法也非常简单。进入 Genie 的 Discord 社区后,选择 LUMA 版块中任意一个 Genie 频道,在文本框中输入 /genie 调出 Prompt 输入框,用英文描述你想要的物体,比如“An orange Winter Jacket(一件橙色的冬季夹克)”,再加风格(disney render 或 voxel style)和形式(full body 或 T-pose),然后按 Enter 键发送出去。
一般只需要几秒钟的就能得到一个 四宫格的 3D 模型动图,这个时候的模型是比较模糊,因为它是一个预览图,我们可以选择其中成果较好的一个,点击下方对应的 refine 1/2/3/4 按钮,模型就会转到左侧的 #genie-refine 精修频道。
进入 refine(精修)阶段后,模型的生成时间会更长一些,属于自己的模型任务会以橙色高亮的形式显示,并且有处理进度条,等待它完成即可。任务完成后会有一个链接,点击后会跳转至一个新的页面。
在新页面中我们可以用鼠标 360°检查模型细节,并通过右上角的材质球调节模型的粗糙度、金属光泽度和色调,来获取更真切的成果。
模型编辑地址: “An orange Winter Jacket,photorealistic, 4K, HD” =
点击右下角的「下载」按钮可以将 3D 模型保存为 glb 文件,然后在 Blender、C4D 或 Unity 中进行进一步处理。已经有人尝试将 Genie 作为工作流的一部分了,网友@ neonglitch86 先用 Genie 生成了各种人物和道具,再用 Adobe Mixamo 为人物绑定动作,一起放入 Blender 中,就构成了一个非常有创意的迷你场景,这比传统的 3D 建模要高效不小。
当视频在手机上无法加载,可前往PC检查。
Discord 社区的 #genie-refine 频道内有很多高质量的模型案例,人人感兴趣的话可以自己去尝试一下。Genie 最擅长生成单个的物体,对于多个物体组成的对象、场景和背景、透明物体和带有文本的对象的处理成果不太好,人人注意选择合适的对象。
三、Luma AI
Luma AI 网站直达: https://lumalabs.ai
Luma AI 本身也是一个非常值得关注的 3D 生成东西,它基于 NeRF 神经辐射场技术,可以通过视频来重建 3D 场景。你只需要有一台手持拍摄设备,按要求对物体进行 360°旋转拍摄,Luma AI 就能对视频进行 3D 渲染,这种方式对设备和技术的要求都很低,让 3D 场景重建变得前所未有的方便。
当视频在手机上无法加载,可前往PC检查。
Luma AI 目前有网页版和苹果手机 APP 两种运用方式,运用方式见下方链接:
网页版运用入口: Luma AI – Fields Dashboard (lumalabs.ai)
手机 APP 运用教程: Getting Started with Luma AI: Guided Capture Mode – YouTube
网页版进入后点击右上角的 Create,上传你准备好的视频提交即可,视频拍摄时需要围绕物体旋转三圈,分别为平视,略微低视角向上和略微高视角向下。手机版需要先去苹果应用商店下载 Luma AI,然后按提示操作。 下图是网友用 Luma AI 重建的一个地铁内部场景,成果非常惊人,感兴趣的话人人也可以尝试一下。
当视频在手机上无法加载,可前往PC检查。