AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

引言 随着 AI 浪潮的爆发,各种赋能于绘画、UI 及 3D 美术领域的设想东西都发生了革新,提升了设想效。本期作者将介绍从上百个 AI 设想东西及插件中筛选出好用的提效设想东西,这些对 XR 设想师及产品经理可以快速上手且高效赋能的好东西,希望能帮助到大家日常的进修和工作。 更多XR干货:一、文案生成 1. ChatGPT 业界知名的公司 Open AI 出品的 AI 聊天机器人程序,ChatGPT 是一个由 OpenAI 开发的自然语言处理模型,这个模型被设想用于各种自然语言处理任务,如聊天对话、问答、文本生成

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

引言

随着 AI 浪潮的爆发,各种赋能于绘画、UI 及 3D 美术领域的设想东西都发生了革新,提升了设想效。本期作者将介绍从上百个 AI 设想东西及插件中筛选出好用的提效设想东西,这些对 XR 设想师及产品经理可以快速上手且高效赋能的好东西,希望能帮助到大家日常的进修和工作。

更多XR干货:

一、文案生成

1. ChatGPT

业界知名的公司 Open AI 出品的 AI 聊天机器人程序,ChatGPT 是一个由 OpenAI 开发的自然语言处理模型,这个模型被设想用于各种自然语言处理任务,如聊天对话、问答、文本生成和信息检索。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

对 XR 设想师来说,我们可利用 ChatGPT 辅助我们进行以下设想赋能:

创意灵感和概念开发:ChatGPT 可以帮助 XR 设想师生成新的 XR 项目的创意灵感和概念。提供一些关于项目目标、受众、主题等方面的信息,然后从其生成的想法中获得灵感。
用户界面设想:ChatGPT 可以提供有关 XR 用户界面设想的建议和指南。你可以询问有关交互设想、界面布局、颜色方案等方面的建议,以改进用户感受。
3D 模型和虚构环境设想:ChatGPT 可以帮助你创建虚构场景、建筑和 3D 模型的初步设想。你可以提供有关场景、物体或建筑的要求,并根据 ChatGPT 的建议来设想虚构环境。
用户测试和反馈分析:ChatGPT 可以生成问题,来帮助你准备用户测试的问题。它还可以协助分析用户反馈,从中提取关键见解,以改进 XR 应用的设想。
交互式演示和原型:ChatGPT 可以生成原型演示、交互式演示或虚构演练的想法,帮助你展示项目概念和设想。
制定 XR 策略:你可以与 ChatGPT 交流,讨论 XR 策略、市场定位、目标受众以及与 XR 技术相关的趋势和挑战。

举个例子

“你是一位某大厂的资深 UX 设想师,拥有丰富 XR(AR,VR,MR)领域的 UX/UI 设想经验(身份),目前你正在为某款 MR 硬件头显软件系统进行 UX 设想(背景或叫现状),你想从 0 到 1 制定该 MR 系统的设想方案,请给我制定一个可以执行的设想流程及设想方法(目标)”

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

关于 UXUI 设想师如何利用 ChatGpt 来赋能进行设想赋能,作者之前写过一篇文章,欢迎感兴趣的同学点击进行进修:

二、图象制作

1. Midjourney

你有没有想象过你可以把你输入的文本变成图片?Midjourney 是目前市场最火的,设想师运用主流绘画东西,特点是生成图片不局限于二次元人物,且能够生成照片级精细的图。

在 XR 设想领域主要可应用于虚构人物、虚构场景及 3D 模型物体的原画绘制。

举个例子,绘制一个赛博朋克风格的人物角色

“art toy,designer toy,mockup IP,a lovely girl in a jacket and skirt,detailed facial details,cyberpunk,3D render,octane render,c4d,zbrush,3d max,artstation,best quality,ultradetailed,studio lightning”

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

再来举一个绘制 3D 模型的例子,Low poly 风格的飞机

“low poly,airplane”

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

针对 Midjourney 的教程,之前作者也写过相关的快速入门教程。欢迎感兴趣的同学进行点击查看:

2. Stable Diffustion

号称目前最强的 AI 绘画东西,Stable Diffustion 是个开源的项目,所以目前市面上很多 AI 东西用的都是它的代码,说是 AI 界的老大哥也不为过!缺点就是需要繁杂的配置。

应用场景与 Midjourney 一样,同样也可应用于虚构人物、虚构场景及 3D 模型物体的原画绘制。

大家可以在优设搜索Stable Diffusion 进修相关教程。

3. Firefly Adobe

Adobe 推出了名为 Adobe Firefly 的 AI 文生图东西,仅通过文字提示就可以生成 AI 图象。目前其中文生图模型 Firefly Image 2 已经在 Adobe Firefly 官网上线,目前可以免费感受,其图象生成质量相比之前的 Image 1 有了极大提升。

进入官网登陆后,可以看到有很多 AI 功能如文生图、创意填充、文字效果等,还有即将推出的创建 3D 并生成图象功能,可以期待一下。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

Firefly 的文生图功能已经将图片的大小尺寸、效果和颜色基调做了一些封装,供用户快速选择,相较于 Midjourney 和 Stable Diffusion 来说更加容易上手使用。同时还有提示词建议,帮助你写出更准确可控的提示词。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

这里也有 Adobe 官方出的关于如何写好提示词的教程文档:https://helpx.adobe.com/cn/firefly/using/tips-and-tricks.html

对 XR 设想师来说也是一个不错的选择东西。

更多教程:

三、原型创作

1. Spline

Spline 是一款轻量化 3D 在线协作设想东西,集建模,材质,交互,动画,代码交付于一身。是一款非常适合 XR 领域设想师用于空间 UI、模型及动效的软件。今年 Spline 也上架了其 AI 功能,能够借助 prompt 来辅助生成 3D 的素材,真正可以编辑的矢量素材,这使得过去几十年从来都没有简单过的 3D 建模变的更加容易上手,现在甚至可以实时协作,让同事和你一同完成。目前 Spline AI 已经支持物理规则和随机性,能够辅助生成动画,目前正在内测阶段,快来尝试吧~

当视频在手机上无法加载,可前往PC查看。

对 XR 设想师来说,可以用该东西制作 2D UI 及 3D 模型界面等。同时也有丰富的社区资源供设想师快速调用。

下图为某国外设想师利用 Spline 搭建了一个 Apple Vision Pro 的主页界面 Demo,支持相关交互的响应动效,同时还支持多个格式的导出功能。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

Demo 链接直达:https://app.spline.design/community/file

如果你想系统性进修 Spline 东西,作者为你推荐几个好用的进修文档及教程:

进修文档:https://cn.spline.design/learning-community

进修教程:https://space.bilibili.com/2033738697/channel/collectiondetail?sid=394913

2. Bezel

与 Spline 类似,Bezel 也是一款基于浏览器的 3D 建模东西,拖拉拽即可操作。易上手,支持多种模型和场景,试用版免费,适合元宇宙赛道的产品经理和没有建模经验的设想师。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

不过相较 Spline, Bezi 的开源社区资源没有特别丰富,但我们依旧可以从它的社区资源中看到可以应用在 XR 领域的设想可能性。3D 模型场景,手势交互,3D UI 界面都可以通过该东西进行搭建。同时可与 figma 素材无缝衔接,也是大厂 XR 设想师使用的主要生产东西之一。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

欢迎感兴趣的同学关注其官方的进修教程文档:https://bezi.com/hq/docs

3. Figma

作为 UX/UI 设想师使用的主要的矢量图形编辑器及原型东西之一,figma 同样适用于 XR 领域的设想同学。尤其是 Apple Vision Pro 相关项目从业设想师或产品经理,强烈优先使用 Figma。

AVP 拥有 Figma 较全的设想组件库及模版,更方便设想师及产品经理快速使用。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

Figma 链接直达:https://www.figma.com/file/U8b05floXkrzcTxeYbzOSf/Apple-Design-Resources

4. Unity

Unity 是一款实时 3D 互动内容创作原型及开发平台,目前主要可用于游戏及 XR 应用的开发。对设想师来说 Unity 的上手门槛略高,因为需要一些 Coding 功底来进行一些基础交互及动效的实现。但 Unity 东西能帮助设想师了解更多底层实现的逻辑,从而输出更加实际可落地的方案。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

但是为了降低上手和进修门槛,初学者可以先从 unity 中 XR Interaction Toolkit 入手;XR Interaction Toolkit(简称 XRI)是一款基于组件的上层互动系统,可用于创作 VR 和 AR 感受。它提供了一种常见的互动框架,并简化了跨平台创作。

若想深入了解更新,欢迎查看 XRI 2.3 的更新说明文档(What’s new in version 2.3.0 | XR Interaction Toolkit | 2.3.2 (unity3d.com)),或探索附带的样例项目(项目概览 – xr-interaction-toolkit-examples – GitCode)。

随着 ChatGPT 的爆发,也有开发者自研了可以用于 unity 开发提效的插件,推荐其中一个 unity+ChatGPT 提效插件:

keijiro/AICommand:https://github.com/keijiro/AICommand

可以助力你提升 coding 效率。该插件的使用方法也很简单,基于 ChatGPT 只需与其进行文本对话,即可生成对应代码工程。

当然类似的基于 unity 的 AI 插件很多,作者后续慢慢为大家介绍。

四、3D 虚构空间/全景图片制作

1. Skybox Lab

Skybox Lab 也是一款类似于 Midjourney 可用于文生图(text-to-image)的 AI 绘图东西,不同的是它可以,Skybox Lab 生成的是 360 度视角的全景图片。如果说传统文生图的最终产物还只能被局限在 2D 的平面之中,那么 Skybox Lab 就让我们离 AI 生成“3D 空间”更近了一步。这一产品可以被用来便捷地生成天空盒(Skybox)材质。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

与 Midjourney 等产品类似,Skybox Lab 允许用户通过文字 prompt 指示图片生成的方向,并可生成近 20 种风格的全景图片。

详细介绍:

2. Versy

Versy 是一款可用于文本生成虚构空间(Text-to-Space)的 AI 东西,可以通过文本提示词创建可交互式的 3D 虚构空间。该东西大大降低了内容的创作门槛,让不会建模的小白设想师也可以通过简单的提示词来创建交互式虚构感受。

AI浪潮下,XR设想师一定要掌握的设想东西(上篇)

目前 Versy 正处于内测阶段,需要审核才可使用,欢迎大家申请尝试。

3. Canvas

Canvas 是由英伟达出品的一款免费的可以生成真实图象的 AI 艺术东西,可以将粗略的块状草图转变为逼真的风景图象,支持普通平面图片及 360°全景图片。你只需要给出粗略的形状,就可以让你使用不同颜色的笔触来描绘自然环境的整体形态,以代表不同的地貌,如丘陵、山脉、河流和海洋。

4. 360 全景在线感受东西查看器

再为大家推荐一款生成 360 全景感受的查看器,基于 AI 绘图东西生成的图片,放到这个在线东西中,就可以为你生成 360 全景感受,完全免费、在线观看 360 全景图象。有了它,你不仅可以创建一个 URL 与他人分享你的 360 度全景,也可以创建一个嵌入代码,允许你嵌入这个全景查看器在你的网站页面。高性能,不需要插件。

360 全景在线感受东西查看器:https://renderstuff.com/tools/360-panorama-web-viewer/

总结

本篇文章大家介绍了一些可用于生成文案、图象绘制、原型创作及全景环境空间创作东西,主要有以下东西可供大家尝试:

文案生成

ChatGPT:https://chat.openai.com

图象制作

Midjourney:https://www.midjourney.com/explore
Stable Diffusion:https://beta.dreamstudio.ai/
Firefly adobe:https://firefly.adobe.com/generate/images#

原型创作

Spline:https://spline.design/ai
Bezel:https://bezel.it
Figma:https://www.figma.com/
Unity: https://unity.com

3D 虚构空间/全景图片制作

Skybox Lab:https://skybox.blockadelabs.com/
Versy:https://www.versy.ai/
Canvas:https://www.nvidia.com/en-us/studio/canvas/
360 全景在线感受东西查看器:https://renderstuff.com/tools/360-panorama-web-viewer/

给TA打赏
共{{data.count}}人
人已打赏
应用

鉴于LLaMA却改张量名,李开复公司大模型开源行为引争议,官方回应来了

2023-11-14 17:15:00

应用

三秒4张图!让 Stable Diffusion 出图速率暴增的新一代生成模型LCM

2023-11-15 8:17:12

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索