UI

AI 解放碳基生物双手，甚至能让你的手机自己玩自己！ 你没听错 —— 这其实就是移动任务自动化。 在 AI 飞速发展下，这逐渐成为一个新兴的热门研究领域。

人工智能的发展速度可能超乎你的想象。自GPT-4将多模态技术引入公众视野以来，多模态大模型进入快速发展阶段，逐渐从单纯的模型研发转向垂直领域的探索和应用，与各行各业深度融合。在界面交互领域，谷歌、苹果等国际科技巨头纷纷投入UI多模态大模型研发，这被视为手机AI革命的必经之路。在此背景下，国内首个UI大模型横空出世。8月17日，在IXDC2024国际体验设计大会上，AI时代设计工具Motiff妙多推…

感谢苹果公司近日发布研究论文，展示了 Ferret-UI AI 系统，可以懂得应用程序屏幕上的实质。以 ChatGPT 为代表的 AI 大谈话模型（LLMs），其训练材料通常是文本实质。为了能够让 AI 模型能够懂得图象、视频和音频等非文本实质，多模态大谈话模型（MLLMs）因此孕育而生。只是现阶段 MLLMs 还无法有效懂得移动应用程序，这主要有以下几个原因：1. 手机屏幕的宽高比，和大多数训练…

编者按：这篇文章是来自斯坦福的年少老师 Maneesh Agrawala，他本人既是斯坦福计算机专业的老师，也是斯坦福大学布朗媒体创新研究所的所长。他在去年 HAI 2022 秋季会议上发布了报告「AI回路：演进中的人类」，而这篇文章正是报告实质修订后的版本。对于 AIGC 当下存在的深层问题，AI 的逻辑以及未来可能的改进方式，给出了详尽的解读和预测。以下是正文： 最近我决定更新一下我的个人网站…

编者按：计划规范越来越完善，软件越来越简单，连PM 都可以动手搭一个UI 界面，那么此时计划师的核心价值在哪里？如何让自己摆脱“只会画画图标和线框图”的印象？这篇文章总结了4个进阶方法。 鸿影：近年来各家平台的计划规范日渐完善，公司也在大力推行中台化战略，DPL、组件化、模块化等成为了我们歇息中的重心之一，计划标准化的趋向愈演愈烈，在促进计划效率提升、解放生产力的同时，也让我开始产生一种深深的焦虑…