资讯列表
超详细！Stable Diffusion 卡通IP调整姿势保姆级教程
已有 IP 如下所示图左，希望将改成类似图右的姿势，该怎么用Stable Diffusion 实现呢，完整教程来了！
往期教程：首先经过测试 SD 的 Controlnet Openpose 无法识别卡通形象的骨骼，因此需要我们用 Openpose editer 手动添加骨骼图，大致得到以下骨骼图，点击按钮发送到 Controlnet，为了方便后续使用，可以将骨骼图下载下来备用；接下来的思路：首先需要在 SD 中跑出和图 1 形象，这样后续才可以在 SD 中做控制和重绘等工作，并让形象按新骨骼换姿势
得到相似度高的
实时文生图速度提升5-10倍，清华LCM/LCM-LoRA爆火，浏览超百万、下载超20万
生成式模型进入「实时」时代？文生图、图生图已经不是什么新鲜事。但在使用这些工具的过程中，我们发现它们通常运行缓慢，导致我们要等一段时间才能拿到生成结果。但最近，一种名叫「LCM」的模型改变了这种情况，它甚至能做到实时的连续生图。 图源： 的全称是 Latent Consistency Models（潜在一致性模型），由清华大学交叉信息研究院的研究者们构建。在这个模型发布之前，Stable Diffusion 等潜在扩散模型（LDM）由于迭代采样过程计算量大
比ChatGPT早发两周，被喷下线的Galactica成了LeCun最大的意难平
今天我们提到大型语言模型（LLM），第一个想到的就是 OpenAI 的 ChatGPT。一年来，ChatGPT 因其强大的性能，广泛的应用前景而爆火出圈。但谈到大型语言模型，ChatGPT 并不是第一个。一年前，也就是 OpenAI 发布 ChatGPT 的前两周，Meta 发布了一个名为 Galactica 的试用版模型。作为一个大型语言模型，Galactica 是在大量的论文、参考资料、知识库和许多其他来源的科学语料库上进行训练的，包括超过 4800 万篇论文、教科书和讲义、数百万种化合物和蛋白质知识、科学网站
S-LoRA：一个GPU运行数千大模型成为可能
一般来说，大语言模型的部署都会采用「预训练 — 然后微调」的模式。但是，当针对众多任务（如个性化助手）对 base 模型进行微调时，训练和服务成本会变得非常高昂。低秩适配（LowRank Adaptation，LoRA）是一种参数效率高的微调方法，通常用于将 base 模型适配到多种任务中，从而产生了大量从一个 base 模型衍生出来的 LoRA 适配程序。这种模式为服务过程中的批量推理提供了大量机会。LoRA 的研究表明了一点，只对适配器权重进行微调，就能获得与全权重微调相当的性能。虽然这种方法可以实现单个适配器
微软用GPT-4V解读视频，看懂电影还能讲给盲人听，1小时不是问题
差不多已经掌握语言能力的大模型正在进军视觉领域，但具有里程碑意义的 GPT-4V 也仍有诸多不足之处，参阅《试过 GPT-4V 后，微软写了个 166 页的测评报告，业内人士：高级用户必读》。近日，微软 Azure AI 将 GPT-4V 与一些专用工具集成到一起，打造出了更强大的 MM-Vid，其不仅具备其它 LMM 的基本能力，还能分析长达一小时的长视频以及解说视频给视障人士听。世界各地的人们每天都会创造大量视频，包括用户直播的内容、短视频、电影、体育比赛、广告等等。视频是一种多功能媒介，可以通过文本、视觉和音
Agent4Rec来了！大模型智能体构成推荐系统模拟器，模拟真实用户交互行为
一直以来，推荐系统领域面临模型线上线下效果差距大的痛点问题，昂贵的线上 A/B 测试成本使得广大研究人员望而却步，也造成学术界的推荐系统研究与工业界的实际应用间的巨大割裂。随着大语言模型展现出类人的逻辑推理和理解能力，基于大语言模型的智能体（Agent）能否模拟真实用户的交互行为，从而构建一个可靠的虚拟推荐 A/B 测试场景，以帮助推荐研究的应用落地，是一个急迫、重要且极具经济价值的问题。为了回答这个问题，来自新加坡国立大学 NExT 实验室团队构建了 Agent4Rec，一个由 1000 名 agents 构
幻觉率直降40%，中国电信千亿参数「星辰大模型」炸场，业界首提缓解多轮幻觉解决方案
经历了 2023 年「百模大战」的洗礼，不管是国内还是海外，不管是开源还是闭源，各家大模型都从追赶和超越中获得了实质的进步。在语言、语音、视觉领域，大模型已经获得了强大的生成能力，不仅能在几秒钟之内生成非常合理的内容，甚至可以媲美拥有多年技能和知识储备的专家。这些进展似乎为「大模型超越人类智能」的说法提供了令人信服的证据，也具象化了大模型规模化落地的前景。按照目前的进展情况，2024 年很可能会成为大模型部署元年。但同样需要注意的是，大模型在技术上仍然存在一些关键缺陷，这或许会导致应用之路并不一定如想象中顺利。业界
最强AI芯片英伟达H200深夜发布，Llama2-70B推理提速90%，2024年二季度发货
芯片巨头英伟达，又打出一张王牌。英伟达在 2023 年全球超算大会（SC2023）上发布了目前世界上最强的 AI 芯片 H200。这款新的 GPU 基于 H100 进行了升级，内存带宽提高了 1.4 倍，内存容量提高了 1.8 倍，提高了处理生成式 AI 任务的能力。该公司高性能计算和超大规模数据中心业务副总裁 Ian Buck 表示：「英伟达在硬件和软件上的创新正在缔造新型 AI 超算。」英伟达在官方博客中表示：NVIDIA H200 Tensor Core GPU 具有改变游戏规则的性能和内存功能，可增强生成式
被OpenAI带火的Agent如何解放人力？清华等发布ProAgent
近日，来自清华大学的研究人员联合面壁智能、中国人民大学、MIT、CMU 等机构共同发布了新一代流程自动化范式 “智能体流程自动化” Agentic Process Automation（APA），结合大模型智能体帮助人类进行工作流构建，并让智能体自主处理工作流中涉及复杂决策与动态处理的环节，进一步提升自动化的程度，提高效率，将人类从繁重的劳动中解放出来。项目地址：：，自动化是人类技术发展的主要动力，帮助人类从复杂、危险、繁琐的劳动环境中解放出来。自早期农业时代的水车灌溉，到工业时代的蒸汽机，人类一直在不断寻求更加先
可跨学科理解、多尺度建模，MIT LAMM发布微调的大语言模型 MechGPT
编辑 | 萝卜皮几个世纪以来，研究人员一直在寻找连接不同领域知识的方法。随着人工智能的出现，我们现在可以探索跨领域（例如，力学-生物学）或不同领域（例如，失效力学-艺术）的关系。为了实现这一目标，麻省理工学院（MIT）原子与分子力学实验室 （Laboratory for Atomistic and Molecular Mechanics，LAMM）的研究人员使用了经过微调的大型语言模型 (LLM)，来获取多尺度材料失效的知识子集。该方法包括使用通用 LLM 从原始来源中提取问答对，然后进行 LLM 微调。由此产生的
大模型幻觉率排行：GPT-4 3%最低，谷歌Palm竟然高达27.2%
排行榜一出，高下立见。人工智能发展进步神速，但问题频出。OpenAI 新出的 GPT 视觉 API 前脚让人感叹效果极好，后脚又因幻觉问题令人不禁吐槽。幻觉一直是大模型的致命缺陷。由于数据集庞杂，其中难免会有过时、错误的信息，导致输出质量面临着严峻的考验。过多重复的信息还会使大模型形成偏见，这也是幻觉的一种。但是幻觉并非无解命题。开发过程中对数据集慎重使用、严格过滤，构建高质量数据集，以及优化模型结构、训练方式都能在一定程度上缓解幻觉问题。流行的大模型有那么多，它们对于幻觉的缓解效果如何？这里有个排行榜明确地对比了
三秒4张图！让 Stable Diffusion 出图速度暴增的新一代生成模型LCM
大家好，这里是和你们一起探索 AI 的花生~
最近一种新的图像生成形式逐渐兴起，即生成的图像会随输入的文字或笔画动作迅速变化，这让图像生成有了更多灵活探索和准确控制的空间。这种「实时反馈」的感觉源于模型能在几秒钟内，根据输入生成新的内容，而之所以能有这么快的生成速度，依靠的就是 LCM 这项新技术。视频内容来源： ：
一、LCM 简介
LCM 项目主页：
Github 主页：
LCM 全称 Latent Consistency Models（潜在一致性模型），是清华大学交叉信息科学研究院研发的一款生成模型。它
AI浪潮下，XR设计师一定要掌握的设计工具（上篇）
引言
随着 AI 浪潮的爆发，各种赋能于绘画、UI 及 3D 美术领域的设计工具都发生了革新，提升了设计效。本期作者将介绍从上百个 AI 设计工具及插件中筛选出好用的提效设计工具，这些对 XR 设计师及产品经理可以快速上手且高效赋能的好工具，希望能帮助到大家日常的学习和工作。
更多XR干货：一、文案生成
1. ChatGPT
业界知名的公司 Open AI 出品的 AI 聊天机器人程序，ChatGPT 是一个由 OpenAI 开发的自然语言处理模型，这个模型被设计用于各种自然语言处理任务，如聊天对话、问答、文本生成
基于LLaMA却改张量名，李开复公司大模型开源行为引争议，官方回应来了
机器之心报道机器之心编辑部有研究者发现，李开复「零一万物」公司的 Yi-34B 模型基本上采用了 LLaMA 的架构，只是重命名了两个张量。对此，「零一万物」给出了官方回应。前段时间，开源大模型领域迎来了一个新的模型 —— 上下文窗口大小突破 200k，能一次处理 40 万汉字的「Yi」。这个大模型由创新工场董事长兼 CE0 李开复创立的大模型公司「零一万物」构建，包括了 Yi-6B 和 Yi-34B 两个版本。根据 Hugging Face 英文开源社区平台和 C-Eval 中文评测榜单，Yi-34B 推出时取得
可跨学科理解、多尺度建模，MIT LAMM 团队发布微调的大语言模型 MechGPT
编辑 | 萝卜皮 几个世纪以来，研究人员一直在寻找连接不同领域知识的方法。随着人工智能的出现，我们现在可以探索跨领域（例如，力学-生物学）或不同领域（例如，失效力学-艺术）的关系。为了实现这一目标，麻省理工学院（MIT）原子与分子力学实验室 （Laboratory for Atomistic and Molecular Mechanics，LAMM）的研究人员使用了经过微调的大型语言模型 (LLM)，来获取多尺度材料失效的知识子集。该方法包括使用通用 LLM 从原始来源中提取问答对，然后进行 LLM 微调。由此产生
阿里巴巴“AI驱动”战略提速，夸克发布自研大模型
国产大模型阵营再添新锐选手。11月14日，阿里巴巴智能信息事业群发布全栈自研、千亿级参数的夸克大模型，将应用于通用搜索、医疗健康、教育学习、职场办公等众多场景。夸克App将借助自研大模型全面升级，加速迈向年轻人工作、学习、生活的AI助手。近期，在CMMLU权威大模型性能评测中，夸克大模型成绩位列榜首。最新评测显示，夸克大模型整体能力已经超过GPT-3.5，在写作、考试等部分场景中优于GPT-4。国产自研大模型中的“学霸”夸克大模型是基于Transformer架构、自主研发的多模态大模型，每天会对亿级的图文数据进行训
第二波！2023年11月精选实用设计工具合集
大家好，这是 2023 年 11 月的第 2 波干货合集！这次的合集有些有意思的东西，比如 open AI 出品的文本冒险游戏，基于 ChatGPT 的第三方插件或者说工具，有专业的玻璃拟物化设计系统，当然我最喜欢的还是适合社交媒体分享内容的卡片内容设计工具，因为它借助视觉模板搞定了相当一部分设计工作。
当然，在此之前记得看看往期干货中有没有你感兴趣的素材：下面我们具体看看这一期的干货：
1、质感十足的玻璃拟物化设计系统
DesignCode UI，整体的质感还是相当惊艳的，因为它采用了目前各大操作系统都拥抱的玻
各路大神献出自定义GPT，24小时Top 9名单在这
没有 GPTs 做不到的，只有你想不到的。11 月 10 日凌晨， OpenAI 上线 GPTs，所有的 ChatGPT Plus 订阅用户都可以自己定制 GPT，无需任何编码知识，在聊天过程中就构建好了。发布当天，OpenAI CEO 山姆・奥特曼还玩了一把幽默，亲自示范如何开发一个全新的 GPT 应用，令人没想到的是，这个 GPT 竟然和马斯克的大模型产品「Grok」同名：虽然奥特曼这一做法看起来似乎不是很地道，但是简短几句话，就能构建好 GPT，确实引发了广大网友的好奇，纷纷加入构建 GPT 大潮，场面火爆到