资讯列表

WAIC观察:隐私计算加速落地产业,全新的技术标准体系呼之欲出

这几年,人们都在谈论大模型。特别是在 Scaling Law 的指导下,人们寄希望于将更大规模的数据用于训练,以无限提升模型的智能水平。在中国,「数据」作为一种与土地、劳动力、资本、技术并列的生产要素,价值越来越被重视。近年来,中国数据要素市场化建设的步伐明显提速。让「数据」发挥价值的关键在于不同主体、不同场景下的数据流通复用。数据要素跟传统的生产要素有本质差别,数据的价值具有双面性,业务价值越大,风险成本越高。营造数据可信流通可信环境,则是让数据要素价值充分释放的底层支撑。在这样的背景下,隐私计算技术的价值逐渐凸

SuperCLUE 中文大模型基准测评2024上半年报告

SuperCLUE 发布了《中文大模型基准测评2024上半年报告》,在AI大模型发展的巨大浪潮中,通过多维度综合性测评,对国内外大模型发展现状进行观察与思考。

单一作者论文,谷歌提出百万专家Mixture,超越密集前馈、稀疏MoE

释放进一步扩展 Transformer 的潜力,同时还可以保持计算效率。标准 Transformer 架构中的前馈(FFW)层会随着隐藏层宽度的增加而导致计算成本和激活内存的线性增加。在大语言模型(LLM)体量不断增大的现在,稀疏混合专家(MoE)架构已成为解决此问题的可行方法,它将模型大小与计算成本分离开来。很多新兴的 MoE 模型都可以实现相同体量之上,更好的性能与更强大的表现。最近发现的细粒度 MoE 扩展定律表明,更高的粒度可带来更好的性能。然而由于计算和优化方面的挑战,现有的 MoE 模型仅限于低数量专家

人人可做提示工程师!Claude上新:一键生成、测试和评估prompt

不会写 prompt 的看过来。在构建 AI 应用时,prompt 质量对结果有着重大影响。但制作高质量的 prompt 具有挑战性,需要研究者深入了解应用需求,并具备大型语言模型方面的专业知识。为了加快开发速度并改善结果,AI 初创公司 Anthropic 简化了此流程,可以让用户更轻松地制作高质量的 prompt。具体来说,研究者为 Anthropic Console 添加了新功能,可以生成、测试和评估 prompt。Anthropic 提示工程师 Alex Albert 表示:这是他们过去几周投入了大量工作才

深度解析RAG大模型知识冲突,清华西湖大学港中文联合发布

AIxiv专栏是AI在线发布学术、技术内容的栏目。过去数年,AI在线AIxiv专栏接收报道了2000多篇内容,覆盖全球各大高校与企业的顶级实验室,有效促进了学术交流与传播。如果您有优秀的工作想要分享,欢迎投稿或者联系报道。投稿邮箱:[email protected][email protected]本文章的作者为清华大学交叉信息院二年级硕士生许融武和一年级博士生祁泽涵,他们也是本篇综述的的主要作者。随着人工智能和大型模型技术的迅猛发展,检索增强生成(Retrieval-Augment

谷歌 DeepMind CEO:当前 AI 综合智力还不如普通家猫

谷歌 DeepMind 首席执行官戴密斯・哈萨比斯(Demis Hassabis)表示,当前人工智能(AI)的 IQ 智力还没有达到猫的水平。哈萨比斯出席全球变革研究所组织的“2024 年英国未来会议”,在和英国前首相托尼・布莱尔(Tony Blair)的公开讨论中表示:如果将 AI 作为通用系统来衡量,其 IQ 智商水平甚至没有超过猫。不过,随着巨额现金和计算投资的推动,相关研究进展很快。一些人预计未来 5 年时间,AI 智力可以超过人类。哈萨比斯表示 DeepMind 的工作重点不是人工智能(AI),而是通用人

70万人争先体验!视频生成新王者「可灵AI」又双叒升级了

难不成,AI 生成短剧时代真的要来了?最近,各路视频生成 AI 放出的 Demo 让人眼花缭乱。从玩梗图、拼长度再到讲究真实物理逻辑,层出不穷的人工智能创意难分高下,个个都要跟 Sora 试比高。这时候,突然有人偷偷先行一步,搞出了「电影级」的表现:从真实风格的光影效果:                            来源:,要素齐全,都能搞定:                             没想到在 AI 眼里,其实是蝙蝠侠能让小丑绷不住。来源:。有视频生成的 AI,音乐生成的 AI,再加上一些

AI文档搜索公司Hebbia完成1.3亿美元融资,a16z领投;奥特曼成立AI健康公司;大模型最强架构TTT问世丨AI情报局

融资快报Hebbia 完成 1.3 亿美元融资:位于纽约的 AI 初创公司 Hebbia 宣布完成新一轮 1.3 亿美元融资,由 a16z 领投,Index Ventures、Google Ventures 以及 Peter Thiel 参投。 据悉,Hebbia 目前估值约为 7 亿美元,公司成立于 2020 年,其软件可分析数字化文档和数据源,包括监管文件、PDF 以及音频和视频剪辑,以帮助客户处理比面向消费者的聊天机器人更复杂的查询,类似 Glean。 旷视科技MEGVII上交所提交注册:旷视科技MEGVII以自研视觉感知算法引擎为核心,致力于持续打造在各商业领域的 AIoT 操作系统,以及深度构建具备连接百亿物联网设备能力的生态系统,为 200 多个国家和地区的数十万开发者提供智能物联服务及解决方案。

第一次,语言的神经激活被定位到细胞级

迄今为止,分辨率最高的编码单词含义的神经元 map 来了。人类可以从语言中提取丰富而微妙的含义,这种能力对于人类交流来说至关重要。然而,尽管人们对支持语言和语义处理的大脑区域的了解不断加深,但在细胞水平上的神经语义推导仍然存在很多未知。最近,一篇发表在《自然》杂志上的研究论文,通过跟踪神经元在自然语音处理过程中的活动,该研究发现了单个神经元对语义信息的精细皮层表征。论文题为《Semantic encoding during language comprehension at single-cell resoluti

鄂维南院士领衔新作:大模型不止有RAG、参数存储,还有第3种记忆

2.4B 的 Memory3比更大的 LLM 和 RAG 模型获得了更好的性能。近年来,大型语言模型 (LLM) 因其非凡的性能而获得了前所未有的关注。然而, LLM 的训练和推理成本高昂,人们一直在尝试通过各种优化方法来降低成本。本文来自上海算法创新研究院、北京大学等机构的研究者受人类大脑记忆层次结构的启发,他们通过为 LLM 配备显式记忆(一种比模型参数和 RAG 更便宜的记忆格式)来降低这一成本。从概念上讲,由于其大部分知识都外化为显式记忆,因而 LLM 可以享受更少的参数大小、训练成本和推理成本。论文地址:

没想到!AlphaZero式树搜索也能用来增强大语言模型推理与训练

AIxiv专栏是AI在线发布学术、技术内容的栏目。过去数年,AI在线AIxiv专栏接收报道了2000多篇内容,覆盖全球各大高校与企业的顶级实验室,有效促进了学术交流与传播。如果您有优秀的工作想要分享,欢迎投稿或者联系报道。投稿邮箱:[email protected][email protected]万梓煜是上海交通大学的三年级在读博士生,导师为温颖教授和张伟楠教授,主要研究兴趣为强化学习与大语言模型、决策大模型。冯熙栋是伦敦大学学院四年级博士生,导师为汪军老师。同时目前也是Googl

又遇到「GPT写的review」了?看看北大&密歇根的这个研究工作

AIxiv专栏是AI在线发布学术、技术内容的栏目。过去数年,AI在线AIxiv专栏接收报道了2000多篇内容,覆盖全球各大高校与企业的顶级实验室,有效促进了学术交流与传播。如果您有优秀的工作想要分享,欢迎投稿或者联系报道。投稿邮箱:[email protected][email protected]本文是对发表在计算经济学顶级会议ACM Conference on Economics and Computation (EC'24)上的论文Eliciting Informative T

还在满网页扒资料?实测Kimi官方浏览器插件,颈椎这下有救了

机器之能报道编辑:杨文小编们的码字「神器」。Kimi,兵贵神速。前段时间,文风检测器在小红书上风靡一时,Kimi 立马推出该功能。这两天,Kimi 又在悄么声息地搞事情,偷偷上线官方浏览器插件。其实,早前就有个名叫「Kimi Copilot」的插件备受好评,只不过,这是由第三方开发者制作。而此次 Kimi 亲自下场,甩出官方浏览器插件,并为网页用户带来多项新功能。比如:对页面中部分内容划线提问;总结页面内容并生成摘要等。此外,插件还支持全局浮窗和侧边栏两种展示方式,用户可自行切换。我们实测后发现,这款插件简直是苦逼

彻底改变语言模型:全新架构TTT超越Transformer,ML模型代替RNN隐藏状态

从 125M 到 1.3B 的大模型,性能都有提升。难以置信,这件事终于发生了。一种全新的大语言模型(LLM)架构有望代替至今在 AI 领域如日中天的 Transformer,性能也比 Mamba 更好。本周一,有关 Test-Time Training(TTT)的论文成为了人工智能社区热议的话题。论文链接:、加州大学伯克利分校、加州大学圣迭戈分校和 Meta。他们设计了一种新架构 TTT,用机器学习模型取代了 RNN 的隐藏状态。该模型通过输入 token 的实际梯度下降来压缩上下文。该研究作者之一 Karan

CVPR最佳论文候选 | NeRF新突破,用启发式引导分割去除瞬态干扰物,无需额外先验知识

AIxiv专栏是AI在线发布学术、技术内容的栏目。过去数年,AI在线AIxiv专栏接收报道了2000多篇内容,覆盖全球各大高校与企业的顶级实验室,有效促进了学术交流与传播。如果您有优秀的工作想要分享,欢迎投稿或者联系报道。投稿邮箱:[email protected][email protected]  论文第一作者为中山大学计算机学院研二硕士生陈家豪,研究方向为神经渲染和三维重建,导师为李冠彬教授。该论文是他的第一个工作。论文通讯作者为中山大学计算机学院、人机物智能融合实验室李冠彬教

达摩院跨入 AIGC 深水区,发布一站式 AI 视频创作平台「寻光」

年初,OpenAI 推出文本-视频生成模型 Sora,只需输入提示文本描述,或输入一张图片,Sora 就能生成类似电影大片的逼真场景视频,前所未有的新奇观感,让大众直呼「现实不存在了」。 惊叹之余,Sora 所展现出的神奇「魔法」,也让业界意识到 AI 视频生成在高清晰度、高保真度、高质量方面的巨大潜力与价值。 此后,AI 视频生成模型摇身一变成为科技圈新的宠儿,并一改之前大语言模型一家独大的格局为两者的分庭抗礼。

标致在欧洲 17 国市场向新一代车型全面推送 ChatGPT 3.5 支持,新车赠送半年订阅

Stellantis 斯泰兰蒂斯旗下品牌标致当地时间 7 月 8 日宣布,以 12 种不同的语言在欧洲 17 国市场向新一代车型全面推送 ChatGPT 3.5 支持。这一支持目前已在德国、奥地利、西班牙、法国、意大利、葡萄牙、英国部署;本月底前覆盖丹麦、爱尔兰、挪威、瑞典、瑞士、比利时、卢森堡、荷兰、波兰和捷克。▲ 图源标致新闻稿标致旗下所有最新一代车型,只要其配备了支持语音指令的 i-Cockpit 智能座舱,都将获得支持 ChatGPT 功能的 OTA 升级。这些车型包括新 208、新 2008、新 308、

新流量风口!7 类 AI 视频玩法超全解析,小白也能轻松上手!

大家好,这里是和你们一起探索 AI 的花生~ 随着 AI 技术的不断发展,AI 视频的生成效果也跨上了新的台阶,在画面质量、动作流畅度、角色一致性、提示词理解等方面均有明显提升,达到了 “以假乱真” 的水平。而工具变强大后,人们的想象力也得到了进一步地释放,各种由 AI 生成或编辑的视频、动图在互联网上疯传,已然成为最新的视频流量密码。 今天就带大家了解 7 种最近非常热门的 AI 视频创作思路以及它们的实现方法,看完之后你会发现 AI 视频创作远比想象中简单,即使是普通人也可以轻松抓住这一波流量~ 相关推荐:一、