AI在线 AI在线

Meta 推出新框架,计划限制高风险 AI 系统的发布

作者:AI在线
2025-02-12 09:06
Meta 近日发布了一项新的风险政策框架,旨在评估和降低前沿 AI 模型所带来的风险,并在必要时停止开发或限制这些系统的发布。 该框架名为 “前沿 AI 框架”,详细阐述了 Meta 将如何将 AI 模型分为高风险和关键风险两类,并据此采取相应措施,以将风险降低到 “可容忍的水平”。 在这个框架中,关键风险被定义为能够独特地促成特定威胁场景的执行。

Meta 近日发布了一项新的风险政策框架,旨在评估和降低前沿 AI 模型所带来的风险,并在必要时停止开发或限制这些系统的发布。该框架名为 “前沿 AI 框架”,详细阐述了 Meta 将如何将 AI 模型分为高风险和关键风险两类,并据此采取相应措施,以将风险降低到 “可容忍的水平”。

Facebook 元宇宙 meta

在这个框架中,关键风险被定义为能够独特地促成特定威胁场景的执行。而高风险则意味着模型可能显著提升实现威胁场景的可能性,但并不直接促成执行。威胁场景包括生物武器的扩散,其能力可与已知的生物剂相提并论,以及通过大规模长篇欺诈和诈骗造成的对个人或公司的广泛经济损害。

对于达到关键风险阈值的模型,Meta 将停止开发,并仅向少数专家开放该模型的访问权限,同时在技术上可行且商业上可行的情况下,实施安全保护以防止黑客攻击或数据外泄。对于高风险模型,Meta 则会限制访问权限,并采取减缓风险的措施,以将风险降低到中等水平,确保该模型不会显著提升威胁场景的执行能力。

Meta 表示,其风险评估过程将涉及多学科的专家和公司内部的领导,确保各方面的意见都能得到充分考虑。这一新框架仅适用于该公司的最先进模型和系统,这些模型的能力匹配或超过当前技术水平。

Meta 希望,通过分享其先进 AI 系统的开发方法,能够提升透明度,促进外界对 AI 评估和风险量化科学的讨论与研究。同时,该公司强调,针对 AI 评估的决策过程将随着技术的发展不断演进和完善,包括确保其测试环境的结果能够真实反映模型在实际运行中的表现。

划重点:

🌟 Meta 推出新风险政策框架,以评估和降低前沿 AI 模型的风险。  

🔒 关键风险模型将停止开发,并限制专家访问;高风险模型将实施访问限制和减缓措施。  

🧑‍🏫 风险评估过程将涉及多学科专家,力求提高透明度和科学性。

相关资讯

Meta AI 全球市场扩张,并上线网页版 meta.ai

Meta 公司近日宣布 Llama 3 大语言模型之外,扩展 Meta AI 服务到美国之外的 13 个国家和地区,还宣布上线专门的聊天网站:meta.ai。Meta 公司在新闻稿中表示开始在全球市场扩展 Meta AI,在澳大利亚、加拿大、南非和新加坡等国家和地区推出英语版本。IT之家附上 Meta AI 扩展的国家和地区如下澳大利亚加拿大加纳牙买加马拉维新西兰尼日利亚巴基斯坦新加坡南非乌干达赞比亚津巴布韦Meta AI 整合了 Llama 3 大语言模型,速度更快、智能性更高、功能更强,是执行各种任务的理想选择
4/19/2024 9:15:51 AM
故渊

Llama3后,Meta又开放自家头显操作系统,打造元宇宙时代新安卓

虽然向第三方开放了操作系统,但 Meta 将继续开发 Quest 头显设备。Meta 誓将开放进行到底。这次把自家 VR 头显 Quest 采用的操作系统「Meta Horizon OS」向第三方硬件制造商开放了,包括华硕、联想和微软等一众企业。此举意在展示作为 MR 操作系统整合者的 Meta 对元宇宙开放的新愿景。至此,Meta 正式向实现元宇宙更开放的计算平台愿景迈出下一步。为实现该恢弘战略,Meta 同时在三方面不断发力,并竭力整合资源:向第三方硬件制造商开放 Meta Quest 设备的操作系统,为消费者
4/24/2024 11:14:00 AM
机器之心

不到60秒就能生成3D「手办」,Meta发力3D生成,ChatGPT时刻要来了吗?

3D 生成,一直在等待它的「ChatGPT时刻」。一直以来,创作 3D 内容是设计和开发视频游戏、增强现实、虚拟现实以及影视特效中最重要的部分。然而,3D 生成具有独特而艰巨的挑战,这是图像和视频等其他生成内容所不具备的。首先,3D 内容在艺术质量、生成速度、3D 网格结构和拓扑质量、UV 贴图结构以及纹理清晰度和分辨率方面具有严格的标准;其次,与其他研究相比,可用的数据量少。虽然该领域有数十亿张图像和视频可供学习,但可用于训练的 3D 内容数量要少三到四个数量级。因此,现阶段的3D 生成还必须从非 3D 的图像和
7/4/2024 5:55:00 PM
机器之心
  • 1