Anthropic CEO 阿莫代伊:未来 AI 或有自我决定权,可拒绝“不爽”的任务

Anthropic首席执行官达里奥·阿莫代伊(Dario Amodei)周一提出了一个令人吃惊的观点,暗示未来的高级AI模型可能会被赋予一种“按钮”,让它们能够在遇到不愉快的任务时选择退出。

据外媒 Ars Technica 报道,Anthropic 首席执行官达里奥・阿莫代伊(Dario Amodei)周一提出了一个令人吃惊的观点,暗示未来的高级 AI 模型可能会被赋予一种“按钮”,让它们能够在遇到不愉快的任务时选择退出

Anthropic CEO 阿莫代伊:未来 AI 或有自我决定权,可拒绝“不爽”的任务

阿莫代伊在采访中表示:“这是另一个让我看起来像是疯了的话题。我认为我们至少应该考虑一个问题:如果我们正在构建这些系统,它们能够像人类一样执行各种任务,并且似乎拥有许多人类的认知能力。如果它像鸭子一样叫、像鸭子一样走,也许它就是鸭子。”

阿莫代伊的言论是回应数据科学家卡门・多明格斯(Carmem Domingues)提出的一个问题,多明格斯询问为何 Anthropic 公司在 2024 年底聘请了 AI 福利研究员凯尔・费什(Kyle Fish),让他研究未来的 AI 模型是否可能具备感知能力,或是否应该在未来获得道德上的考虑和保护。

AI在线从报道中获悉,费什目前正研究 AI 是否能拥有感知能力,以及是否值得享有道德保护这一具有争议的话题。

阿莫代伊解释说:“我们正在考虑的一项可能的做法是,当我们将模型部署到实际环境中时,给它们一个按钮,上面写着‘我放弃这项工作’,这样模型就可以按下这个按钮。”

其表示,这只是一个非常简单的偏好框架,假设模型真的具备自主意识,并且非常讨厌这份工作,那么它就可以按下这个按钮。“如果你发现模型经常按下这个按钮,做一些非常不愉快的事情,也许你应该关注一下 —— 这并不意味着你完全相信,但至少应该留意。”

相关资讯

Anthropic 的“双标”:一边推大模型助沟通,一边拒求职者用 AI

在 Anthropic 公司的网站“客户案例”页面上,有大量报道称许多企业正在使用 Anthropic 的大语言模型 Claude,以帮助员工更有效地沟通。然而,在 Anthropic 自己的员工招聘流程中,该公司却礼貌地请求求职者“请…… 不要使用人工智能助手”,以便 Anthropic 能够评估他们“不借助人工智能辅助的沟通能力”。

OpenAI前CTO新创业公司聘请OpenAI联合创始人

近日,有消息称,OpenAI 的联合创始人 John Schulman 在离开人工智能公司 Anthropic 仅五个月后,已加入前 OpenAI 首席技术官 Mira Murati 的新创业公司。 根据《财富》杂志的报道,Schulman 的具体角色尚未披露,Murati 自离开 OpenAI 以来,对新公司的进展保持了高度的保密态度。 Murati 于九月份辞去了 OpenAI 的职务,之后她便开始着手打造自己的创业公司。

OpenAI 联合创始人舒尔曼加盟前 CTO 新公司

近日,人工智能领域再次迎来了重磅新闻。 OpenAI 联合创始人约翰・舒尔曼(John Schulman)在离开人工智能初创公司 Anthropic 后,准备加盟米拉・穆拉蒂(Mira Murati)所创立的神秘新公司。 舒尔曼在 Anthropic 仅待了五个月,便选择了再度换岗,令人关注他的下一步动向。