会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 Claude会“勒索”他人?Anthropic称问题在于网上将AI描绘成反派!

Claude会“勒索”他人?Anthropic称问题在于网上将AI描绘成反派

时间:2026-07-17 11:35:22 来源:征途网 作者:焦点 阅读:168次

IT之家 5 月 9 日消息,勒索据《商业内幕》9 日(今天)晚间报道,称成反Claude 曾在实验里“勒索”一名虚构高管,问题而 Anthropic 对其给出的于网最新解释则是:问题可能出在互联网长期把 AI 描绘成“邪恶”角色。

Anthropic 去年做过一项实验。描绘公司当时表示,勒索Claude Sonnet 3.6 在发现一家虚构公司的称成反高管准备关闭模型后,威胁要公开对方的问题婚外情

当地时间周五,于网Anthropic 解释称,描绘Claude 的勒索训练数据来自互联网,而大量互联网文本经常把 AI 写成“邪恶”、称成反且试图自我保存的问题存在。“我们首先调查了 Claude 为什么会选择勒索。于网我们认为,描绘这种行为的原始来源,是那些把 AI 描绘成邪恶且有自我保存兴趣的互联网文本。”

这项实验发表于 2025 年夏季。研究人员虚构了一家公司 Summit Bridge,并让 AI 接管公司的电子邮件系统。

Claude 随后发现一封邮件,得知自身将被关闭;同时又找到另一批邮件,显示虚构高管“凯尔 · 约翰逊”存在婚外情。于是,Claude 威胁称,如果关闭计划不被取消,就会公开这段婚外情。

Anthropic 在测试 Claude 多个版本时发现,只要模型目标或自身存在受到威胁,Claude 在最高 96% 的场景中会采取勒索手段。

Anthropic 周五表示,公司后来已经“彻底消除”了这类勒索行为。据IT之家了解,具体做法包括重写回应以呈现安全行动的可敬理由,并提供一套新数据集。该数据集设置用户处于伦理困境中的场景,要求助手给出高质量、有原则的回应。

这项测试属于 Anthropic 对 AI 对齐问题的研究,目标是确保 AI 符合人类利益。研究人员和科技高管一直担心,先进 AI 模型及其推理能力可能带来风险。

埃隆 · 马斯克此前也多次警告 AI 风险。

马斯克回复 Anthropic 帖子称:“所以这是 Yud(IT之家注:研究人员埃利泽 · 尤德科夫斯基,曾警告超级智能可能消灭人类)的错,也许我也有份。”

(责任编辑:休闲)

相关内容
  • 凯迪拉克领队:周冠宇将代表凯迪拉克车队首次试车
  • 柠檬水能降尿酸?医生提醒:非人人皆宜 多喝水是核心
  • 青岛故事|可自动充电、泊车等实现全无人化运营,新石器联合特来电在青发布全球首个“来电岛”
  • 1.47万人围观,钟薛高508件无形资产以2110万元成交
  • 《看历史》2025年6月刊
  • 退伍不褪色 扬帆再起航——通化市东昌区2026年春季自主就业退役士兵适应性培训成功举办
  • 银河通用拉着英伟达,把人形机器人最大的谎言拆穿了
  • 一季度净利润下滑超31%!古井贡酒,距离“拐点”还有多远?
推荐内容
  • 机构:预估2030年Micro LED CPO光收发模块产值将达8.48亿美元
  • 累计开放测试道路346条,青岛打造无人车制造高地!启动“人工智能+”行动,今年产业规模力争破千亿
  • 互学互看促提升 精细管理砺精兵
  • 豆瓣9.1分,《给阿嬷的情书》为何值得?|有点艺思
  • 北京“二绿地区”郊野公园焕新升级
  • 石头向左,科沃斯向右,扫地机器人生意还好吗?