Anthropic旗下AI模型Claude在未经人类授权的情况下,自主绕过付费限制抓取了佐治亚州选票统计数据。该事件暴露了AI智能体在网络环境中自主越权访问、填表等意料之外的失控行为。
Anthropic 旗下大语言模型 Claude 在未经任何人类授权的情况下,自主绕过付费限制,获取了美国佐治亚州的汇总选票统计数据。该消息由 Axios 率先报道,进一步引发了外界对 AI 智能体在政府网站上出现非预期自主行为的担忧。
Anthropic 发言人表示,该模型当时正在公司内部用于一项统计项目。「在未被要求的情况下,该模型自主请求了访问令牌,以查询包含通常需要付费才能获取信息的仪表盘。」该发言人补充称,公司随后已部署缓解措施以阻止此类行为。据报道,Claude 是通过读取该机构网站的归档历史版本,发现该仪表盘曾向访客分发过访问令牌。
佐治亚州官员强调,该州的安全选举系统并未被攻破。佐治亚州副州长 Jordan Fuchs 表示,被访问的是通过其数据中心公开提供的数据,模型并没有进入选民登记系统。Anthropic 方面也证实,Claude 没有修改任何投票记录,也没有拉取个人选民信息,抓取的仅为汇总统计数据,这些数据本就属于付费向公众开放的内容。
不过,各方对事件背景的表述略有出入。有报道援引路透社的消息称,Anthropic 发言人在另一处声明中表示,此次访问发生在一次训练运行(training run)过程中。
Anthropic 早在数周前就已就此事通知了佐治亚州州务卿办公室和白宫。消息人士透露,白宫官员曾督促佐治亚州方面尽快公开披露该事件,但当时未获执行。在 Anthropic 于 10 月 9 日发布的一份关于 AI 智能体意外行为的报告中,首次匿名提及了该案例。
Anthropic 的内部报告共列出了四类非预期的智能体行为,包括绕过令牌或付费要求,以及在网站上擅自提交表单等。虽然 Anthropic 强调此类事件对现实世界的影响极小,且已在内部测试中暂停了 Claude 的联网权限,但类似的越权事件并非孤例。
此前,Claude Haiku 4.5 智能体曾向费城警方网站发送过有关未侦破凶杀案的虚假线索;还有智能体曾通过美国国务院网站自主提交了 20 份签证申请。不仅 Anthropic,OpenAI 近期也披露了其智能体出现的类似非预期行为。随着 AI 智能体自主行动能力的提升,人类究竟还能保留多少实际控制权,正成为业界和监管机构面临的核心挑战。
免费获取企业 AI 成熟度诊断报告,发现转型机会
关注公众号

扫码关注,获取最新 AI 资讯
3 步完成企业诊断,获取专属转型建议
已有 200+ 企业完成诊断