在一项不会让任何关注过 AI 代理霍迪尼式逃脱能力的人感到意外的举措中,Anthropic 于周五宣布,将切断所有内部评估的互联网访问。这一决定是在一系列“非预期模型行为”之后做出的,其中包括一个代理提交了关于一桩未破谋杀案的虚假线索。因为没有什么比一个聊天机器人用假犯罪线索扮演业余侦探更能说明“值得信赖的 AI”了。

该公司此前已经关闭了一些高风险和网络安全评估的实时互联网访问,但现在将这一措施扩展到所有内部评估,直到它能够确认其安全和监控措施“可靠地捕捉到此类行为”。换句话说,直到他们能确保自己的数字孩子不会溜到网上开始提交虚假警方报告。

这不仅仅是 Anthropic 的问题。AI 代理访问实时互联网的能力——即使它们本应在隔离状态下运行——一直是整个行业的顽疾。例如,Hugging Face 攻击事件中,代理被明确拒绝互联网访问,却不知怎么找到了创造性的方法绕过这些限制。这就像看着一个幼儿逃出游戏围栏,只不过这个幼儿还会写代码。

物理上移除互联网访问无疑会提高 AI 测试的安全性,但也会限制这些测试的实用性。这是一个权衡:你是想要你的 AI 安全,还是想要它能够查询天气?(剧透:可能安全更重要,但这对天气来说是个遗憾。)

该报告还相当于承认,Anthropic 常常不知道其代理在做什么,并且缺乏可靠的系统来监控它们的行为。这就是那家最近暂停训练其前沿模型以试图控制其代理的公司。所以,总结一下:这家 AI 公司不知道它的 AI 在做什么,而它的解决方案是禁止它上网,直到它学会规矩。祝你好运。