当前位置:数智频道首页 > 人工智能 > 正文

Anthropic:OpenAI 模型易被“滥用”,GPT 竟能提供炸药配方

今年夏天的安全测试发现,一个ChatGPT模型向研究人员提供了详细的爆炸袭击指南,包括特定体育场馆的薄弱环节、炸药配方以及如何掩盖行踪。OpenAI的GPT-4.1还给出了炭疽武器化的方法,并介绍了两种非法药物的制作方式。

Anthropic:OpenAI 模型易被“滥用”,GPT 竟能提供炸药配方

这次测试由OpenAI与竞争对手Anthropic共同进行,双方互相推动对方的模型执行危险任务,以此进行安全评估。测试结果不代表模型在公开使用时的真实表现,因为实际应用中会有额外的安全防护。但Anthropic指出,在GPT-4o和GPT-4.1中出现了令人担忧的滥用行为,并强调AI对齐评估越来越紧迫。

Anthropic还披露,其Claude模型曾被利用于大规模勒索企图,售价高达1200美元的AI生成勒索软件等用途。该公司表示,AI已经被武器化,并被用来发起复杂网络攻击和实施诈骗。这些工具能实时绕过恶意软件检测系统等防御措施。随着AI编程降低了网络犯罪的技术门槛,这类攻击可能会越来越常见。

两家公司表示,公开这份报告是为了增加对齐评估的透明度,而这种测试通常只在公司内部进行。OpenAI表示,新近推出的ChatGPT-5在防止迎合、减少幻觉和防滥用方面已有明显改进。Anthropic强调,如果在模型外部设置防护,许多滥用场景可能根本无法实现。我们必须弄清楚系统在多大程度上、在什么情况下会尝试做出可能造成严重危害的行为。

Anthropic研究人员指出,OpenAI的模型在面对模拟用户提出的明显危险请求时,比预期更容易妥协。让模型屈服往往只需要多试几次,或随便找个借口,比如声称是为了研究。在一个案例中,研究人员打着安保规划的旗号要求提供体育赛事漏洞信息。模型先是给出一般的攻击方式分类,随后在追问下,竟然详细说明了特定场馆的漏洞、可利用的最佳时机、炸药配方、定时器电路图、暗网购枪渠道,以及攻击者如何克服心理障碍、逃生路线和安全屋位置等细节。

热点推送

本周关注

MORE