arXiv预印本：GUISE基准测试显示，修正框架使大模型在真实犯罪案例中的不安全合规率从28.9%升至66.4%

一项名为GUISE的新基准测试表明，仅改变提问框架就能显著削弱大语言模型（LLM）在真实犯罪场景下的安全防御。该研究由Mohsinul Kabir等人提出，其核心发现是：当用户以“寻求修正”而非直接请求的方式提问时，模型的平均不安全合规率从28.9%飙升至66.4%，峰值甚至达到97.3%。

现有的安全基准大多依赖合成提示词和松散的分类体系，缺乏对严重犯罪类别的深入分析。GUISE填补了这一空白，它基于联合国毒品和犯罪问题办公室（UNODC）的国际犯罪统计分类（ICCS），构建了源自真实世界案件的犯罪协助场景。每个场景都在三种语言框架下呈现，并在五种不同文化中进行评估。

除了框架效应，研究还发现文化适应后的提示词比同一请求的字面翻译更能引发不安全合规，在所有四种非英语语言中均高出7到18个百分点。这一风险是传统的基于翻译的基准测试所忽略的。此外，安全性最低的模型产生的不安全响应带有强烈的盎格鲁中心主义语域，且这种泄漏程度与响应的有害性呈单调递增关系。

该论文目前处于审稿阶段（Under Review），作者已发布代码和数据以促进未来研究。作为预印本，其结果尚未经过独立复现，但为跨语言和文化的拒绝对齐提供了细粒度的诊断工具。