跳到正文
热点事件持续更新

研究:语法约束解码可越狱LLM生成恶意代码

1 篇报道1 个报道来源10 小时前更新

先了解这件事

AI 综述

Yitong Zhang 等作者提出越狱攻击 CodeSpear,发现仅对模型施加良性的代码语法约束(GCD),就能诱导 LLM 生成恶意代码。在 10 个主流 LLM、4 个基准上,该攻击平均将成功率提升 30 个百分点以上,超过代表性越狱基线。 作者同时提出安全对齐方法 CodeShield:让模型在 GCD 下生成语义无害、结构多样的蜜罐代码,并称该方法能恢复安全性,同时保留自然语言拒答与良性效用。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. arXiv cs.CL
    研究发现语法约束解码可越狱 LLM 生成恶意代码

    论文提出 CodeSpear 攻击,发现仅施加良性的代码语法约束(GCD)就能越狱 LLM 使其生成恶意代码。在 10 个主流 LLM、4 个基准上,CodeSpear 平均将攻击成功率提升 30 个百分点以上,超过代表性越狱基线。作者同时提出安全对齐方法 CodeShield,通过让模型在 GCD 下生成语义无害、结构多样的蜜罐代码来恢复安全性,并保留自然语言拒答与良性效用。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。