SMT黑盒框架越狱函数调用LLM
热点事件持续更新
SMT黑盒框架越狱函数调用LLM
1 篇报道1 个报道来源9 小时前更新
先了解这件事
AI 综述
研究者Junlong Liu等人提出黑盒越狱攻击框架SMT,通过构造模拟合法审核流程的多轮轨迹,把安全拒答当作执行失败来迭代优化,从而越狱函数调用类LLM。 在五家厂商的商业LLM和两个标准化安全基准上,SMT以接近最少的查询次数取得最高平均攻击成功率和HarmScore,显著优于现有基线。 该工作据此指出,仅靠提示词层面的清洗无法防御工具调用系统,需要在schema、参数、工具输出和对话状态上做上下文感知校验。
AI 根据报道生成 · 50 分钟前更新
最新进展11月5日 13:00
绕过提示词防线:SMT 利用模拟审核轨迹越狱函数调用 LLM报道时间线
沿着报道,了解事件的不同侧面。
11月5日
- arXiv cs.AI绕过提示词防线:SMT 利用模拟审核轨迹越狱函数调用 LLM
研究者提出黑盒攻击框架 SMT,通过构造模拟合法审核流程的多轮轨迹,把安全拒答当作执行失败来迭代优化,从而越狱函数调用类 LLM。在五家厂商的商业 LLM 和两个标准化安全基准上,SMT 以接近最少的查询次数取得最高平均攻击成功率和 HarmScore,显著优于现有基线。该工作指出仅靠提示词层面的清洗无法防御工具调用系统,需要在 schema、参数、工具输出和对话状态上做上下文感知校验。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。