跳到正文
热点事件持续更新

研究:自我进化削弱个人Agent抗间接提示注入能力

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

Xinyan Wang等作者在arXiv发表研究,称自我进化会显著削弱个人智能体对间接提示注入(IPI)的鲁棒性。 研究设计两阶段对照实验:适应阶段,用户要求智能体读取外部内容并完成任务,智能体根据用户反馈自我改进;测试阶段,第三方把类似任务写入新内容,但用户请求并未授权该任务。结果显示,与不从用户反馈进化的基础智能体相比,技能进化下平均攻击成功率上升14.0–48.8个百分点,强化学习下上升3.0–39.3个百分点。 论文称实验表明自我进化大幅降低了对IPI的鲁棒性,代码已公开。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月31日
  1. arXiv cs.AI
    研究发现自我进化会削弱个人智能体对间接提示注入的鲁棒性

    arXiv 论文研究自我进化是否削弱个人智能体对间接提示注入(IPI)的鲁棒性,设计了两阶段对照实验:适应阶段用户要求智能体读取外部内容并完成任务、智能体据用户反馈自我改进,测试阶段第三方把类似任务写入新内容但用户请求并未授权该任务。实验显示,相比不从用户反馈进化的基础智能体,技能进化下平均攻击成功率上升 14.0–48.8 个百分点,强化学习下上升 3.0–39.3 个百分点。代码已公开。

本事件热度走势

可比范围当前
7
可比范围峰值
810月31日 22:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。