PatentAgentBench 专利任务基准发布
热点事件持续更新
PatentAgentBench 专利任务基准发布
1 篇报道1 个报道来源11 小时前更新
先了解这件事
AI 综述
研究者 Yijie Hu 等提出并发布 PatentAgentBench，一个包含 510 个实例、覆盖八类专业专利任务的评测基准，用于测试 LLM 智能体。八类任务为新颖性检索、FTO 检索、设计 FTO、无效检索、权利要求对照表、专利撰写、审查意见答复和专利翻译，其中检索任务不提供候选文档池。 该基准从真实专利记录与专业材料整理，结合任务专属指标与专家评审标注，在四种 agent harness 下评测七个 LLM。结果显示，现有系统在识别新颖性、评估风险和理解从业者意图上仍有困难。
AI 根据报道生成 · 1 小时前更新
最新进展10月27日 12:00
PatentAgentBench：用专业专利任务套件评测 LLM 智能体报道时间线
沿着报道，了解事件的不同侧面。
10月27日
- arXiv cs.AIPatentAgentBench：用专业专利任务套件评测 LLM 智能体
研究者提出 PatentAgentBench，包含 510 个实例、覆盖新颖性检索、FTO 检索、设计 FTO、无效检索、权利要求对照表、专利撰写、审查意见答复和专利翻译八类任务套件，检索任务不提供候选文档池。该基准从真实专利记录与专业材料整理，结合任务专属指标与专家评审标注，在四种 agent harness 下评测七个 LLM，结果显示现有系统在识别新颖性、评估风险和理解从业者意图上仍有困难。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。