arXiv cs.AI· Lada Kudl\'a\v{c}kov\'a·· 11 小时前AI 评分22
面向自闭症教育的类人机器人视觉任务建模与自动规划
Visual Task Modeling and Automated Planning for Humanoid Robots in Education of Individuals with Autism Spectrum Disorder
AI 导读
研究提出一种让配备摄像头的半自主机器人识别任务目标并规划动作的方法,聚焦自闭症谱系障碍(ASD)教育中常用的 Shoebox Tasks。其求解器用基于视觉的大语言模型将任务照片转换为 PDDL 表示并生成动作计划,Nao 机器人可自主执行任务,并通过动作演示、语音指令或手势提示下一步或报告检测到的失败。教师无需编程,求解器仅以拍摄图像为输入,经适配后可集成到多种教育机器人中。
正文 · AI 翻译
摘要:在机器人辅助教育中,机器人必须理解如何完成一项任务,才能有效地引导学生完成该任务。我们提出了一种新方法,使配备摄像头的半自主机器人能够识别任务目标并规划实现该目标的动作。我们的工作聚焦于鞋盒任务(Shoebox Tasks),这是一种常用于自闭症谱系障碍(ASD)个体教育的活动。这些任务的设计使得目标可以直接从其视觉结构中推断出来。我们开发了一个求解器,它使用基于视觉的大型语言模型将鞋盒任务的照片转换为规划领域定义语言(PDDL)表示,并生成用于解决该任务的动作计划。我们还实现了一个机器人接口,使 Nao 机器人能够自主执行各种鞋盒任务,并通过动作演示、语音命令或手势来建议下一步行动或发出检测到的失败信号,从而帮助学生。借助经过适配的机器人接口,该求解器可以集成到各种教育机器人中。教师无需具备编程专业知识,且该求解器仅以捕获的图像作为输入运行。特殊教育需求领域的研究表明,ASD 学生可以从机器人辅助教学中受益匪浅,我们的系统旨在加强这些学习机会,同时培养 ASD 个体对机器人技术的兴趣。
| 评论: | 6 页,已在捷克共和国布拉格举行的 AICCONF 2026 会议上展示 |
| 主题: | 机器人学(cs.RO);人工智能(cs.AI) |
| 引用为: | arXiv:2610.27162 [cs.RO] |
| (或 arXiv:2610.27162v1 [cs.RO] 用于此版本) | |
| https://doi.org/10.48550/arXiv.2610.27162 由 DataCite 颁发的 arXiv DOI(待注册) |
|
| 相关 DOI: | https://doi.org/10.1109/AICCONF69182.2026.11600719
链接到相关资源的 DOI |
提交历史
来自:Lada Kudláčková [查看电子邮件]
[v1]
2026 年 10 月 19 日星期一 18:57:19 UTC(2,047 KB)
来源:arXiv cs.AI · arxiv.org