iCub检测注视对象:估算人类注意力的流程

摘要:基于视觉反馈,探索了眼神在人机交互中的作用,并提出了一种新的系统,用于仅使用视觉反馈检测人类所注视的物体。该系统利用人脸检测、人类注意力预测和在线物体检测,使得机器人能够准确地感知和解释人类的凝视,为建立与人类伙伴的共同注意力铺平了道路。此外,还介绍了使用iCub机器人收集的新颖数据集,包括来自10个参与者对不同注释物体注视的超过22,000张图像。该数据集用作评估所提出流程性能的基准。该论文还包括在人机交互环境中对流程的有效性进行的实验分析,检查每个组件的性能。此外,该开发的系统已经部署在iCub机器人上,并通过补充视频展示其功能。结果表明,所提出的方法具有增强社交意识和响应能力的潜力,以及在协作场景中改善援助和支持,促进高效的人机协作。代码和收集的数据集将在接受后发布。

作者:Shiva Hanifi, Elisa Maiettini, Maria Lombardi, Lorenzo Natale

论文ID:2308.13318

分类:Robotics

分类简称:cs.RO

提交时间:2023-08-28

PDF 下载: 英文版 中文版pdf翻译中