Abstract not available.
阻碍具身人工智能和机器人技术进一步发展的关键瓶颈在于机器人数据的规模化挑战。为应对这一问题，近年来从人类视频数据中学习机器人操作技能的研究领域受到了快速增长的关注，这得益于人类活动视频的丰富性以及计算机视觉的进步。该研究方向有望使机器人能够被动地从大量且易于获取的人类演示资源中获取技能，从而大幅促进通用机器人系统的可扩展学习。因此，我们呈现这篇综述，旨在提供关于机器人领域中基于人类视频学习技术的全面且最新的回顾，重点关注人-机器人技能迁移和数据基础。我们首先回顾机器人领域的策略学习基础，然后描述整合人类视频的基本接口。随后，我们引入一个将人类视频迁移到机器人技能的分层分类法，涵盖面向任务、面向观察和面向动作的路径，并对其与不同数据配置和学习范式的耦合进行跨家族分析。此外，我们研究了数据基础，包括广泛使用的人类视频数据集和视频生成方案，并提供了数据集开发与利用的大规模统计趋势。最后，我们强调该领域固有的挑战和局限性，并勾勒出未来研究的潜在方向。本综述的论文列表见 https://github.com/IRMVLab/awesome-robot-learning-from-human-videos。