Abstract not available.
视觉-语言-动作（VLA）模型在灵巧操作中容易产生复合错误，高维动作空间和接触丰富的动力学使得小的策略偏差在长时序任务中逐渐放大。尽管交互式模仿学习（IIL）可以通过人类接管数据来优化策略，但将其应用于高自由度（DoF）机器人手部仍面临挑战：在接管时刻，人类遥操作与策略执行之间存在指令不匹配，导致机器人手部构型突变，即“手势跳跃”。我们提出Hand-in-the-Loop（HandITL），一种无缝的人机协同干预方法，该方法将人类的校正意图与自主策略执行相融合，以避免在双手灵巧操作中出现手势跳跃。与直接遥操作接管相比，HandITL将接管抖动降低了99.8%，并保持稳健的接管后操作能力，抓取失败率降低87.5%，平均任务完成时间缩短19.1%。我们在需要双手协调、工具使用以及精细长时序操作的任务上验证了HandITL的有效性。当用于收集策略优化的干预数据时，HandITL生成的策略在三个长时序灵巧任务上的平均表现比使用标准遥操作数据训练的策略高出19%。