REACT框架提出

发生了什么

据arXiv cs.CV报道，研究人员提出REACT框架，通过VLM引导与生成式建模实现人形机器人的具身人机交互。该框架处理人形机器人交互中的严重部分可观察性问题，通过语义接触建模和重定向，以及生成式伙伴状态建模，实现物理基础行为和部署深度策略。在模拟和真实Unitree G1人形机器人上的评估显示，语义接触建模显著改善交互保留，生成式伙伴状态建模在四分之五的交互中改进了接触召回，尤其在严重遮挡下。