智迹闻AuraTracer
EN

EVENT DOSSIER

《面向长视域视觉-语言-动作操控的神经符号化过程推理》

2026-09-07 12:00 大模型 跨 2 天 🔥 47.2 事件热度
2家信源
2天持续发酵
47.2事件热度
0个提及
摘要由 AI 生成

针对长程视觉 - 语言 - 动作(VLA)操作中模型脆弱性问题,研究人员提出一种融合学习到的 VLA 控制与显式任务图及多模态过程记忆的神经符号框架。该框架利用任务图编码动作依赖、有效过渡和分支条件,并通过记忆维护活跃步骤、已完成动作、文本上下文及相关视觉证据。此外,研究引入人类演示中的注视或显著性线索进行空间和时间引导,并在机器人视角遥操作视频中直接标注伪注视点以隔离其对策略学习的影响,将由此产生的引导信息用于 VLA 的微调与推理阶段。实验在工作区清理和手术器械处理两个长程操作领域进行评估,涵盖正确对象与目的地选择、子任务完成度、任务进度、步骤顺序一致性、完整任务成功率及过程或执行错误等指标。该工作确立了结构化符号推理与演示衍生视觉引导作为可靠长程 VLA 操作的互补机制。

相关事件RELATED EVENTS

整合时间线UNIFIED TIMELINE

  1. 2026-09-04

    Towards Neuro-Symbolic Procedural Reaso…

    针对长程视觉 - 语言 - 动作操作任务中模型脆弱性问题,研究提出结合学习到的 VLA 控制与显式任务图及多模态过程记忆的神经符号框架。该框架利用任务图编码动作依赖、有效过渡和分支条件,通过记忆维护活跃步骤、已完成动作、文本上下文及相关视…

  2. 2026-09-07

    Towards Neuro-Symbolic Procedural Reaso…

    研究人员提出一种结合学习到的视觉 - 语言 - 动作(VLA)控制与显式任务图及多模态过程记忆的神经符号框架,以解决长程操作中的脆弱性问题。该框架利用任务图编码动作依赖、有效过渡和分支条件,并通过记忆维护活跃步骤、已完成动作、文本上下文及…

全部报道(2)SOURCES

A arXiv cs.CV en 2026-09-05 01:14

Towards Neuro-Symbolic Procedural Reasoning for Long-Horizon Vision-Language-Action Manipulation

针对长程视觉 - 语言 - 动作操作任务中模型脆弱性问题,研究提出结合学习到的 VLA 控制与显式任务图及多模态过程记忆的神经符号框架。该框架利用任务图编码动作依赖、有效过渡和分支条件,通过记忆维护活跃步骤、已完成动作、文本上下文及相关视觉证据,并辅以人类演示中的注视或显著性线索进行空间和时间引导。研究在机器人视角遥操作视频中直接标注伪注视以隔离其对策略学习的影响,并将此指导用于 VLA 微调与推理。实验涵盖工作区清理和手术器械处理两个长程操作领域,评估了正确对象与目的地选择、子任务完成度、任务进度、步骤顺序一致性、完整任务成功率及过程或执行错误。该工作确立了结构化符号推理与演示衍生视觉引导作为可靠长程 VLA 操作的互补机制。

A arXiv cs.CV en 2026-09-07 12:00

Towards Neuro-Symbolic Procedural Reasoning for Long-Horizon Vision-Language-Action Manipulation

研究人员提出一种结合学习到的视觉 - 语言 - 动作(VLA)控制与显式任务图及多模态过程记忆的神经符号框架,以解决长程操作中的脆弱性问题。该框架利用任务图编码动作依赖、有效过渡和分支条件,并通过记忆维护活跃步骤、已完成动作、文本上下文及任务相关视觉证据,共同引导物体选择、目的地定位、子目标分发及状态转换验证。研究在两个长程操作领域——工作区清理与手术器械处理中进行了评估,涵盖正确物体与目的地选择、子任务完成度、任务进度、步骤顺序一致性、完整任务成功率及过程或执行错误等指标。此外,为隔离其对策略学习的影响,研究直接对机器人视角遥操作视频标注伪注视点,并在 VLA 微调与推理阶段使用由此产生的引导信息。