Apple ML Research提出SSR框架重构多模态搜索代理推理

发生了什么

据Apple ML Research发布的研究论文，团队提出基于选择的结构化推理（SSR）框架，将多模态搜索代理的推理重构为选择任务而非开放式生成。该框架将重复的高层推理表示为预指定的、可重用的自然语言候选项，模型每轮从中选择。此举旨在解决小模型因容量有限导致的冗长推理问题，减少推理成本并提供更有效的行动指导。