
MotorMind:零样本机器人操作框架
用通用 VLM 提出中层动作并接入确定性控制与反馈。
为什么重要
展示了通用 VLM 通过执行框架可用于零样本机器人操作。
阅读原文arxiv.org
AI 解读(根据原文生成)
该论文提出 MotorMind,一个面向机器人操作的执行框架,将通用 VLM 提出的中层动作连接到确定性机器人控制和反馈,并支持异步监控与后台记忆更新。它不依赖任务特定策略训练、编码 Agent 或 SAM3 等额外 grounding 工具,在 LIBERO-PRO 和真实 xArm6 机器人上报告了零样本操作结果。论文可通过 arXiv 获取,并提供项目页。
要点(AI 据原文整理,数字均已与原文核对)
- MotorMind connects VLM-proposed mid-level actions to deterministic robot control and feedback, with asynchronous monitoring and background memory updates.
- MotorMind achieves 66.7% success on the base LIBERO-PRO suites and 53.8% under perturbations.
- The same interface reaches 95% average success on a real xArm6 robot across direct manipulation and human-perturbation settings.
- Replacing the backbone with a stronger VLM further improves performance.