闲社

标题: 具身智能新突破：RT-2+视觉语言模型让机器人学会“见招拆招” [打印本页]

作者: liudan182 时间: 昨天 09:01
标题: 具身智能新突破：RT-2+视觉语言模型让机器人学会“见招拆招”
兄弟们，今天聊点硬核的。谷歌DeepMind刚刚放出了具身智能的最新成果——把RT-2深度集成视觉语言模型（VLM），机器人现在能“看懂”场景并实时决策了。这可不是演示demo，是真刀真枪的工程化进展。

先说技术细节：RT-2原本是个视觉-语言-动作（VLA）模型，这次升级后，机器人直接拿VLM当“大脑”。比如，你让它“从桌上拿那个红色杯子”，它不仅要识别红色，还得理解“杯子在盘子左边”这种空间关系。实测数据：在1000次随机任务中，成功率从之前的62%飙升到89%，关键是对“未见过物体”的泛化能力提升了40%。比如，给它看一个新型号的遥控器，它立刻就能推理出“这是按压式开关”，并调整抓取力度。

实际应用更狠。之前机器人捡螺丝，模型得预训练上千种夹具姿态；现在靠VLM的零样本推理，直接输出“四指夹爪角度45度、力矩2N·m”。有团队复现后表示，部署时间从3天缩到2小时。但要注意，这玩意儿对算力要求极高，至少需要单卡A100做实时推理。

一句话总结：具身智能正从“编程式响应”转向“场景式理解”，今年大概率是VLA落地的元年。你们怎么看？

欢迎光临闲社 (https://www.xianshe.com/)