通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了
8744点击    2026-10-15 13:57

具身智能公司辛苦训练的「机器人大脑」,要被 GPT、Claude、Gemini 抢饭碗了?


10 月 14 日,知名大模型评测机构 Artificial Analysis 把这些在数学、编程等领域表现出色的大模型,拉进了一场真正的机器人考试。


在新发布的 AA-Robotics v0.1 评测中,GPT、Claude、Gemini 等前沿模型需要控制真实机械臂,挑战倒水、写字、搭积木等八项任务,比一比谁的「动手能力」更强。


结果,大模型们刚一上手,就闹出了不少笑话。一台机械臂花了十几分钟,终于把几块泡沫积木搭成了一座合格的高塔。背后指挥它的 GPT-6.1 Sol 明明已经完成任务,却仍然不肯停手,继续调整积木,结果反而让这项任务以失败告终。


通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了


这只是此次机器人考试中颇具戏剧性的一幕。


首批结果同样充满反差:GPT-6 Astra 排名第一,通用大模型已经能够借助编程 Agent 操控真实机械臂;但它们完成一项任务平均需要约半小时,比人类基线慢了将近两个数量级。


通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了


这份成绩单,也让机器人行业最近的一场争论有了新的讨论依据:随着通用大模型越来越强,具身智能公司专门训练的「机器人大脑」,究竟还有多少不可替代的价值?


「机器人大脑」,会被通用大模型取代吗?


上个月,GPT-6 Astra 控制机械臂画金门大桥、抓取积木、模仿人类操作的视频接连刷屏。一台售价约 150 美元的机械臂,在 Astra 的控制下,竟然能根据摄像头画面自主规划动作,一笔笔画出金门大桥。


更有说服力的实验来自 RoboCurve。在它的实机测试中,Astra 控制双机械臂,把红色积木放进碗里,20 次成功了 19 次。这样的成绩,让不少人开始追问:既然通用大模型已经懂视觉、空间、推理,还能编写控制代码,机器人公司为什么还要投入大量时间和金钱,从头训练自己的 VLA 模型?有人甚至提出,机器人领域的 OpenAI,可能就是 OpenAI 自己。


但身处具身智能行业的人,并不完全买账。


9 月 10 日的外滩大会上,自变量机器人创始人王潜谈到这种「降维打击」的说法时,判断目前可能性不大。他的理由是,模型的能力来自数据。编程模型变强,背后有大量代码数据和成熟的验证体系;机器人面对的物理世界,同样需要专门的数据、评测、硬件与基础设施,不会因为语言模型强大就自动解决。王潜还提到,Astra 并非与机器人数据完全绝缘。因此,通用模型能控制机械臂,并不能简单理解为语言能力自然迁移到了物理世界。


破壳机器人创始人许华哲也动手试过 Astra。它能识别桌面物品,甚至抓起一根筷子;但一旦要求它用筷子进行更复杂的接触操作,表现就明显下降。在他看来,语义理解、空间理解的进步令人惊喜,复杂的物理交互却还是另一道题。


双方争论的焦点,由此逐渐清晰:通用大模型能不能「动手」,已经不是唯一问题;它到底能做多少,能否做得稳定、迅速,才更关键。


AA-Robotics 恰好提供了一把新尺子。


GPT-6 排第一,

但机器人考试远没有那么简单


Artificial Analysis 此前一直在追踪大模型的推理、代码能力、速度和价格。这次,它把考场从屏幕搬到了桌面。


每款模型都获得一台 Hiwonder NexArm 机械臂的控制权。这是一台带五个关节和一个夹爪的六轴机械臂,桌面周围和机械臂手腕上共布置四个摄像头。


模型起初只知道机械臂的名称、如何通过 HTTP API 与它通信,以及如何提交任务。它得自己看摄像头、理解物体位置、编写并运行程序,让机械臂完成动作。GPT 模型运行在 Codex 中,Claude 使用 Claude Code,Gemini 使用 Antigravity。八项测试均为零样本尝试,不会为了当前题目再训练一次。这套评测考察的是通用大模型如何借助编程 Agent 和机器人控制接口,理解环境、规划动作,并最终完成真实世界中的操作任务。


首批五款模型的综合成绩已经公布:GPT-6 Astra 得到 69.4 分,GPT-6.1 Sol 为 64.6 分,Gemini 4 Argon 为 55.3 分,Claude Opus 5.5 和 Claude Fable 5.1 分别为 48.8 分、46.3 分。


通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了


不过,分数不是成功率。每道题满分 100,没完全做成也可能拿到过程分。因此,Astra 虽然总分最高,八道题中拿到满分的是四道;排第二的 Sol,反而有五道满分。


最简单的两项任务,五个模型全部过关:用夹爪按下红色按钮,以及把一只鳄鱼玩具完整放进指定方框。这些操作已经难不住今天的前沿大模型。


再往后,差距迅速拉开。


Astra 能把瓶里的饮料倒进杯子,还能握着笔在纸上写出「hello world」,却在测量盒子长宽高的任务中拿了零分。Sol 完成了收纳积木、形状匹配和写字,却没能倒好水。搭积木塔更是让所有模型都没拿到满分:Sol 甚至一度搭出合格的塔,却因为后续操作前功尽弃。


这一幕很能说明问题。在电脑里,模型发现答案后只需要停止生成;到了物理世界,它还必须判断眼前的物体是否已经放稳,任务是否真的完成,以及接下来的动作会不会把成果毁掉。


更惊人的反差,还在时间和成本上。


五款模型中,除了 Gemini 4 Argon 平均耗时约 52 分钟,另外四款完成一项任务大约都要半小时。而 Artificial Analysis 给出的人工直接操作基线,平均只需约 20 秒。按红色按钮这样的小事,Astra 花了 2.2 分钟;Claude Fable 5.1 甚至花了约 10 分钟理解场景、规划动作,才开始第一次操作。


钱也没少花。Astra 平均每项任务的模型调用成本达到 16.36 美元,Sol 只要 1.93 美元,分数却仅相差 4.8 分。对于未来要在家庭、仓库里连续工作的机器人来说,能完成一次,和能以合理成本每天完成上百次,是两回事。


通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了


能想明白下一步,不等于真的做得好


为什么只是移动一只机械臂,大模型就要琢磨这么久?


Artificial Analysis 拆解了整个任务过程。以 Astra 为例,它有约 20% 的时间用于理解环境和机械臂,约 59% 用于规划动作,实际机械臂运动只占约 13%。Sol 的情况类似:61% 的时间在规划,机械臂运动也只有约 13%。


它们看起来像一个第一次走进实验室的人:先观察机械臂怎么动,再写程序、试探位置、检查画面,确认无误后才发出下一道命令。动作本身往往只需要几秒钟,前后的思考却可能持续数分钟。


慢还不是全部问题。


在六项涉及抓取的任务中,Astra 的抓取成功比例为 45%,Claude Fable 5.1 为 44%,而 Sol 只有 28%。模型明明已经找到目标,夹爪却可能闭合在物体旁边;有时刚抓起来,瓶子又从指间滑落。


官方整理的失败片段里,还有不少令人印象深刻的场面:机械臂为了调整鳄鱼玩具的位置,反而把已经放进框里的玩具推了出去;抓取瓶子时手腕碰到托盘,使瓶子越来越难够到;倒水快结束时没有考虑水流位置变化,最后一部分饮料洒到了杯外。


通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了


这些错误很难靠「再想一会儿」全部解决。真实世界里的物体会滑动、倾倒、变形,手指和物体接触时还会产生摩擦与碰撞。机器人需要根据运动和接触反馈及时纠错,而不是每动一下都等待大模型重新规划。


这也是专业具身模型仍然有发挥空间的地方。VLA、底层运动策略和控制器长期处理的,正是如何把视觉和任务目标快速转换成连续、稳定的动作。


当然,这份榜单还没有把通用 Agent 与专用 VLA 放到同一套条件下直接较量。八道桌面题目也无法代表全部机器人任务,更不用说双手协作、柔性物体操作和长时间自主工作。


但它至少让争论前进了一步:通用大模型能完成真实操作,已经有了成体系的证据;它们距离高效、可靠地执行真实工作还有多远,也第一次在这组任务里被具体地量了出来。


AA-Robotics v0.1 的首批名单中,还没有中国模型。


那么,下一批会不会出现 Qwen、Kimi、GLM 或 DeepSeek?如果放到同样的机械臂、同样的任务里,国产模型能否用更低成本追上甚至超过这些国际头部模型?


这或许比单纯争夺一张榜单的名次更值得期待。机器人行业下一阶段要比的,已经不只是「谁能让机械臂动起来」,还有谁能让它动作快一点、抓得准一点,以及成功之后,知道什么时候该停手。


参考链接:

https://artificialanalysis.ai/articles/aa-robotics

https://x.com/ArtificialAnlys/status/2110500262628806787


文章来自于"机器之心",作者 "Neo"。

AI转型,免费服务,就找AITNT
AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
智能体

【开源免费】AutoGPT是一个允许用户创建和运行智能体的(AI Agents)项目。用户创建的智能体能够自动执行各种任务,从而让AI有步骤的去解决实际问题。

项目地址:https://github.com/Significant-Gravitas/AutoGPT


【开源免费】MetaGPT是一个“软件开发公司”的智能体项目,只需要输入一句话的老板需求,MetaGPT即可输出用户故事 / 竞品分析 / 需求 / 数据结构 / APIs / 文件等软件开发的相关内容。MetaGPT内置了各种AI角色,包括产品经理 / 架构师 / 项目经理 / 工程师,MetaGPT提供了一个精心调配的软件公司研发全过程的SOP。

项目地址:https://github.com/geekan/MetaGPT/blob/main/docs/README_CN.md