谷歌拍了拍Figure说,“起来卷”

客服微996438438个月前财经知识196

6月28日消息,在谷歌的最新播客中,机器人在Gemini人工智能技术的加持下,未经教授就完成了一次“扣篮”动作,展现出迅速适应新场景的能力。

两天前的洛杉矶,运行着Gemini Robotics On-Device 模型的机器人还在RSS2025(机器人软件与系统大会)上完成了全球首个互动式现场展示。硅谷AI观察人士Ted Xiao表示,“它仿佛是对未来的神奇一瞥——只需与你的机器人对话,它就会做出适当的回应,并尝试执行一些合理的操作。新的物体、新的命令、新的技能。”

_谷歌地图拍到的图片_谷歌街景拍

谷歌Gemini Robotics On-Device 模型发布于6月24日,AI 被引入了机器人,在整个过程中不需要持续的互联网连接,机器人实现了脱机工作。

谷歌在X上表示,这是自己首个“视觉-语言-动作”模型,旨在能够帮助机器人更快、更高效地适应新任务和新环境。如果我们稍加回忆,今年2月底,Figure发布的“历史上最重大的人工智能更新”——Helix也是一款用于通用人形机器人控制的“视觉-语言-动作”(VLA)模型。

不同的是,由于谷歌家的这款模型独立于数据网络运行,它对延迟敏感的应用程序很有帮助,并确保了间歇性或零连接环境中的稳健性。

谷歌街景拍_谷歌地图拍到的图片_

事实上,早在今年3月,谷歌就推出了第一代VLA(视觉语言动作)模型Gemini Robotics,将Gemini 2.0的多模态推理和现实世界理解带入物理世界。

而作为双臂机器人的基础模型的新选手Gemini Robotics On-Device ,除了最大限度减少计算资源需求之外,主要解决3个问题:灵巧操作、新任务的微调和适应、基于本地运行的低延迟快速推理。

谷歌街景拍_谷歌地图拍到的图片_

官方演示视频中,这一对灵巧手不仅可以拿起一支笔,还可以相互配合拔掉笔盖。

谷歌地图拍到的图片_谷歌街景拍_

在接下来的测试中,这一对灵巧手完成了“放置蓝色的砖块”、“拉开中间的抽屉”和“归位‘梨’模型”的任务,显示出强大的视觉、语义和行为泛化能力,并且仅仅依赖自然语言指令——“Can you close the middle drawer”?

演示之外,基础跑分数据上,Gemini Robotics On-Device也有不俗的表现。

首先是泛化能力,谷歌直接拉出了“当家花旦”——旗舰 Gemini Robotics 模型和 Previous Best On-Device模型进行比拼。结果上,Gemini Robotics On-Device虽然略低于旗舰产品的表现,但也超出之前最好的离线模型一大截。

_谷歌地图拍到的图片_谷歌街景拍

而在分布式任务和复杂的多步骤指令方面,Gemini Robotics On-Device 模型的表现也优于其他设备端替代方案。

谷歌地图拍到的图片__谷歌街景拍

早在2月Figure的相关文章中就曾提到,“与受控的工业环境不同,家里堆满了无数的物品——精致的玻璃器皿、皱巴巴的衣服、散落的玩具——每件物品都有不可预测的形状、大小、颜色和纹理。为了让机器人在家庭中发挥作用,它们需要能够按需产生智能的新行为,尤其是对它们从未见过的物体。”机器人技术上的一大难题在于,举一反一简单,举一反三并不容易。

如何处理在训练样本中从未见过的任务,直接反映了机器人对新任务的适应能力。Figure家的Helix 给出的解法是使用一组神经网络权重来学习所有行为,建立了两个可以通信的“系统 1、系统 2”来分别完成“想”和“干”,而无需任何针对特定任务的微调。

而Gemini Robotics On-Device 给开发者提供了微调的选择,通过50 到 100 次演示即可快速适应新任务。微调任务的跑分如下:

谷歌街景拍__谷歌地图拍到的图片

在喂了Gemini Robotics On-Device 100个以内的示例之后,它展现出了如上图所示的适应能力。

谷歌还公布了这一性能的演示,并将其进一步调整到了双臂Franka FR3 机器人和Apptronik 的Apollo 人形机器人中。

在双臂 Franka 上,该模型执行通用指令,可以处理以前未见过的物体和场景、完成折叠衣服等灵巧的任务,包括需要精确度和灵巧性的工业皮带组装任务。

谷歌地图拍到的图片__谷歌街景拍

在阿波罗人形机器人上同样如此,通用模型可以遵循自然语言指令,以通用的方式操控不同的物体,包括之前从未见过的物体。

谷歌地图拍到的图片__谷歌街景拍

对此,有网友认为,谷歌的脱机AI机器人存在改变游戏规则的可能性。

谷歌地图拍到的图片__谷歌街景拍

当然,也有网友并不买账。提问这和特斯拉机器人的设计有什么不同,又和ylecun在Meta所做的工作有什么不一样。

谷歌地图拍到的图片_谷歌街景拍_

谷歌地图拍到的图片_谷歌街景拍_

在机器人/具身智能这个赛道,各家大模型正在“八仙过海”,技术向度展现出了多样性和丰富性,但最终指向了同一个命题——如何让AI在三维物理世界建立真正的因果认知。

或许正如谷歌在技术白皮书中所写:“机器人不应是人类的模仿者,而应成为物理世界的解读者”。

相关文章

惠城环保牛势不保

惠城环保牛势不保

富凯摘要:7月见顶之后,惠城环保股价回落超三成。 作者|蓝月 节前最后一个交易日,惠城环保盘中暴跌20%,引发市场关注。这家“变废为宝”的环保股因为掌握了某项技术而引发市场追捧,成为了10倍股。然而,...

量派、幻方等百亿量化进入前10!最新超额收益20强私募曝光

量派、幻方等百亿量化进入前10!最新超额收益20强私募曝光

近3年来,A股市场板块轮动频繁,投资难度不断加大。在此背景下,量化产品凭借持仓分散、决策高效的优势,取得了较为亮眼的业绩,受到投资者的广泛关注。 私募排排网数据显示,截至今年3月底,在近半年、近1年、...

平安MVP齐梅芳:跪行保险路,终成客户心中“再生父母”

平安MVP齐梅芳:跪行保险路,终成客户心中“再生父母”

在厦门一家弥漫着消毒水味的病房里,客户紧攥着齐梅芳的手,哽咽着说:“你就是我的再生父母。”这句话击中了齐梅芳内心深处最柔软的角落。20年前,她决定从国有银行跳槽卖保险,母亲曾斥责:“别找邻居卖保险,...

花呗信用额度如何提升,让消费更轻松!

花呗信用额度如何提升,让消费更轻松!

随着消费方式的不断发展,越来越多的人开始依赖于线上支付工具,其中,花呗作为支付宝推出的消费信贷产品,成为了很多人生活中不可或缺的一部分。它不仅可以帮助我们提前消费、延后付款,还能带来更加灵活的资金周转...

布局多金属引重估,这家铜锂龙头较年内低点涨181%

布局多金属引重估,这家铜锂龙头较年内低点涨181%

中矿资源“锂+铜+铯铷”多元业务协同发力,带动三季度营收、净利同比增35%、58%,业绩显著修复;铜矿板块通过赞比亚Kitumba项目及锗镓锌回收冶炼厂开辟新的成长曲线;铯铷业务凭借全球资源垄断,提供...

1.17亿!成都花园城大酒店股权债权捆绑转让,曾为中外合资四星级酒店

1.17亿!成都花园城大酒店股权债权捆绑转让,曾为中外合资四星级酒店

微成都报道5月23日,微成都获悉,成都花园城大酒店有限公司55%股权及7713.51万元债权正在西南联合产权交易所挂牌转让,转让底价为1.17亿元。 西南联合产权交易所网站截图 标的公司主要资产为成...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。
客服微信:BT86616点击复制并跳转微信