斯坦福超火机器人大翻车!研究者自曝内幕

爆火的斯坦福全能家务机器人Mobile ALOHA

,大!翻!!车!!!

你以为它擦个红酒轻而易举,但实际上却是这样的:

c6823d5bed1c6fa96d4e4efca1ad4df0.gif

全给你弄撒喽,顺带碎个杯子

……

你以为它能化身大厨娴熟烹炒,结果给你上演一个炒锅底:

6947d8287254aeaf0eb748ec7b81bb40.gif

Mobile ALOHA的翻车大合集还不止这些。

例如刚才炒完虾的锅,哎呦喂,一不小心没拿住:

d3a6ccc34af4a419aba9f08aa1ba8ff1.gif

即使小哥一个箭步冲上去也没阻止“悲剧”的发生(好像还烫到手了)。

这画面,真是像极了庄嫂摔碗……

3bfc1f016123f95db82a3b80a2035b5a.gif

昨天还在“神坛”上的Mobile ALOHA,一夜之间便被曝出了这么多“笨手笨脚”的样子,也是引来不少网友的围观。

然而,这次即使面对翻车铁证,网友们的画风却是一反常态:

它并不完美,不过很可爱。

94ed8e7a36727d1514fb142f7d0c11da.png

总会有犯错的余地。

e1d10adb88acded4e991c18f827fae81.png

最重要的是:

放心了。(手动狗头)

f9ddf7104ac1743bf4deed79fcc52854.png

这到底是怎么回事?

斯坦福团队自曝“丑闻”

原来,这段机器人大翻车的视频,就是由斯坦福Mobile ALOHA的作者Tony Z. Zhao发布的。

afadadd2238a6a58865a838e96a00a26.png

并且他还直言不讳地说道:

机器人还没有做好准备接管这个世界。

而这段翻车视频,正是机器人完全在自主模式下所犯的。

用作者的话来形容,就是“最愚蠢的错误”。

毕竟除了刚才我们展示的几个例子之外,Mobile ALOHA甚至连锅都放不进橱柜里:

02323a55f1c1389fd06ffe75270dd4ac.gif

炒完的虾粘锅倒不出来不说,连碗的位置也找不到:

ad57f1e801ab2d04aca9c96825a8f8a1.gif

拿支笔也没法找对位置下手:

34ae919bf3988551fbc2395aaed8818e.gif

面对失败合集,作者却是打趣道:

这是我目前为止最喜欢的视频了,(不过)当机器人在你面前犯错的时候,你就不会觉得那么有趣了。

03b93b3264c73ea273c6d4ad9acefce3.png

确实,毕竟手都被烫了……

不过作者今天自曝这段视频其实应该还有另外一个原因。

因为前两天Mobile ALOHA神级现场的视频确实引来了不小的关注度,不过很多人误以为这是它在自主模式下完成的。

但其实,Mobile ALOHA采用的是混合模式,并非完全自主,作者也呼吁网友们在吃瓜的同时认真看下论文和代码。

8cd40177b3869c2982a87d0781237266.png

值得一提的是,作者还引用了2015年波士顿动力Atlas人形机器人“翻车合集”并向它致敬。

e222aa418ea7cc7f1a8118da728cc969.png

或许这也正如英伟达科学家Jim Fan说的那样:

一步一个脚印。

b3fcf4785aab790c7f72c69f817ec410.png

学习50次,成功率能到90%

就在这两天,Mobile ALOHA团队连续放出三个爆火视频,展示了该机器人敏捷灵巧的家务能力,看呆网友。

包括做满汉全席(磕鸡蛋、给鸡肉翻面这种细活都信手拈来):

69de829b056fb384aebfda669fd1c003.gif

套枕套铺床单:

8746f500675de5fee2a9e9b224e8b469.gif

浇花、拖地板、开瓶盖,甚至逗猫猫:

2478ff983110ca4586c29df4125dc67e.gif

那叫一个人模人样,上得厅堂下得厨房。

不过,大部分都是真人操控的,比如上面这些。

更直观的可以看下面这个抽纸擦玻璃的动图,背后直接站了个人类1:1示范:

c7f2ad717b526fbeb556fb9e008f7ec6.gif

不过,对于一些相对简单的任务,例如这个单炒虾仁:

c5353332b22144e031a5baa0f70e4552.gif

还有刷锅、将餐椅归位、呼叫并乘坐电梯、擦桌子等等,只需真人少量示教,它就可以学会,然后脱离人类进行自主操作。

具体而言,作者介绍,上面这些简单动作目前只需要学习50次就可以做到90%的成功率——

经测试,Mobile ALOHA可以连续9次擦干倒洒了的酒、连续呼叫5次电梯都不会出错,能够保持一定的稳定性。

除此之外,它还能抗干扰,在完成归置锅具到柜子之中时,实验人员不停向它面前投掷杂物,都完全没有影响它发挥:

41d8361f475f4249f10c66009e470bfc.gif

在训练期间根本看不见的椅子?它也能准确识别并完成归位任务。

那么,作者是如何仅通过50个演示就让Mobile ALOHA实现自主任务的呢?

最关键的是通过ACT或扩散策略进行模仿学习,然后和静态操作数据一起对机器人系统进行联合训练。

有了这一联合训练方式,机器人的性能可以显著提高,尤其是那种需要精确操作的任务。

de9a666466cea7fde3b538331d21f8ce.png

最后,也再次为介绍一遍斯坦福大学的这个机器人成果:

它于今年3月底正式发布,历经了8个月的迭代和2个月的测试。

一共三位作者,其中两位为斯坦福计算机科学专业的华人博士生(最后一位是导师):

06e8a46a44c972f8fbc53b21e0cbee05.png

当时的这位机器人,就已经能够利用工具完成各种精密细活了,只不过只能在固定的位置:

41d8361f475f4249f10c66009e470bfc.gif

当然,背后也是真人遥控的。

而正如其名ALOHA全称是“???? ????ow-cost ????pen-source ????????rdwareSystem”,这款机器人主打的就是开源和低成本:

全部软硬件设计包括代码和数据都一并发布,而搭建这一个系统“只”需3.2万美元(约合22.7万人民币),具体需要哪些硬件,作者还列了个清单,感兴趣的朋友可以照着DIY。

b8e0325985e2dd309230f0fd02a95b23.png

机器人元年?

几乎和斯坦福的爆火机器人同一时间,谷歌也发布了自家最新的研究成果,并且是一气发了仨:

一个是将机器人决策速度提高14%,同时保持操作准确率不变并增加了10.6%的改进模型;

一个是专攻泛化能力的新框架,用了一种全新方法让机器人完成从未见过任务的成功率从29%提升至63%;

715539167b82ef502fa4c217f1532e0c.gif

以及一个可以同时容纳20个机器人的收据收集系统,将用于加快机器人理解人类指令的能力的训练。

这些新成果全部用于升级谷歌的机器人大模型RT-2。

和斯坦福的Mobile ALOHA对比起来,谷歌的RT-2表现还是高冷一些,但它所有效果都是全自主的。

eac7b87330514dbcb97b68ab7c9079f2.gif

除了这两家,李飞飞团队也一直在跟进,其名为VoxPoser的机器人系统也已经可以听懂人话完成各种指令,并且无需额外训练。

6aef49da7eed87c7b05ef58f71735270.gif

这不由地让人想到,不少人那句“2024会是机器人元年”的预言:

a42a125cf0c5986ed0de1e762a99e64f.png

你觉得会成真吗?

参考链接:

上一篇 2024/01/07 14:01
下一篇 2024/01/07 14:02

相关推荐

  • 550余人罹难、近千人失联!尼泊尔顶不住多国施压 松口接受国际救援

    尼泊尔博特科西河与特里苏里河沿岸遭逢特大洪灾,已致550余人死亡、977人失踪,其中517人为外籍人士。面对多国外交施压,尼泊尔一度拒绝外国救援队入境,最终改口同意印度、中国大陆、澳洲及韩国专家有限度协助搜救。

    2026/08/29
    00
  • 终战81年致辞回避「反省」二字,高市早苗与天皇关系传出紧张信号

    日本《周刊文春》披露,高市早苗在终战纪念日致辞中未提「反省」与「不战誓言」,其历史观与天皇立场明显有别,双方在「内奏」场合的互动气氛也被指相当微妙,事件持续引发日本舆论关注。

    2026/08/29
    00
  • 重磅突破!一次基因编辑,竟让坏胆固醇稳降50%长达一年

    科学家首次证实,一次性基因编辑疗法可让堵塞心脏的坏胆固醇及三酸甘油酯在一年内维持约50%降幅,且安全无明显副作用。专家称,若大规模试验结果一致,这或将成为心脏病治疗的重大突破。

    2026/08/29
    00
  • 不止日本!美国西部惊爆「人熊大战」,闯民宅进商店的熊只数量创新高

    美国西部遭遇史上最严重人熊冲突:干旱冬季让黑熊食物几近枯竭,大批饥饿黑熊闯入城镇觅食,科罗拉多、新墨西哥、犹他等州目击及安乐死熊只数双双刷新纪录,多起致命袭击事件同步发生,专家警告秋冬恐更恶化。

    2026/08/29
    00
  • 43岁刘翔在线求助:教练还是买断?网友票选“别打工了”

    刘翔晒出雅典奥运参赛号码布,公开向网友求助:体育局给出教练或买断两个选项,他直言两个都不想要。11年“退役未安置”背后,是运动员转型难题的一个缩影。

    2026/08/29
    00