​机器人正在“接管”旧金山

机器人正在“接管”旧金山

西风 发自 凹非寺

量子位 | 公众号 QbitAI

一批人形机器人在美国旧金山街头出没，引得过往行人驻足观望：

可能还去上了个课，从加州大学伯克利分校校门大摇大摆走出：

路线不对，踩着小碎步，稳健调头：

或者不装了，调什么头，直接倒着走：

在各种场景下都可以看到它们的身影：

于是乎，" 机器人正在接管旧金山 " 的消息已经传开了：

要不是视频中还有人类出镜，网友都要怀疑这是不是真的在旧金山：

这就是来自加州大学伯克利分校的人形机器人成果。研究人员提出了使用序列建模和动作预测的 Causal Transformer 模型。

使得人形机器人可以在室内外各种环境中稳健行走，应对不同地形，甚至还能背个书包，提袋垃圾：

怎么做到的？

此前，尽管一些人形机器人在特定环境下表现良好，但广泛存在泛化和适应新环境方面的问题。

来自加州大学伯克利分校的研究人员提出了运用 Causal Transformer 的方法。

这是一种特殊的 Transformer 模型，通过自回归从观察 - 动作历史信息中预测下一个动作，也就是模型的输出（预测的动作）只依赖于其输入（观察 - 动作历史信息）中的先前信息。

具体来说，在处理 " 观察 - 动作对 " 时，模型会将每个 " 观察 - 动作对 " 作为一个 token，并通过自注意力机制来学习这些 token 之间的关系。在自注意力计算中，模型会为每个 token 分配权重，这些权重反映了在预测当前动作时，序列中其他 token 的重要性。

由于 Causal Transformer 限制了自注意力只能考虑前面的 token，它能够捕捉到序列中的因果依赖，即当前动作的决策是基于之前观察 - 动作的历史信息。

通过这种方式，Causal Transformer 能够使机器人在复杂和动态的环境中，在没有未来信息的情况下做出适应性更强的决策。

训练阶段，研究人员使用 Isaac Gym 模拟器进行大规模并行训练，模拟了机器人的刚体和接触动力学。

为了模拟机器人的闭链动力学，引入了 " 虚拟弹簧 " 模型。在模拟中随机化机器人的动态属性、控制参数和环境物理属性，以及添加噪声和延迟到观察中。

从模拟到现实的转移方面，研究人员在机器人初创公司 Agility Robotics 提供的高保真度模拟器中验证策略，该模拟器准确模拟了 Digit 机器人的动态和物理属性。

经过实验，Digit 机器人能够在多种环境中可靠行走，展现出对外部干扰的鲁棒性：

以及在不同地形和载荷条件下的适应性：

△左，脚被绊住；右，下坡

顺带保持手臂摆动协调有力，不顺拐：

Digit 人形机器人

再来介绍一下 demo 中的这款人形机器人—— Digit。

背后公司 Agility Robotics，前身为俄勒冈州立大学的 Dynamic Robotics Laboratory。2022 年，获亚马逊投资。

Agility Robotics 的主要产品是以鸵鸟等鸟类为发想的双足步行机器人，主要研发成果包含 Cassie、Digit 两个机型。

其中 Cassie 是只有下半身的双足机器人：

至于 Digit，像是下面这个，已经成为亚马逊 75 万机器人员工中的一员，不过还处于测试阶段，负责搬运亚马逊标志性的黄箱子：

Agility Robotics 表示，将在今年向合作伙伴交付第一批 Digit，Digit 的初步应用包括仓库和配送中心内的散装材料处理，预计 2025 年全面上市。

他们最近还宣布开设了一家新机器人制造工厂 RoboFab™，声称第一年预计生产数百台机器人，之后每年产能最多可达 10000 台。Digit 也将在新工厂中上岗，进行搬运、装载等工作。