3月14日,美国明星 机器人 创业公司Figure发布了自己第壹个OpenAI大模型加持的 机器人 demo。虽然只用到了一个神经网络,但却可以听从人类的命令,递给人类苹果、将黑色塑料袋收拾进框子里、将杯子和盘子归置放在沥水架上。Figure表示,结合OpenAI(的ChatGPT等语言模型),Figure 01现在可以与人类全面对话。
Figure开创人Brett Adcock表示,视频中Figure 01展示了端到端神经网络框架下与人类的对话,没有任何远程操作。并且, 机器人 的速度有了明显的提升,开始接近人类的速度。
值得强调的是,Figure AI已经成为马斯克的“擎天柱”之外最受投资人关注的AI草创企业之一。英特尔的危险基金和“木头姐”Cathie Wood的Ark Invest、Align Ventures和现有投资者Parkway Venture Capital也参与了Figure AI的投资。
Figure首发OpenAI 机器人
本周三,半个硅谷都在投的明星 机器人 创业公司Figure,发布了自己第壹个OpenAI大模型加持的 机器人 demo。
这家公司不久前刚宣布获得OpenAI等公司的投资,才十几天就直接用上了OpenAI的多模态大模型。
如你所见,得到OpenAI大模型能力加持的Figure 01如今是这个样子的。
图片来源:视频截图
它可以为听从人类的命令,递给人类苹果。
图片来源:视频截图
将黑色塑料袋收拾进框子里。
图片来源:视频截图
将杯子和盘子归置放在沥水架上。
需要强调的是:你看到的这一切,只用到了一个神经网络。
有网友调侃道:“波士顿动力:好的,伙计们,这是一场真实的竞争。让我们回到实验室,设计更多舞蹈套路。”
Figure开创人Brett Adcock表示,视频中Figure 01展示了端到端神经网络框架下与人类的对话,没有任何远程操作。并且, 机器人 的速度有了明显的提升,开始接近人类的速度。
Figure 机器人 操作顶级AI工程师Corey Lynch介绍了此次Figure 01的技术原理。他表示,Figure 01现在可以做到以下这些:
描述其视觉体验;
规划将来的行动;
反思自己的记忆;
口头解释推理过程。
他接着解释道,视频中 机器人 的所有行为都是学到的(再次强调不是远程操作),并以正常速度(1.0x)运行。
另外,该模型负责决定在 机器人 上运行哪些学习到的闭环行为以完成给定的命令,从而将特定的神经网络权重加载到GPU上并执行策略。
关于学到的低级双手操作,所有行为均由神经网络视觉运动transformer策略驱动,将像素直接映射到动作。这些网络以10hz的频率接收机载图像,并以200hz的频率生成24-DOF动作(手腕姿势和手指关节角度)。
最后他表示,即便在几年前,自己还认为人形 机器人 规划和执行自身完全学得行为的同时与人类进行完整的对话是几十年后才能看到的事情。显然,目前已经发生了太多变化。
Figure获微软、英伟达等投资
据外媒报道,美国人形 机器人 草创公司Figure AI于2月29日宣布,该公司获得了来自微软、英伟达、OpenAI和亚马逊开创人贝佐斯等投资人约6.75亿美元的新一轮融资。
这是该公司继去年上半年获得首轮7000万美元外部融资之后宣布的最新融资动态,这也使得该公司的估值达到26亿美元左右。Figure AI表示,将利用这笔新的融资资金加速其人形 机器人 的开发,以投入商业用途。
Figure AI已经成为马斯克的“擎天柱”之外最受投资人关注的AI草创企业之一。英特尔的危险基金和“木头姐”Cathie Wood的Ark Invest、Align Ventures和现有投资者Parkway Venture Capital也参与了Figure AI的投资。
Figure AI建立于2022年,该公司已经开发了一款名为Figure 01的通用 机器人 ,其外观和动作与人类相似,目标是能够用来执行替代人类的危险或无聊的工作,例如在制造、运输和物流、仓储和零售等行业。这些领域被认为是“劳动力短缺最为严峻的领域”。
Figure AI还表示,将与OpenAI合作,为人形 机器人 开发下一代 人工智能 模型,最终目标是让Figure 01能够自主执行“日常任务”。而要实现这一目标,需要开发更强大的 人工智能 系统。另外,Figure AI将使用微软的Azure云服务进行 人工智能 基础设施、培训和存储等方面的部署。
目前在人形 机器人 领域,最颇有知名度的是 特斯拉 总裁马斯克的“擎天柱”。就在3月初,马斯克在社交平台X上发布了一个最新的“擎天柱”视频,这款人形 机器人 的步态更加接近于人类,可以实现自然转弯等能力。
“擎天柱”首席工程师Milan Kovac表示:“这是我们有史以来最快的步态,速度约为0.6米/秒,与12月份发布的上一个视频相比,速度提高了30%。”
据介绍,新版“擎天柱”的前庭系统、脚部轨迹,和地面接触逻辑得到了改进,运动规划器得到升级,整个 机器人 的环路延迟也大大缩短;另外,研究团队还为其添加了一点躯干和手臂的摇摆动作,使行走看起来更加自然。
然而,人形 机器人 市场尚处于发展的萌芽阶段。人形 机器人 的开发成本昂贵,包含执行器、电机和 传感器 等价格昂贵的组件。高盛科研人员表示,这些成本预计在未来几年会下降。高盛预计,单个人形 机器人 的开发成本已经从去年的5万美元至25万美元下降到当前的3美元至15万美元之间。