近期,全球具身智能大模型(机器人“通用大脑”)赛道热闹非凡,科技大厂、初创公司接连发布重磅消息。
国外:
10月底,美国科技巨头【Meta】旗下基础人工智能研究 (FAIR)公布公司触摸感应领域的三大进展:通用触摸编码器;具有多模态感应功能的人造指尖,用于触觉交互;集成触觉感应的机械手平台;它们协同工作,使机器人能够感知事物。
详细细节:
-
触摸感应技术Sparsh:为AI提供了一种无需庞大数据库即可识别压力、纹理和运动等内容的方法;
-
机器人指尖Digit 360 :将有关机器人正在触摸的内容的信息发送到AI模型,Digit 360 中的传感器非常敏感,因此AI不仅可以确定机器人所接触物体的细节,还可以施加适合涉及物体的任务的压力,例如提升或旋转物体;
-
Plexus 的系统:协同多个触摸传感器,Plexus可以模仿人类的触觉,足以处理易碎或笨拙的物体;
同谷歌、英伟达、Open AI等科技巨头一样,【Meta】也早已布局具身智能领域;2023年,Meta 与 CMU 联手打造「RoboAgent」(注:“RoboAgent”由来自Meta、CMU的研究人员用了2年的时间打造出的通用机器人智能体,突破了缺乏足够庞大的数据集来训练通用智能体和缺乏能够生成此类数据的通用智能体的困境。)
10月31日,拥有全球具身智能领域“最强创始团队”的机器人通用大模型初创公司【Physical Intelligence】(简称 PI或 π )发布成立以来首个机器人通用的机器人基础模型π0( pi-zero),被称为一种用于通用机器人控制的视觉-语言-动作流模型,参数量只有3B,就能控制机器人,帮你搞定各种家务;11月5日,公司宣布完成4亿美元新一轮融资,本轮投资由亚马逊创始人杰夫·贝索斯、风险投资公司Thrive Capital和Lux Capital领投,OpenAI、Redpoint Ventures和Bond等参投(注10月末,外媒报道,公司计划筹集3亿美元),投后估值约为24亿美元,取代另外一家机器人通用大模型初创公司【Skild AI】,成为具身智能大模型赛道初创企业估值最高且最快晋升独角兽企业。
PI和Skild AI两家初创公司有诸多相同点,创始团队、产品后续规划,可称为完全竞对;有关PI和Skild AI两家公司详细介绍,查看往期文章:估值约150亿!具身大模型初创公司最新成果:机器人通用基础模型“π0”
国内:
10月以来,国内多家以机器人通用大模型为卖点以及纯粹具身智能大模型初创企业接连完成大额融资(如:[星海图]完成超2亿元Pre-A轮融资以及[千寻智能]、[穹彻智能]、[自变量机器人]亿级融资,[星云智慧]、[灵初智能]千万级融资)。
10月,字节跳动ByteDance Research部门发布第二代机器人大模型GR-2(GR-2 的训练包括预训练和微调两个过程;在预训练阶段,GR-2 通过观看大量互联网视频学习人类的日常行为模式和世界环境,然后通过微调技术提升动作预测和视频生成能力)。
11月15日,华为(深圳)全球具身智能产业创新中心宣布正式运营(9月19日,在华为全联接大会2024在创新中心官宣启动),打造世界级具身智能产业创新中心;在同步举行的合作备忘录签署仪式上,乐聚机器人、兆威机电、深圳市大族机器人、墨影科技、拓斯达、自变量机器人、禾川人形机器人等16家企业共同与华为(深圳)全球具身智能产业创新中心企业完成签约,正式将国内具身智能领域推向高潮。
目前国内TOP科技企业(华为、腾讯、阿里、百度、字节等)也以投资和大模型赋能形式入局具身智能赛道,接下来重点梳理华为入局具身智能赛道。
华为多年前就有涉足机器人领域,2017年,华为就与爱丁堡大学、软银签订协议,围绕AI+机器人开展研发,随后陆续在控制系统、巡检机器人、机器人安全防护等相关领域注册专利;
涉足人形机器人领域,可追溯到2022年:
-
2022年4月,与达闼机器人签署合作协议,联合开展机器人应用领域技术攻关、行业应用等创新合作,共同推进人工智能和云端机器人产业发展。
-
2023年6月,华为全资成立了东莞极目机器有限公司,注册资本8.7亿元,但经营范围没有涉及人形机器人相关事项。
-
23年9月,华为云首席产品官介绍华为云机器人平台:类似华为汽车发力方向是车机,并不直接自己下场做机器人,而是为企业提供华为云机器人平台,助力企业制造开发、集成以及使用机器人。
-
2023年11月,乐聚机器人宣布,推出首款基于开源鸿蒙的KaihongOS人形机器人KUAVO(中文:夸父)
-
2024年3月15日,华为云与乐聚机器人签署合作协议,共同探索“华为盘古大模型 + 夸父人形机器人”应用场景,这是华为云合作的首个人形机器人企业。官方表示,华为云推出的盘古大模型具备强大的语义理解、动态规划、多模态信号理解等能力,将为人形机器人大模型的开发提供智能化决策基础。
-
2024年4月,乐聚机器人在全网发布了一段人形机器人参与家庭劳动的视频,视频中,机器人走进家庭,通过强化自主学习能力,成功完成了洗衣、浇花、插花以及晾衣服等家务任务。
-
2024年6月21日,华为开发者大会(HDC 2024)上,华为云CEO张平安宣布了华为盘古大模型5.0的正式发布;这一全新升级的AI大模型在全系列、多模态、强思维三个方面实现了重大突破,标志着华为在构建人工智能领域的另一极。
大会现场,搭载华为盘古具身智能大模型的「乐聚」升级版人形机器人“夸父”惊艳亮相,通过盘古具身智能大模型使得“夸父”在智能化、泛化能力上得到了显著提升。
目前,双方正基于华为云的算力和AI能力,赋能人形机器人大脑,同时基于乐聚本体设计和运动控制能力,对机器人小脑和肢体的研发工作展开持续攻关。双方的目标是开发出一系列高效的pipeline,打造出可复制且广泛适用的人形机器人产品及具身智能整体解决方案,并共同构建人形机器人的标准数据集、系统和工具链。
华为常务董事、华为云CEO张平安在大会上表示,除了人形机器人,盘古具身智能大模型还可以赋能多种形态的工业机器人和服务机器人,让它们帮助人类去从事危险和繁重的工作,“正如大家所期望的,让AI机器人帮助我们去洗衣、做饭、扫地,让我们有更多的时间去看书,写诗,作画。”
随着大模型赋能,原有以实现商业化落得的机器人产品,如工业机器人,企业应该获利颇丰,在原有产品基础上,通过大模型赋能,开拓更多应用场景。
本次华为盘古具身智能大模型亮相,对于国内人形机器人市场冲击绝对不亚于当时芯片巨头「英伟达」于GTC大会上,针对人形机器人领域所推出的大模型(GROOT)+开发平台(Isaac Lab)+算力(Jetson Thor)组合套装对国外人形市场冲击,想必后续华为也会推出类似「英伟达」的组合套装。
-
2024年6月24日,设立首个跨省级创新中心平台一华为(西南)数字机器人创新中心(去年10月开始筹备),该中心自运行至今已在20多家标杆企业中,落地80多个场景化机器人。
-
2024年11月15日,华为(深圳)全球具身智能产业创新中心宣布正式运营;据介绍,创新中心将整合华为2012先进制造实验室、2012伦敦研究所等各部门具身智能相关能力,聚合华为具身智能产业核心资源,建设具身智能基础实验室;联合龙头企业建设联合创新实验室;依托华为软硬件、应用生态伙伴等,打造全球具身智能产品技术交易旗舰平台。
相较于国外科技大厂早早入局具身智能赛道(如谷歌、英伟达等;谷歌已完成多次技术迭代,从Saycan到RT-H),国内科技大厂目前也逐步切入具身智能赛道,多数以投资和大模型赋能形式入局具身智能赛道,以往企业内部基本都有机器人相关研究部门进行技术积累和产品预研,现如今没有快速扩大团队,大概率原因是如今人形机器人商业化不明朗,先让初创企业去尝试,看到真正可落地商业化情景再加大投入,快速扩张团队。目前来看,自家大模型参与具身智能赛道分量极轻,并没有针对人形机器人推出专门大模型,更多以投资形式入局。
目前,华为是国内科技大厂入局具身智能典范。
阿里巴巴:
切入具身智能赛道以投资为主,今年已投资人形机器人初创企业【逐际动力】、【源洛科技】、【有鹿机器人】、【星动纪元】和【星海图】。
2023年4月,在第六届数字中国建设峰会上,阿里巴巴董事会主席兼CEO张勇透露,阿里云工程师正在实验将千问大模型接入工业机器人,在钉钉对话框输入一句人类语言,可远程指挥机器人工作。
阿里云当天发布的一个演示视频,展现了这一实验成果。
正如阿里云工程师所说,“AI大模型突破了机器人的局限,让人类可以通过自然语言指挥机器完成负责任务,让机器人真有了大脑。”
-
2023年,有鹿机器人联合阿里云通义千问共同发布了具身智能大模型LPLM-10B。LPLM模型将语言大模型和物理世界进行了创造性的融合,正好形成了完整的左右大脑功能,解决了传统具身模型延迟高、准确率低、泛化能力差等缺陷。
-
2024年3月,阿里研究院副院长安筱鹏接受采访时表示:“人形机器人作为通用机器人的代表和具身智能的载体,将成为AI与物理世界的接口。进入AI大模型时代,多模态大模型赋能人形机器人,将带来全新的变革。”
-
2024年6月,阿里通义千问还发布Qwen2大模型,并在Hugging Face和 ModelScope上同步开源,Qwen2系列涵盖5个尺寸的预训练和指令微调模型,这将进一步加快人形机器人的能力。
... ... ...
接下来,小编将详细盘点具身智能大模型领域,全球初创公司(PI、Skild AI、Covariant、有鹿机器人、X Square等)介绍及产品进展、全球科技巨头/大厂(谷歌、英伟达、微软、阿里、腾讯等)现阶段产品进展、人形机机器人本体厂家与科技巨头/大厂合作现状
... ... ...
本文内容仅展示一部分,更多详细解读,加入知识星球“机器人头条”,查看完整版文章:[原创]具身智能大模型赛道:科技巨头技术进展、初创公司盘点,第一款“机器人通用大脑”花落谁家(文字5W+),并深度了解“具身智能&人形机器人”赛道