具身智能,是机器人的“冷饭热炒”吗?

5c0b6e6c68eb4826cebee3ed40579b03.jpeg

大模型正如火如荼,下一个AI风口就来了。

如果你关注2023世界人工智能大会等行业峰会,以及英伟达、微软、谷歌、特斯拉和国內科技大厂的最新发布会,除了“大模型”,应该会听到另一个高频词——具身智能。

所谓具身智能Embodied AI ,指的是有身体并支持物理交互的智能体。

简单来说,就是让AGI从数字世界走向实体世界,落地在机器人、机械臂、无人车、无人机,让实体世界中的机器人/仿真人具有智能,像人一样与环境交互感知,执行各种各样的任务。

4e67d4d62c256ce8af70a8bc78154ba9.png

从这个角度看,其实很多人都已经见过或者玩过具身智能产品了。索尼的机器狗AIBO,软银的服务机器人pepper,还有波士顿动力的人形机器人和机器狗……这些具身智能产品,曾是不少人的童年回忆,或者科幻恐惧。

虽然技术概念很超前,但这些产品的市场表现,其实并不太理想,技术落地难、产品被停产、企业被转卖,都不算新闻。

因此也有人认为,具身智能作为AI的终极形态之一,只是一些大厂推动的营销概念。

我们今天就来聊聊,具身智能的这一波热度,是机器人的“冷饭热炒”吗?

下一个AI风口

e29bf58d76f9f2a80d587d6082f1f1f5.png

古话说得好,遇到问题,先问是不是,再问为什么。

有必要先探讨一下,具身智能真的火了吗?

目前来看,AI学术界和工业界,确实已经将“具身智能”,作为下一个风口。

学术层面,不少科学家提出推论,大模型的技术路径打通之后,下一个突破是具身智能。

图灵奖得主、上海期智研究院院长姚期智认为,人工智能领域下一个挑战将是实现“具身通用人工智能”,即如何构建能够通过自我学习掌握各种技能并执行现实生活中的种种通用任务的高端机器人。清华大学计算机系教授张钹院士,也在某产业智能论坛上提出,随着基础模型的突破,通用智能机器人(具身智能)是未来的发展方向。

41e54b5e456587512795791a96895d31.png

(张钹院士的公开发言现场)

产业层面,谷歌、微软、特斯拉等科技公司近日都相继公布了自家的具身智能产品,国內头部科技大厂如华为、京东,也开始将自身在具身智能领域的相关布局,向大众布道。前不久印发的《北京市机器人产业创新发展行动方案(2023-2025年)(征求意见稿)》,也提出发展机器人“1+4”产品体系,加紧布局人形机器人研发与应用。具身智能的产业化、市场化潜力,正在加速积累。

如前所说,无论是现实生活中的机器狗、机械臂、无人车,还是科幻电影中的人形机器人,具身智能产品早已为大众所熟悉,但市场表现一直不温不火。为什么一夜之间成为风口了?

74969c7cc5ff85387e9327c7d345b9c6.png

和大模型“两开花”

这一波具身智能的热潮,让我想起了这张梗图。AGI起于大模型,终于具身智能。

591081851904970bc24611ce98b8903b.png

具身智能的概念,可以追溯到1950年,图灵在论文《Computing Machinery and Intelligence》中,提出机器像人一样能和环境交互感知,自主规划、决策、行动,并具备执行能力,是AI的终极形态。

历史上的两次人工智能浪潮,AI智能水平都达不到大众的预期,具身智能虽然诞生了波士顿动力这样的“炸裂”,但是作为一种未来概念和独特案例,并没有取得有成效的产业化进展。

当下正在第三次人工智能浪潮,具身智能的希望重燃,就在于跟大模型“两开花”。

具体来说,大语言模型让人们看到了AGI通用智能的希望,而这也让具身智能有了几个方面突破的可能性:

1.大模型——更厉害的“大脑”

我们知道,大语言模型和传统机器学习的区别,就在于泛化能力强,在复杂任务理解、连续对话、零样本推理等方向有了突破进展。这一突破,让机器人的理解力、连续决策力、人机交互能力,有了全新的解决思路。

微软研究院发布“ChatGPT for Robotics” 文章中提到,大型语言模型 (LLM) 将人的语言快速转换为机器人的高层控制代码,从而控制机械臂、无人机等机器人。

以前,由于传统AI不具备先验知识,理解力和泛化能力不足,机器人就无法像人一样拥有常识,必须要将一个指令由人类工程师分解成一连串简短的程式化程序,然后机器人(机械臂)再一步一步去完成每个动作。

这也使得高级别的具身智能,比如L5自动驾驶、人形机器人、机器狗等,人机交互无法满足现实中通用智能的需求,广泛应用的主要是机械臂、履带式搬运机器人等这类比较机械化的具身智能,只适应某一类设计好的特定任务。

有了大模型之后,机器人终于有了一个强大的“大脑”。

LLM可以帮助机器人更好理解运用到高级语义知识,自动化地分析自己的任务并拆分成具体的动作,这样与人类、与物理环境的互动更加自然,机器人也就显得更加智能了。

举个例子,让机器人倒一杯水,人类自动就会绕开室内的障碍物,但传统方式下,机器人并不具备“遇到障碍物水会打翻”这样的常识,经常会做错事,而大模型驱动的具身智能,就可以更好地理解这些知识,自动分解任务,不再需要工程师或者主人一步步地指导。

b5367701d53779c346bfbd09ac8c2f40.png

2.多模态——更丰富的“小脑”

“具身”所相对的概念是“离身”(Disembodiment),从中可以看到,具身智能的实现依赖于身体的感知,不能脱离身体而单独存在。

人类具有眼耳鼻舌身意,说明对于物理世界的充分感知和理解,是意识和智慧的来源。而传统AI更多的是被动观测,主要是“看”(计算机视觉)和“读”(文本NLP),这就使得智能体Agent缺乏对外部环境的通用感知能力。

以自动驾驶为例,无人车也是具身智能的载体,需要通过传感器、机器视觉、激光雷达等多种方式来感知物理世界的变化,成本昂贵,效果也不是很理想,至今依然没能实现L3级别的自动驾驶量产。

多模态大模型,可以积累和分析2D&3D视觉、LiDAR激光、Voice声音等多维信息,基于真实交互,为具身大模型积累高质量数据数据,深度理解并转化为机器指令,来控制机器人的行为。

有了感知能力更丰富的“小脑”,具身智能自然也就能更好的理解物理世界。

c4da032b4d4bffccf6c43e5bb987b140.png

3.精准决策——更灵活的躯干。

试想一下,如果一辆无人车,行驶过程中道路上突然冲出一个物体,它只能等着人类来判断“当前是什么情况”,下达指令“应该干什么”,那黄花菜都凉了,万一冲出来的是人,那实在是太危险太不可靠了。

传统的机器人训练往往采取pffline离线模式,一旦遇到训练环境中没有出现过的问题,就可能掉链子,需要收集数据再重新迭代优化,这个过程的效率很低,也减慢了具身智能在现实中落地的速度。

大模型时代,具身智能模型的训练与测试,与云服务相结合,可以在云上虚拟仿真场景下,进行端到端的实时训练与测试,快速完成端侧迭代与开发,这就大大加速了具身智能体的进化速度。

具身智能体在模拟出来的场景中无数次地尝试、学习、反馈、迭代,积累对物理世界的深度理解,产生大量交互数据,再通过与真实环境的不断交互积累经验,全面提升在复杂世界的自动移动、复杂任务的泛化能力,展现在具身载体上,就是机器人可以更好地适应环境,更灵活地运用机械“躯干”来进行人机交互。

一句话总结,和大模型“两开花”,将通用人工智能落地(Embodiment物理身体),为具身智能打开了新的想象空间。

能抓老鼠才是好猫

ea606016dc8cd4d4d37041ac2e7093b0.png

理论归理论,实践归实践。我们总说能抓住老鼠的才是好猫,那么实现具身智能,究竟有几种“抓老鼠”的方式呢?

目前,主要以两种路线为主:

一种是谷歌、伯克利等为代表的“未来派”,主打的是“一步到位”。

具体来说,这类研发机构是从具身智能的终极目标出发,希望从当下到终点,寻找一个端到端的技术路径,所给出的方案,往往采取“紧耦合”的方式,希望一个大模型就能包办所有,让机器人完成识别环境、分解任务、执行操作等所有工作,非常难,也非常有未来感。

比如今年三月谷歌推出的PaLM-E,就是一种多模态具身视觉语言模型(VLM),让机器人可以基于大模型,来理解图像、语言等数据,执行复杂的指令,而无需重新训练。

20910a222646becf1ff47d7eec82ec11.png

加州大学伯克利分校的LM Nav,则通过视觉模型、语言模型、视觉语言模型 CLIP等三个大模型,让机器人在不看地图的情况下按照语言指令到达目的地。Koushil Sreenath教授的工作,就是推动硬件本体、运动小脑、决策大脑三部分逐渐融合,让各种四足、双足,以及人形机器人在真实世界中灵活地运动。

另一种,是英伟达及大量工业机器人厂商为代表的“务实派”,主打的是“马上见效”。

“未来派”一步到位的路线虽然看起来很酷,但耗时漫长,距离产业可用还比较遥远,成本昂贵,产业客户未必能够接受。在种种不确定之夏,满足工业界需求,就出现了以松耦合来实现具身智能的技术路线。

简单来说,就是不同任务通过不同模型来实现,分别让机器人学习概念并指挥行动,把所有的指令分解执行,通过大模型来完成自动化调度和协作,比如语言大模型来学习对话、视觉大模型来识别地图、多模态大模型来完成肢体驱动。

这种方式虽然底层逻辑上看还是比较机械,不像人一样有综合智能,但成本和可行性上,能让具身智能更快落地。

哪种路线更优?坦率地说,我们认为都有其局限性。

紧耦合的“未来派”,硬科技的含量显然更高,在突破后很容易和LLM一样给产业带来颠覆式的变革,让此前的大量工作成为无用功,但问题是商业化的周期很长,谷歌此前就曾将一门心思在人形机器人的波士顿动力出售,这一轮能坚持多久还是未知数。

松耦合的“务实派”,确实能很快落地产业应用,但技术壁垒相对不高,随着AI玩家增多,存量市场逐渐被开发,毛利率必然会在同质化激烈竞争中受到挤压,商业前景会很快到达天花板。此前国內某机器人龙头企业,就因为技术含量不高而折戟科创板,这说明具身智能产业还是要笃定远一点的未来,积累硬核科技。

星辰大海与商业赚钱之间的沟壑,是每一个AI企业都要穿越的“死亡之谷”。

f319c448c03f5afbd02e26066c07c035.png

我们对机器人还有哪些期待?

LLM方兴未艾,距离通用智能只是理论可行,究竟如何实现,还有很长的路要探索。从这个角度看,被大模型带火的具身智能,目前也还留在语言、视觉这两个经典的AI任务领域,能否进一步突破,前途也很朦胧。

既然如此,为什么学术界和产业界依然将其作为下一个AI风口来布道呢?原因或许在于以下两点:

从学术上看,具身智能是行为主义的极致。人工智能的两大门派:符号主义和联接主义。联接主义也叫行为主义,不追求意识的本质,希望用人工神经网络模拟人的行为,让机器“看起来像人”,让人形机器人成为现实,具身智能就是行为主义发展到极致的表现之一。所以,从学术上倡导向具身智能发展,是符合技术向前演进的路线的。

0b734458ead69a9fb3c62173910f20ee.png

从产业上看,产业智能化的浪潮,确实让物理世界和数字世界的交互增多了,只有AI软件是不够的,必须要能驱动物理实体,比如工业场景下的抓拿放,可以取代人工操作的繁琐和危险,在煤矿井下作业、港口仓库搬卸、搬家快递服务、清理事故现场和救灾等领域,由机器人来代替人类,完成一些危重工作。同时,大模型、云计算、边缘计算等技术相结合,有望大大降低具身智能的研发和应用成本,这对于机器人产业的推动作用是巨大的,这时候探索和占坑也有其战略意义。

当然,现在就投入具身智能,有没有风险呢?

也是有的。说一个最恐怖的,我们都知道人工智能产业的发展,是在符号主义和联接主义之间做钟摆运动,如果有一天,钟摆向另一方摆动,那么已经投入到行为主义这一技术路线的大量市场资源、基础设施投资、人才储备等,又该何去何从呢?

更加具体的挑战也有不少。

比如数据的挑战,具身智能的数据,不同于“纸上谈兵”的算法,只能从与物理世界的交互中获得,具有很大的隐私性、高成本、敏感性,不能批量生产,这就对能力优化迭代造成了限制。

再比如,收集来的数据一般是不能直接拿来训练的,要整理转换成有意义的语料库,再让大模型学习,这个开发过程是非常繁琐的,又增加了研发的成本。

此外,广大用户对于具身智能的机器人的安全性要求非常高,如果家政服务机器人将水倒在了插电孔,机器狗摔倒压住了小朋友,这些故障都是商业上不可能被接受的,可靠、可用、可市场化的具身智能,目前看还比较遥远,需要长期投入。这意味着具身智能目前看来依然是大厂的游戏。

fc4655114a224f78f843512734ce0c50.png

无论如何,大模型的普及,大大加快了具身智能的研发和落地速度。人工智能这个学科诞生以来,人类就希望能像“女娲”一样,创造出和自己类似的通用机器人。具身智能,就是这个梦想的具体承载方式。

今天,我们终于可以将“具身智能”,作为一个产业风口来畅想和实现了,能够见证这件事的发生,已经十分值得人类为之自豪。

e872d203358c25f1293580d632d92bd6.gif

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/44409.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

实用的设计模式08——适配器模式

适配器的单词是Adapter,我们在开发时经常碰到叫做XxxAdapter的类,此时一般就是使用了适配器模式,适配器模式是非常常用,本文就对适配器模式做一个简单的介绍 文章目录 1、真实开发场景的问题引入2、适配器模式讲解2.1 核心类及类图…

前端:运用html+css+js模仿百度热搜电影榜鼠标移入特效

前端:运用htmlcssjs模仿百度热搜电影榜鼠标移入特效 1. 实现原理2. 界面布局3. js实现对鼠标移入和移出的监听4. 参考代码如下: 1. 实现原理 百度热搜上电影榜鼠标移入特效如上图所示。个人觉得上述特效实现原理为使用相对定位、绝对定位实现的(鼠标移入和没有移入…

关于ETL的两种架构(ETL架构和ELT架构)

ETL,是英文 Extract-Transform-Load 的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。ETL一词较常用在数据仓库,但其对象…

华为、阿里巴巴、字节跳动 100+ Python 面试问题总结(五)

系列文章目录 个人简介:机电专业在读研究生,CSDN内容合伙人,博主个人首页 Python面试专栏:《Python面试》此专栏面向准备面试的2024届毕业生。欢迎阅读,一起进步!🌟🌟🌟 …

第五课:Figma 玻璃拟态页设计

效果展示 通过背景模糊实现玻璃拟态效果 选择合适的背景,绘制形状,给形状添加 Effects,点击下方的下拉选择框,选择 background blur;添加后会发现,画面无任何改变,调整 Fill 后面的百分比&…

6.运算符

6.1赋值运算符 ➢已经学过的赋值运算符: ➢其他赋值运算符: 、-、*、/、% 6.2 一元运算符 众多的JavaScript的运算符可以根据所需表达式的个数, 分为一元运算符、二元运算符、三元运算符 ●二元运算符: 例:let num1020 ●一元运算符: 例…

windows系统修改mysql8配置文件,关闭ssl验证

如何寻找配置文件 我的电脑,右键,管理,服务 找到MySQL8 右键,属性 找到配置文件位置 通常情况下的默认路径是: C:\ProgramData\MySQL\MySQL Server 8.0\my.ini 如何关闭SSL验证 打开 my.ini 配置内容如下&#x…

ant design vue a-table表格中插入操作按钮(以switch开关 [a-switch]为例)

1.给columns添加列属性 columns() {sortedInfo sortedInfo || {};return [{title: "工程",dataIndex: "outputProject",width: 80},{title: "是否显示小数",dataIndex: "showDecimalsOrnot",width: 80,scopedSlots: { customRender:…

Idea中git push to origin/master was rejected错误解决方案

Idea中git push to origin/master was rejected错误解决方案 问题描述解决方法 问题描述 idea开发中,需要将项目发布到gitee上,在gitee上创建仓库后,通过idea中git推送项目代码提示: push to origin/master was rejected 解决方法 gitee创建仓库时创建了README.md文件,本地…

Vue中TodoList案例_静态

MyHeader.vue <template><div class"todo-header"><input type"text" placeholder"请输入你的任务名称&#xff0c;按回车键确认"></div> </template><script> export default {name: "MyHeader"…

Postman怎么做接口测试-以简单的登录接口为例

我们就以登录某测试系统为例子&#xff0c;实现在Postman上做接口测试 一、首先打开系统首页首页&#xff0c;做一个登录操作&#xff08;目的是获取接口url及参数&#xff09;&#xff1a;一般在公司做接口测试的时候页面还没有出来&#xff0c;我们需要根据接口文档进行接口…

Terraform学习日记-AWS-EC2

terraform install https://developer.hashicorp.com/terraform/tutorials/aws-get-started/install-cli 这里我们使用 aws-linux-2022 作为执行环境 # sudo yum install -y yum-utils# sudo yum-config-manager --add-repo https://rpm.releases.hashicorp.com/AmazonLinux/…

【Flutter问题记录】Android Studio不显示(右上角main.dart左边)设备栏

记录一下今天遇到的情况&#xff1a; 用android studio打开项目&#xff0c;我检查了&#xff0c;已经配置了flutter sdk和android sdk&#xff0c;但是右上角main.dart左边的设备栏就是不显示。 解决方法&#xff1a; 恢复如初&#xff1a;

统一观测丨使用 Prometheus 监控 Cassandra 数据库最佳实践

作者&#xff1a;元格 本篇内容主要包括四部分&#xff1a;Cassandra 概览介绍、常见关键指标解读、常见告警规则解读、如何通过 Prometheus 建立相应监控体系。 Cassandra 简介 Cassandra 是什么&#xff1f; Apache Cassandra 是一个开源、分布式、去中心化、弹性可伸缩、…

Ubuntu录屏软件Kazam

1. 安装 1.1. 桌面右键“打开终端” 1.2. 安装kazam这款软件。 sudo apt-get install kazam 2. 使用 2.1. 安装后打开&#xff0c;我们看看这款软件界面还是很友好很简洁的。 2.2. 除了录像我们还可以截图&#xff0c;也可以选择全屏、窗口、区域的方式录制。 2.3. 如果要录…

构建自己的ChatGPT:从零开始构建个性化语言模型

&#x1f337;&#x1f341; 博主 libin9iOak带您 Go to New World.✨&#x1f341; &#x1f984; 个人主页——libin9iOak的博客&#x1f390; &#x1f433; 《面试题大全》 文章图文并茂&#x1f995;生动形象&#x1f996;简单易学&#xff01;欢迎大家来踩踩~&#x1f33…

【Unity2D】设置一物体默认在其他物体之上不被遮挡

比如我想让机器人显示在箱子的前面。 点击箱子&#xff0c;将其层级设置在机器人的后面。 即修改箱子的Order in Layer 在机器人之后 物体默认的Order in Layer 都是0 &#xff0c;将箱子的Order in Layer修改为-1即可 这样将确保先绘制机器人&#xff0c;然后绘制箱子。这样…

【小黄碎碎念】如何解析和替换字符串中的 Markdown 文本?正则表达式与 flexmark-java 库

前言 本周&#xff0c;笔者将之前的基于 Servlet 的个人博客项目进行了迭代&#xff0c;基于 SpringBoot SpringMVC Mybatis Redis 进行实现。额外实现密码的明文加密处理&#xff08;加盐算法&#xff09;、修改随笔、随笔主页等功能&#xff0c;并将 session 存储到 Redis…

App测试中ios和Android的区别

1、Android长按home键呼出应用列表和切换应用&#xff0c;然后右滑则终止应用&#xff1b; 2、多分辨率测试&#xff0c;Android端20多种&#xff0c;ios较少&#xff1b; 3、手机操作系统&#xff0c;Android较多&#xff0c;ios较少且不能降级&#xff0c;只能单向升级&…

ffmpeg中filter_query_formats函数解析

ffmpeg中filter_query_formats主要起一个pix fmt引用指定的功能。 下下结论&#xff1a; 先看几个结构体定义&#xff1a; //删除了一些与本次分析不必要的成员 struct AVFilterLink {AVFilterContext *src; ///< source filterAVFilterPad *srcpad; ///<…