BEV+Transformer感知架构共识下,传感器「火药味」再升级

高阶智能驾驶战火愈演愈烈,正带动感知方案卷入新一轮军备竞赛。

根据高工智能汽车研究院最新发布数据显示,2023年1-9月,中国市场(不含进出口)乘用车前装标配(软硬件)NOA交付新车37.73万辆,同比上年同期增长151.20%。未来几年内,NOA(从高速到城区)的普及化将是高阶智能驾驶市场的主旋律。

叠加技术、市场和政策等多方因素,智能驾驶质变加速。大模型算法的应用,不断突破自动驾驶ODD的上限,从感知到决策控制端到端的自动驾驶模型有望成为未来发展方向。

具体到感知端,传感器配置持续“内卷”,多传感器信息融合成为关键课题。基于BEV+Transformer做特征融合,有利于解决图像尺度问题和遮挡问题,更好地实现向量空间的构建,逐渐成为智能驾驶感知的主流范式。

另外,在AI大模型的助力下,通过算法提前融合摄像头、激光雷达、毫米波雷达、超声波雷达等不同传感器的数据信息特征,进一步提升了智能驾驶的感知能力。同时,借助大模型优化CornerCase的处理,以及动态语义地图,可减少对高精地图依赖。

有业内专家表示,基于Transformer模型,智能驾驶有望实现感知与决策一体化,实现端到端的大模型,即模型输入传感器数据、直接输出控制信号,以避免智能驾驶开发架构现存的累计错误或任务协调不足等问题。

而上述智能驾驶趋势,也驱动着摄像头、超声波雷达、毫米波雷达、激光雷达等传感器的变革。有关各细分传感器的应用痛点、成本问题、市场增量机会等话题,热度有增无减。

元橡科技冠名的2023(第七届)高工智能汽车年会专场一,来自德赛西威、毫末智行、元橡科技、睿创微纳、元视芯、哆来目、晟泰克、魔视智能、复睿智行、亮道智能、禾赛科技、威孚高科等行业专家,围绕车载摄像头、超声波雷达、毫米波雷达、激光雷达等传感器的新变革、新趋势,发表了精彩的主题演讲。

其中,赛西威智能驾驶事业部产品负责人赵洋发表了《车载摄像头未来趋势的思考》主题演讲。

图片

德赛西威智能驾驶事业部产品负责人赵洋

他表示,作为智能驾驶系统不可或缺的核心传感器之一,摄像头的性能在不断升级,具体表现在技术成熟、性价比高、采集信息丰富,同时单车用量大幅提升。

随着新结构设计、新材料应用,以及芯片、产品制造工艺流程升级,摄像头向着高像素、小Pixel Size方向发展。且随着单车传感器配置数量不断攀升,降本压力持续下放,高像素、散热快,高效的自清洁和多场景覆盖、多功能复用,是摄像头的三大技术需求新变革。

具体表现在,大算力芯片快速发展、大模型算法的应用,以及“大屏”时代,高像素摄像头可以提供极致的用户体验价值;L3/L4级自动驾驶商业化加速,摄像头高效的自清洁功能产品竞争力的核心;Transfer + BEV视觉算法架构的快速迭代以及产品内卷,功能下沉,摄像头复用是必然趋势。

毫末智行上海研发中心负责人孙宣峰发表了《自动驾驶 3.0 时代,大模型重塑汽车智能化技术路线》主题演讲。

图片

毫末智行上海研发中心负责人孙宣峰

根据介绍,毫末智行此前已发布第二代三款HPilot 智能驾驶产品:HP170、HP370和HP570,可满足高、中、低不同价位的市场需求,并且均会在2023-2024年先后量产上车。毫末智行的目标是把“极致性价比”’打出来,依托近年积累的工程经验和对用户使用数据的深入挖掘”,让中阶智驾便宜更好用,让高阶智驾好用更便宜。

孙宣峰表示,支持毫末HPilot智驾产品实现快速进化的关键,就是毫末始终坚定智能驾驶基础设施的持续投入,以大数据、大模型、大算力为技术方向,以数据驱动为核心,重视产品能力与用户体验的统一,坚持海量多模态数据的持续反哺,坚持迈向从感知到认知、端到端自动驾驶大模型的技术路线,坚持超级智算中心的持续扩容与不断升级。

元橡科技联合创始人&CTO 任杰发表了《高精双目3D点云驱动高阶智驾规模化量产落地》主题演讲。

图片

元橡科技联合创始人&CTO 任杰

智能驾驶功能场景从简单封闭走向复杂开放和高频,高速NOA向城市NOA演进,以及主机厂对魔毯舒适类功能体验的关注提升,双目立体视觉技术的优势被明显释放。尤其是在具备魔毯和城市NOA的高阶智驾方案中,双目将成为重要的感知方案。

比如,针对鬼探头/快速切入场景,双目具备低延时和高稠密度特点,可以快速发现异常,极大缩短车辆反应时间,降低鬼探头/快速切入障碍物的风险。而在城市道路复杂路面,双目可精准识别任意凹坑凸起,可提供“安全性”+“舒适性”双重保障。

具体到细分功能,借助双目高精稠密3D点云优势,可以实现增强型LCC。双目方案能在车身完整出现更早检测出加塞车辆,可精准判断对方车辆姿态、距离从而更好判断对方意图,LCC控制更安全、更舒适。

元橡科技的双目立体视觉系统结合Meto NET神经网络及DeepFusion技术架构,可以对车辆前方行驶路面的平整度和凹凸异物进行检测,输出高可靠高精度的方位、尺寸和高程信息,将相关结构化结果数据输出给车辆底盘主动悬架控制系统,从而实现减震和驾驶模式自动调节功能,实现了L2+和魔毯的高度集成,车辆的驾乘舒适底盘安全性得到了全面提升。

睿创微纳产品负责人肖航发表了《红外传感器为 ADAS 主动安全助力》主题演讲。

图片

睿创微纳产品负责人肖航

面向高阶智驾市场,主动安全能力智驾功能的稳定性成为各家短期的核心竞争力,但目前主流传感器在光线影响、天气影响和活体识别上的缺陷,给智驾功能带来了极高的不稳定因素,而红外传感器可以提供稳定的感知数据,弥补现存感知缺陷。

据其介绍,针对夜视、雨天、大雪天、眩光、雾天、烟/扬尘等痛点场景,借助红外AI算法,红外传感器表现优异。比如在雾天,红外传感器受干扰较小,能够比较清晰的看到道路结构、车辆、路灯等物体,尤其是进隧道时能够提前观测到隧道内道路情况。

睿创微纳作为国内少有的红外方案供应商,拥有行业领先的红外图像处理算法、行业创新突破AI算法,具备长波、中波、短波红外以及激光、微波、太赫兹等多光谱传感研发能力,发布了全球首款8μm 1920×1080非制冷红外探测器芯片。

围绕《新智能时代的汽车CIS创新》主题,元视芯创始人&CTO郑健华发表了演讲。

图片

元视芯创始人&CTO郑健华

辅助驾驶系统的迭代需求呈多样化,推动了CIS向着低光成像更好、低功耗、高动态、高帧率等方向发展。

在感知层面,无论是纯视觉路线,还是由摄像头、激光雷达、超声波雷达与毫米波雷达等多传感器组成的融合方案,视觉感知都居主要地位,而车载CIS的成熟度相对较高,不仅具备成本优势,还可借助CIS+ISP二合一方案,解决对算法的依赖问题。

元视芯的自研ISP算法,覆盖ISP图像处理全链路(ISP Pipeline)RAW域、YUV域,通过先进的片上ISP功能实现AGC、AEC、降噪、边缘增强等功能,全面提升低照成像效果,对用户使用的痛点做有针对性的改善。

哆来目CPO张启航分享了《人眼仿生技术赋能AEB》主题演讲。

图片

哆来目CPO张启航

他首先介绍了运动信息对环境感知的作用,人眼仿生技术赋能AEB具备高安全、低成本两大优势。

一方面,搭载了人眼仿生技术,可对于任意角度的车辆、无保护左转、鬼探头、近距离加塞等场景进行检测;另一方面,通过双通道感知融合,人眼仿生技术可释放硬件潜能,实现低算力低成本嵌入式平台部署。

值得一提的是,基于人眼的双通道感知机制,哆来目团队研发出了对应的物体识别算法和运动感知算法,并将两种算法深度融合,最后形成了独具特色的视觉仿生技术,可以让搭载其视觉仿生技术的汽车具有人类一样的感知能力。

晟泰克副总经理曹丽松发表了《超声波雷达应用新探索》主题演讲。

图片

晟泰克副总经理曹丽松

随着智能驾驶的发展,2021年-2023年,超声波雷达的单车平均安装数量从4.9颗增加到5.6颗,预计2025年超声波雷达单车平均安装数量将增至7颗,超声波雷达市场进入高速增长期。

不过,随着智能驾驶传感器性能不断集成和提升,也驱动着车载超声波雷达需要寻求新的应用突破。目前,晟泰克围绕毫米波雷达的技术、成本优势,开发出了低速前后向F/RAEB、涉水感应系统、隐藏式超声传感器、后排提醒功能Rear Occupant Alert、电动尾门感应传感器、声波手势识别等新应用。

比如,针对低速F/RAEB,超声波雷达弥补了毫米波雷达在低速和近距离处感知能力下降的问题,提高了防撞系统的可靠性,并且随着AK2超声波传感器的成熟和量产,超声波雷达探测性能已经达到到5.5m。

《行泊一体感知融合方案演进及落地》为题,魔视智能乘用车产品负责人王淳发表了演讲。

图片

魔视智能乘用车产品负责人王淳

他表示,电子电气架构的集成化趋势明显,其中域融合已然大势所趋,行泊一体必将成为未来市场主流。

其中,魔视智能的一体化域控制器高算力行泊一体方案,能够充分运用算力资源应对自动驾驶任务中多传感器,多模态输入,多任务处理,多尺度分析的底层特性。同时运用自适应的网络设计空间,增加网络模型的大小,提升算法的表现性能,并将深度学习运用于跟踪及预测甚至决策规划和控制,以获取卓越的精度、普适性以及泛化性。

具体到行车视觉感知,魔视智能的深度学习算法能够支持2百万/8百万摄像头输入;而在泊车环视感知,魔视智能的深度学习算法能够支持1百万/2百万摄像头输入,可精准输出停车位地锁、移动障碍物、车辆、行人、交通指示、挡轮杆、可行使区域等全自动泊车系统所必须的感知结果。

复睿智行研发总监李臣云发表了《复睿智行毫米波雷达破局之路》主题演讲。

图片

复睿智行研发总监李臣云

他表示,业界热议的激光雷达与4D毫米波雷达之争,本质上是激光雷达成本下探与4D毫米波雷达的性能提升的竞速。

目前来看,4D雷达需要达到更高的探测灵敏度、更好的俯仰探测能力,以及更远的探测距离,且第“4D”在实际量产应用中还有待推进。而复睿智行通过使用创新超分辨算法,使雷达能够将目标与地面多径分离开,同时准确测出目标高度与地面多径引起的假目表高度,实测数据结果显示,目标轨迹清晰。

相比以往的传感器融合,复睿智行所使用的高性能4D雷达及前融合方案,可提供更真实、更丰富的环境探测信息,可降低逆光和低光照等环境因素对感知结果的影响,以及大幅减少训练所需的样本数据量,降低系统成本,加速智驾功能升级。

亮道智能CMO江南逸带来了《亮道数据工厂解决方案,应对大规模数据真值生产的技术挑战》主题演讲。

图片

亮道智能CMO江南逸

据江南逸介绍,自动驾驶数据闭环面临的挑战包括:其一,超大规模数据量;其二,敏捷与速度就是产品力;其三,成本投入不可忽视;其四,全球法律法规的要求。对于产业发展中遇到的问题,亮道智能给出了针对性的数据闭环解决方案。

具体来看,亮道智能的数据闭环解决方案中,核心包括大数据管理平台(基于公有云/私有云服务的云平台)、AI感知算法训练(AI感知算法训练的数据闭环)、场景管理与分析系统(挖掘海量场景)、AI Driver 驾驶策略仿真平台(通过AI Driver生成海量仿真场景基于Long Short-Term Memory (LSTM)模型)等。

禾赛科技汽车事业部高级总监蒋武新发表了《激光雷达如何加速赋能更安全、更智能的ADAS功能》主题演讲。

图片

禾赛科技汽车事业部高级总监蒋武新

为什么智能驾驶需要激光雷达?在蒋武新看来,激光雷达类似智能汽车、机器人的“眼睛”,为预测、规控提供高质量感知输入,具备抗干扰(不受光线变化影响)、真三维(直接获取高精度距离信息)、高置信度(直接判断物体是否存在)等突出优势,可赋能AEB、ACC、LKA、高速NOA、城市NOA等智驾功能,对比纯视觉,激光雷达融合算法精度领先2-3年。

根据介绍,目前公司获得的定点超过 50 款车型,2023年9月禾赛的全球首款纯固态激光雷达量产上车。值得注意的是, 在禾赛科技看来,公司领跑ADAS市场的核心竞争力为“自建工厂+自研芯片”。对于前者,其认为,在新兴产业制造应是研发的一部分,对于后者,原因则为性能、成本和供应链安全。

围绕《智驾普及新路径,4D 成像雷达感知技术应用及发展》威孚高科新能源与网联技术研究院屈操发表了主题演讲。

图片

威孚高科新能源与网联技术研究院屈操

目前,汽车EE架构正在走向集成式,集中式传感器融合(前融合)成为必然趋势,4D毫米波雷达的安装难度,模块化、高度集成化将成为重点探索的方向。

从产品优势来看,4D成像雷达支持“R+L+V”原始数据级融合,提供更丰富的原始点云,最大限度地提高系统获取的信息量,从而实现比目标级融合更好的决策,提升系统安全性。

而随着前端射频通道的增加,雷达后端信号处理算法算力需求成倍提升,针对雷达处理杂波能力弱、分辨率低、点云密度低等痛点问题,威孚4D成像雷达采用Arbe的芯片组能够提供先进且完整的解决方案,包括接收器、发射器和外理器芯片,解决了传统MIMO雷达通道提升后导致的成本、功耗、算力和场景应用限制。

另外,作为支撑以 NOA 为代表的高阶智能驾驶落地的关键技术,高精度定位系统开始上量。

在元橡科技冠名的2023(第七届)高工智能汽车年会专场一,高工智能汽车研究院(GGAI)还联合行业头部企业,正式发布了《2023 年中国车载高精度定位行业发展蓝皮书》。(关注公众号,回复:高精定位,下载)

图片

根据高工智能汽车研究院统计数据,2023年1-9月,国内新车高精度定位系统搭载量59.71 万辆,同比增长153.56%,渗透率从2022年的1.91%上升到4.03%。预计到2025年前装标配高精度定位搭载量将达到176.25万辆,渗透率达到8.09%。

分价格区间来看,高精度定位系统主要搭载在30万元以上的车型,并开始加速向20-30万元车型渗透。未来随着高精度定位系统成本的进一步下降,高精度定位市场存在较大增长空间,其中20-40万价格区间将成为高精度定位赛道增长的主要增量空间。

瞄准新赛道发展中出现的窗口期,国内玩家们纷纷加码布局,涌现出一批优秀的初创科技公司,如北云科技、导远电子、华测导航等组合导航供应商,觉非科技等软件 Tier1,以及六分科技等服务商。

会上,围绕高阶智驾的定位需求变化、高精度定位的产品形态终局、高精度定位的市场门槛变化等话题,觉非科技创始人刘斌、华测导航副总经理邓海峰、六分科技产品事业部总经理胡功胜发表了各自看法。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/304954.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

Qt QLineEdit文本框控件

文章目录 1 属性和方法1.1 占位字符串1.2 对齐方式1.3 回显模式1.4 读写控制1.5 格式控制1.6 信号和槽 2 实例2. 布局2.2 代码实现 QLineEdit 是Qt 中的文本框,准确地说是单行文本框,通常用于接受用户的输入。 比如用户输入用户名、密码等,都…

中国京津冀国际光伏展

中国京津冀国际光伏展是一个专门展示光伏技术和产品的展览会。该展览会旨在促进光伏产业的发展和推广,推动太阳能光伏的应用和利用。 这个展览会通常会邀请国内外的光伏企业和专家参加,展示最新的光伏技术和产品,包括太阳能电池板、光伏组件、…

Spring MVC MVC介绍和入门案例

1.SpringMVC概述 1.1.MVC介绍 MVC是一种设计模式,将软件按照模型、视图、控制器来划分: M:Model,模型层,指工程中的JavaBean,作用是处理数据 JavaBean分为两类: 一类称为数据承载Bean&#xf…

解读 Sobit v2:铭文资产跨链更注重安全、易用性

铭文市场的发展正在从早期的“无序”进入到“有序”阶段,我们看到从 12 月份以来,比特币生态内的多个应用纷纷宣布获得融资。这表明,目前仍旧有大量的资金有意向铭文领域,同样铭文赛道新一轮浪潮或许正在酝酿。 另一方面&#xff…

Linux ps命令

一. 说明 用于显示系统中当前运行的进程信息。 提供了查看进程的不同视图和选项,允许用户了解系统上正在运行的进程的状态、资源使用情况等。 -e:显示所有进程,而不仅仅是与当前终端关联的进程。-f:以完整的格式显示进程信息&am…

混淆技术概论

混淆技术概论 引言 在逆向工程领域,混淆技术是一种非常重要的技术手段,通过打破人们的思维惯性,使得逆向分析变得更加困难。本文将会介绍混淆技术的概念、分类及其应用,以及如何使用IPA Guard进行iOS IPA重签名。 混淆技术概述…

python(17)--文件的输入/输出

前言 在Python中,文件文本操作是非常重要的,主要有以下几个原因: 数据持久性:当你需要长期存储数据,如用户的个人信息、交易记录或数据库元数据等,将数据保存在文件中是一种常见的方法。文件系统提供了持…

C# Onnx yolov8 竹签计数、一次性筷子计数

目录 效果 模型信息 项目 代码 数据集 下载 C# Onnx yolov8 竹签计数、一次性筷子计数 效果 模型信息 Model Properties ------------------------- date:2024-01-03T08:55:22.768617 author:Ultralytics task:detect license&#x…

一起来了解综合能源服务认证

首先,综合能源服务认证是有国家政策支持的, 《能源生产和消费革命战略(2016-2030)》中指出:1、能源生产端要以绿色低碳为方向,推动能源集中式和分布式开发并举,大幅提高新能源和可再生能源比重&#xff1b…

ELK生命周期

ELKkafka <es生命周期可视化配置界面> 一、创建索引模式 根据logstash中的日志规则 匹配对应系统日志 二、创建索引生命周期策略&#xff1a;可以控制生成索引的生命周期 共4个阶段&#xff1a;热阶段——温阶段——冷阶段——删除阶段 阶段1. hot: 索引被频繁写入和查…

如何让ArcGIS Pro启动显示空白页面

刚接触ArcGIS Pro的你是否会觉得在操作上有那么一些不习惯&#xff0c;从一开始软件启动就发现和ArcGIS差距很大&#xff1a;丰富的欢迎页面&#xff0c;加上默认加载的地图让你眼花缭乱&#xff0c;这里教你如何去掉这些繁杂的内容&#xff0c;还你一个干净的启动页面。 跳过…

一文弄懂SpringCloud Stream

目录 SpringCloud StreamSpringCloud Stream相关概念SpringCloud Stream使用 SpringCloud Stream Spring Cloud Stream 是一个构建消息驱动微服务的框架&#xff0c;Spring Cloud Stream 提供了一个抽象层&#xff0c;屏蔽了不同消息中间件之间的差异&#xff0c;使得开发人员…

Python 日志模块 logging 的最佳实践,内容干练简洁

文章目录 1. 引言2. 定义日志类3. 引用日志4. 参考 1. 引言 每次写 python 代码&#xff0c;想找一个日志模块 logging 的最佳实践&#xff0c;都要找一大圈&#xff0c;确不一定可以找到合适的最佳实践。 痛定思痛&#xff0c;我决定下笔记录目前觉得合适的 python 日志的用…

全志R128 SDK架构与目录结构

R128 S2 是全志提供的一款 M33(ARM)C906(RISCV-64)HIFI5(Xtensa) 三核异构 SoC&#xff0c;同时芯片内部 SIP 有 1M SRAM、8M LSPSRAM、8M HSPSRAM 以及 16M NORFLASH。本文档作为 R128 FreeRTOS SDK 开发指南&#xff0c;旨在帮助软件开发工程师、技术支持工程师快速上手&…

基于uniapp封装的card容器 带左右侧两侧标题内容区域

代码 <template><view class"card"><div class"x_flex_header"><div><title v-if"title ! " class"title" :title"title" :num"num"></title></div><div><s…

x-cmd pkg | magick - 开源图像处理工具

目录 简介首次用户功能特点类似工具与竞品进一步探索 简介 magick 是由 ImageMagick 提供的一个功能强大且多功能的开源图像处理工具&#xff0c;可以灵活高效地处理图像文件&#xff0c;例如格式转换、图像大小调整、图像裁减、图像拼接、图像色彩校正和图像合成等常见的图像…

云化XR技术于农业领域中的表现

随着科技的不断发展和应用的深入&#xff0c;农业领域也在逐渐引入新技术来优化生产效率和成本、改进管理和监控等。云化XR&#xff08;CloudXR&#xff09;作为一种融合了云计算、虚拟现实&#xff08;VR&#xff09;和增强现实&#xff08;AR&#xff09;等技术的解决方案&am…

【教程】代码混淆详解

【教程】代码混淆详解 本文将对代码混淆进行详细解释&#xff0c;并介绍ProGuard代码混淆器以及Ipa Guard工具的使用方法。首先&#xff0c;我们将了解代码混淆的概念和作用&#xff0c;然后深入讨论ProGuard混淆文件的参数设置以及代码混淆的方法。接着&#xff0c;我们将介绍…

【node link】Node命令中的node link命令的使用,还有CLI全局命令的使用,开发命令行工具必不可少的部分

&#x1f601; 作者简介&#xff1a;一名大四的学生&#xff0c;致力学习前端开发技术 ⭐️个人主页&#xff1a;夜宵饽饽的主页 ❔ 系列专栏&#xff1a;NodeJs &#x1f450;学习格言&#xff1a;成功不是终点&#xff0c;失败也并非末日&#xff0c;最重要的是继续前进的勇气…

【RabbitMQ】3 RabbitMQ使用及交换机

目录 代码示例交换机概述无名交换机绑定&#xff08;binding&#xff09;交换机的类型FanoutDirectTopic 官网地址&#xff1a;https://www.rabbitmq.com/getstarted.htm 代码示例 先来看下如何使用rabbitmq&#xff1a; 使用 Java 编写两个程序&#xff0c;发送单个消息的生…