当春节驾车返乡拥有了L3/L4级自动驾驶-德赢Vwin官网网

随着春节临近，漫漫回家路上的路况和天气都变化多端，长途驾驶难免使人身心俱疲，若不久的将来能将真正的L3/L4级自动驾驶落地应用，那将大大减轻长途驾车回家的辛苦。即便车外风雨交加，人们依旧可以在温暖的车内放松小憩，从容地喝口热茶吃块点心，刷刷老家又开了什么新馆子，带上家人或约上老友一起去尝鲜。若是节日驾车旅游，可以安然自若地欣赏路过的美景，随手就拿起手机记录美好的一瞬，这样的长途驾驶体验是不是让人身心愉悦了许多呢？

昱感微电子的“多传感器多维像素融合感知芯片”就能助力汽车自动驾驶系统来实现这样的体验，让驾车回家之旅变得轻松惬意。智能感知是L3/L4级自动驾驶的技术难点，而单一的传感器始终存在自身的局限性，无法做到对环境全面精确的感知。昱感微的融合感知芯片创新性地将可见光摄像头、红外摄像头以及4D毫米波雷达的探测数据融合到一起并以“多维像素”的格式输出。多维像素是指在可见光摄像头像素信息上加上其他传感器对于目标感知的信息，将感知系统的感知维度扩展以实现多维度感知目标的完整信息。如下图示例，芯片将摄像头RGB数据矩阵层，和雷达探测目标的距离、速度、散射截面R数据矩阵层，以及红外传感器探测的热辐射图像数据矩阵层叠加组合到一起，以摄像头的像素为颗粒度，每个像素不仅有图像数据，纵向组合上还包含了毫米波雷达和红外传感器的探测数据，形成多维度测量参数矩阵数组。

多维像素就好比赋予了自动驾驶系统比人类更敏锐的眼睛，看到的不仅是一幅幅二维的图像，还有在图像之上更多维的信息。就像在雾中穿行，人眼只能看到白茫茫的雾气下物体隐约的轮廓，但昱感微的融合感知芯片可以利用毫米波雷达和红外摄像头的探测数据让自动驾驶系统感知到雾气中的物体的方位、距离、速度、温度等信息，确保安全行驶。不仅如此，昱感微的融合感知芯片采用最前沿的多传感器前融合技术，摄像头和雷达等多传感器的探测数据在前端（数据获取时）交互验证，让自动驾驶系统能感知到“看不见”的危险。例如，当反向车道有强远光灯干扰下，视觉无法清晰地看到行车周围的状况，容易引发危险。但昱感微的融合感知芯片可以解决强光对视觉的干扰：当雷达子系统探测到潜在运动目标时，融合感知芯片可以引导本车的摄像头针对运动目标做快速局部修正曝光（见下图），以此实时获取运动目标的分辨细节特征，并将局部修正曝光的图像融合雷达数据传输至自动驾驶系统，避免撞击危险发生。

多传感器前融合可以发挥各个传感器在不同应用场景下的优势，取长补短来达到1+1>2的效果。4D毫米波雷达可以帮助可见光摄像头克服天气光线的影响，可见光摄像头的图像又为毫米波雷达增添了语义信息，进一步提高雷达点云的置信度；而红外不仅赋予了自动驾驶夜视能力，还可以清楚地辨别行人。如下图所示，基于可见光摄像头的感知系统可能会忽略远处较暗的两个人（在可见光图像的阴影区域），红外摄像头可以轻松地通过人体测温辨别出来。此外，在夜间高速行驶状态下，红外可以对遇到突然蹿出来的人或动物进行判别，如果是行人则必须避让，动物可根据行驶状态引导自动驾驶系统采取不同的决策。

除了天气和光线外，基于纯视觉网络的算法仍存在corner cases的问题，样本的长尾效应影响着自动驾驶系统的表现。而昱感微的融合感知芯片是基于物理数据的感知，可以很好地解决这个问题。芯片将多个传感器的探测数据融合，并将各传感器的探测数据的坐标统一、时序对齐，图像与雷达数据完成像素级实时“时空对齐同步”输出。这是业界公认的多传感器前融合的技术难点之一，不过得益于团队成员多年相关领域的技术积累和众多技术创新，昱感微的融合感知芯片内嵌功能可以支持客户完全满足系统对目标感知“坐标统一，时序对齐，数据同质，突出事件感知”的要求，能够解决目前车厂在自动驾驶邻域的技术痛点。

并且，昱感微融合感知芯片输出的“多维像素”与现有的AI计算平台兼容，可以复用已有的图像数据样本。对于目前流行的神经网络框架（比如，Yolo V8，BEV +Transformer等等）只需小幅修改就可适用多维像素。多维像素还可以快速提升AI网络的训练收敛率以及目标识别率，并且可以大幅降低系统算力要求。

多维像素还可以直接高效支持“占用网络” (Occupancy Network)算法。占用网格是指将感知空间划分为一个个立体网格（体素），而多维像素包含了目标的3D空间位置信息、目标的速度信息和材质信息，可以直接高效实时支持占用网格中的体素算法。Tesla目前在主推“BEV +Transformer+占用网络”，国内华为GOD2.0也采用相同的架构，预计未来许多智能驾驶团队都会引入“占用网络”来提升系统能力。多维像素的应用前景非常广阔。昱感微的融合感知芯片+BEV +Transformer+占用网格有望成为L3/L4级自动驾驶最优的落地方案，不久的将来人们就可以轻松愉快地享受长途自驾之旅了。

多维像素“占用网格”３D体素算法精准探测运动目标空间位置

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表德赢Vwin官网网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。举报投诉

芯片

芯片

+关注

关注
455

文章
50712

浏览量
423105
多传感器

多传感器

+关注

关注
0

文章
80

浏览量
15356
自动驾驶

自动驾驶

+关注

关注
784

文章
13784

浏览量
166370

l4级别自动驾驶的特点是什么

L4级别自动驾驶作为自动驾驶技术的一个重要里程碑，代表了高度自动化的

发表于 10-22 14:41 •736次阅读

通用汽车正全力推进L3级自动驾驶系统的开发

10月6日最新消息显示，通用汽车正积极致力于L3级自动驾驶系统的研发，目标是在特定情境下让驾驶员无需持续监控路况也能享受自动驾驶的便利。这一

发表于 10-08 17:01 •880次阅读

经纬恒润全冗余R-EPS助力L4级自动驾驶落地

随着L4级别自动驾驶技术的逐步成熟与商业化进程加速，行业对车辆安全性的要求达到了新的高度。为了确保自动驾驶车辆全天候、全路况下安全运行，冗余系统的研发与应用成为关键。在这一背景下，经纬

发表于 09-24 08:00 •1008次阅读

经纬恒润全冗余R-EPS助力<b class='flag-5'>L4</b><b class='flag-5'>级</b><b class='flag-5'>自动驾驶</b>落地

Mobileye引领自动驾驶新纪元:L4级无人驾驶系统在德国成功路测

在全球自动驾驶技术的浪潮中，Mobileye，作为全球自动驾驶解决方案的领军者，再次迈出了具有里程碑意义的一步。近日，该公司宣布其全自动无人驾驶系统（即

发表于 07-02 17:04 •1452次阅读

驶向L3级自动驾驶：车路协同

，遴选具备量产条件的L3及L4级别自动驾驶汽车开展准入试点，大大推进了进入L3级

发表于 05-20 11:16 •517次阅读

驶向<b class='flag-5'>L3</b><b class='flag-5'>级</b><b class='flag-5'>自动驾驶</b>：车路协同

百度发布全球首个L4级自动驾驶大模型

近日，百度Apollo宣布了全球首个支持L4级自动驾驶的大模型Apollo ADFM（Autonomous Driving Foundation Model）。这一突破性的技术成果，标

发表于 05-17 09:58 •478次阅读

百度发布全球首个L4级自动驾驶大模型Apollo ADFM

5月15日，百度Apollo在武汉举行的Apollo Day 2024中推出了全球首款L4级自动驾驶大模型Apollo ADFM（Autonomous Driving Foundation Model）。

发表于 05-15 16:21 •1157次阅读

2025量产L4 RoboTaxi，滴滴自动驾驶再进一步

的面向出行服务的L4自动驾驶技术方案，合作打造L4无人驾驶量产车，实现自动驾驶领先技术与新能源整车制造成熟经验的深度融合。滴滴

发表于 04-18 00:12 •4287次阅读

NVIDIA和昊铂宣布双方将合作量产L4级自动驾驶汽车

北京时间3月19日，在NVIDIA GTC大会上，NVIDIA和昊铂宣布双方将合作量产L4级自动驾驶汽车。

发表于 03-20 15:06 •792次阅读

NVIDIA和昊铂宣布双方将合作量产<b class='flag-5'>L4</b><b class='flag-5'>级</b><b class='flag-5'>自动驾驶</b>汽车

文远知行与联想车计算共同推出L4级别自动驾驶解决方案

文远知行与联想车计算共同推出的L4级别自动驾驶解决方案是一项具有里程碑意义的合作。此次合作不仅将双方的先进技术进行了深度整合，更在自动驾驶领域开辟了

发表于 03-20 10:15 •522次阅读

百舸争流之势！L3级自动驾驶进入路测阶段

2023年底，政策层面给L3级自动驾驶的商业化落地填了一把助燃剂，可以说对智能驾驶给出了“天高任鸟飞”般的拥抱态度。

发表于 03-04 14:10 •530次阅读

康谋方案 | L2进阶L3，数据采集如何助力自动驾驶

12月14日，宝马集团宣布，搭载L3级别自动驾驶功能的车辆在上海市正式获得高快速路自动驾驶测试牌照。宝马表示，将在上海市政府的监督和指导下，在指定区域开展

发表于 01-25 18:06 •534次阅读

广汽集团获得L3自动驾驶路测牌照

广汽集团在2023年底正式获得了广州市的L3自动驾驶路测牌照，这一里程碑标志着广汽在自动驾驶技术研发上取得了重大进展。该牌照允许广汽在广州市指定的高快速道路上进行L3

发表于 01-11 15:05 •692次阅读

自动驾驶产业链爆发前夜？多家车企宣布已获得L3级自动驾驶路测牌照

工信部网站信息显示，2022年11月，工信部发布《关于开展智能网联汽车准入和上路通行试点工作的通知（征求意见稿）》，针对搭载中国国家标准（GB/T 40429-2021）定义的L3级（有条件自动驾驶）/

发表于 12-27 17:09 •989次阅读

虹科方案丨L2进阶L3，数据采集如何助力自动驾驶

技术方案上，宝马的自动驾驶研究一直坚持多传感器融合的方式，其L3级自动驾驶技术套件能够集成更多高性能传感器，例如新的激光雷达系统，并将所有传感器信息与长距离雷达、前置摄像头数据相互关联

发表于 12-27 13:29 •445次阅读