基于Transformer的目标检测算法难点-电子工程世界

说到纯视觉的自动驾驶方案，大家第一个想到的就是Tesla吧。的确，早在2021年，Tesla就已经实现了纯视觉的BEV检测方案，而且效果非常好。

细心的同学可能发现了，这套BEV方案中将相机空间的图像转换到BEV空间的核心组件就是Transformer。

Transformer来源于自然语言处理领域，首先被应用于机器翻译。后来，大家发现它在计算机视觉领域效果也很不错，而且在各大排行榜上碾压CNN网络。

目标检测领域中，视觉Transformer不仅可以实现2D检测、3D检测，还可以实现多模态检测，BEV视角下的检测，性能也非常出色。

因此，掌握Transformer相关知识和工程基础成为了企业招聘算法工程师的一个技能要求点，也是简历上的一个很大的加分项。

然而，想要掌握基于Transformer的目标检测算法，有以下3个难点：

理解Transformer背后的理论基础，比如自注意力机制（self-attention）, 位置编码（positional embedding），目标查询（object query）等等，网上的资料比较杂乱，不够系统，难以通过自学做到深入理解并融会贯通。

掌握基于Transformer的目标检测算法的思路和创新点，一些Transformer论文涉及的新概念比较多，话术没有那么通俗易懂，读完论文仍然不理解算法的细节部分。

Transformer代码不易看懂，因为作用机制与CNN有不少差别，所以完全理解代码并实践应用需要花费很大功夫。

关键字：Transformer BEV 自动驾驶引用地址：基于Transformer的目标检测算法难点

上一篇：什么是增程式电动车汽车三种增程式电气架构图介绍
下一篇：新能源汽车制动系统的结构组成及检修方法

推荐阅读最新更新时间：2024-11-13 16:46

博世发起Project 3F项目研发容错性自动驾驶车出故障仍安全移动

据外媒报道，德国一级供应商博世（Bosch）正在进行一个名为Project 3F的项目——“低速行驶范围内的容错性无人驾驶车辆”，利用无人驾驶接驳车将游客从电车站运送到展览中心，或者在物流中心移动装满包裹的集装箱。自动驾驶接驳车的主要目的是能够安全地从A点到达B点，因此，该项目专注于防止故障操作，即研发解决方案，确保即使出现技术故障或突然出现障碍物时，该自动驾驶接驳车仍可安全地移动。 Project 3F项目从德国联邦经济事务部（German Federal Ministry of Economic Affairs）获得了430万欧元的资助，博世为该项目的领头人，还包括三家其他公司、一个大学以及一个研究所：分别为

[汽车电子]

博世发起Project 3F项目研发容错性<font color='red'>自动驾驶</font>车出故障仍安全移动

戴伟民：自动驾驶和智能家居是人工智能落地重要领域

近日，芯原微电子(芯原)创始人、董事长兼总裁戴伟民博士参加了中国集成电路设计业2018年会，在年会的主题演讲中，戴伟民以AI如何落地为主题，对中国目前的AI芯片现状提出了自己的想法和建议。戴伟民表示，如今AI产业烧钱很厉害，但AI芯片也是芯片，最终还是要有地放，要落地。他认为，汽车、智能家居将是AI落地的主战场，而实际上芯原的主要客户也大都在这几大领域布局。芯原微电子(芯原)创始人、董事长兼总裁戴伟民博士自动驾驶是AI的珠穆朗玛峰 “AI产业的珠穆朗玛峰是自动驾驶，如果你做出来了，其他都应该不在话下。”戴伟民说道。据悉，芯原已经和欧洲自动驾驶公司AImotive合作，开发出全球第一颗对标 L4 的基于多传感器的神经

[半导体设计/制造]

戴伟民：<font color='red'>自动驾驶</font>和智能家居是人工智能落地重要领域

英特尔发力，将推出4级自动驾驶汽车？

收购Mobileye后的英特尔，加入了无人驾驶汽车大战。英特尔当地时间周三宣布，将生产100辆等级为4级的自动驾驶汽车，离全自动驾驶仅一步之遥。 4级自动驾驶技术仍在路测本周，英特尔150亿美元收购以色列无人驾驶技术供应商Mobileye的交易宣告完成。这令英特尔有望在2018年推出自主研发的无人驾驶汽车。英特尔表示，这项全新的自动驾驶测试项目将在美国、欧洲和以色列进行，但不会取代英特尔的自动驾驶实验室。今年5月17日，英特尔和Mobileye已经联合德国汽车供应商德尔福(Delphi)和宝马汽车共同开发自动驾驶汽车平台，并向其它汽车制造商开放。英特尔曾在去年表示，将投入2.5亿美元支持无人驾驶领域初创公司的技术。自动驾

[嵌入式]

Waymo称自动驾驶安全性显著高于人类司机

据外媒报道，自动驾驶企业都希望自动驾驶技术能够减少道路风险，然而迄今为止，还没有任何一家企业可以完全兑现自动驾驶技术在安全性方面的承诺。谷歌自动驾驶子公司Waymo的研究人员在12月20日公布了一个新的研究方式，它可以对人类和自动驾驶系统的驾驶性能进行有意义的比较。该公司表示，新方法在Waymo运营无人驾驶服务的三个地点内显示出了安全优势，与人类驾驶员相比，造成人员受伤的车祸率降低了85%，需要向警方报告的车祸率也下降了57%。 Waymo安全研究与最佳实践主管Trent Victor说道：“我们看到了明显的效果，自动驾驶系统遇到的碰撞事故远远少于人类司机。” 2023年，Waymo的自动驾驶汽车行驶了710万

[汽车电子]

Waymo称<font color='red'>自动驾驶</font>安全性显著高于人类司机

自动驾驶仿真研究：仿真助力高阶智驾落地的三大趋势

佐思汽研发布《2024年自动驾驶仿真产业研究报告》。 2023年11月17日，工信部等四部门发布了《关于开展智能网联汽车准入和上路通行试点工作的通知》，至今包括比亚迪、宝马、智己、奔驰、深蓝、阿维塔、极狐、问界、极越、广汽埃安等多家车厂相继获得高速或城区L3级自动驾驶测试牌照。目前，以城市NOA为代表的高阶智驾功能正加速落地，而L3及以上的自动驾驶系统 “安全责任人”的角色，需要有足够的安全性和鲁棒性，需要应对城区无法穷举的边缘/长尾场景痛点。 L3级智驾系统的商业化落地需十几亿公里的测试里程，实际道路测试成本高，耗时长、用例覆盖率低，而仿真测试能在短时间内、以低成本快速解决这一痛点。以小鹏为例，除了小鹏

[汽车电子]

<font color='red'>自动驾驶</font>仿真研究：仿真助力高阶智驾落地的三大趋势

自动驾驶汽车商用在望电池技术有待突破

　　目前，自动驾驶汽车的商用进程正不断提速，量产计划也相继公布。不过，在这之前，关键的电池技术还有待升级，否则恐怕难以满足续航需求。下面就随汽车电子小编一起来了解一下相关内容吧。　　据外媒报道，一位锂离子电池投资商透露，在自动驾驶汽车进入大范围量产阶段，电池生产商则需要重新考虑电池等相关技术问题。　　锂离子电池原型研发者AkiraYoshino表示，除了专注于提升电池的容量外，电池生产商也需研发出一些设备来应对未来共享自动驾驶汽车的几乎不间断的驾驶和短距离行使。　　Yoshino是全球最大的电池分离器生产商旭化成公司荣誉员工，他在采访中表示：“10个人共享一辆车也就意味着会被驾驶10次以上，耐久性因

[汽车电子]

软银领投滴滴自动驾驶公司超过5亿美元融资

路透社报道，滴滴周五表示，已经完成对其自动驾驶子公司的一轮新融资，融资额超5亿美元，该轮融资由软银集团的愿景基金2牵头。滴滴在一份声明中表示，这轮融资是自去年成为独立子公司以来，滴滴自动驾驶业务首次引入外部资金，也是中国自动驾驶行业规模最大的一轮融资。滴滴表示，将利用这笔资金进一步投资于自动驾驶技术的研发和测试，并加快自动驾驶服务的部署。

[手机便携]

沃尔沃财富论坛论未来交通明年推全自动驾驶技术

在李书福董事长的引领和国际化团队的管理下，沃尔沃汽车在中国市场上的发展愈发显得成熟、稳重。中国目前已经全面超越美国成为沃尔沃汽车全球第一大市场，沃尔沃（中国）公布的最新销售数据显示，5月单月，沃尔沃汽车在中国市场的销量达到4，415辆，同比增长24.4%。1-5月累计总销量达22，905辆，同比增长26.9%，远超中国豪华车市场平均增速，中国继续领衔成为沃尔沃汽车全球增速最快的市场。终端市场上捷报频传与沃尔沃汽车优质的产品、合理的渠道布局以及先进的管理机制密不可分，同时，这也是其长期坚持的品牌建设所培育出的认知度在市场上的直接体现。作为2013成都《财富》全球论坛官方合作伙伴，沃尔沃汽车于

[汽车电子]

热门资源推荐
热门放大器推荐

小广播