车辆自动驾驶包括感知、判断和执行,而感知是整个过程的源头,是自动驾驶系统的重要模块。在车辆行车过程中,感知系统会通过传感器实时采集周边环境的信息,相当于自动驾驶汽车的“眼睛”,帮助汽车实现类似于人类驾驶员一样效果的观察能力。感知系统主要由摄像头、超声波雷达、毫米波雷达、激光雷达(可选)等传感器构成。摄像头作为主要的环境感知传感器起着非常重要的作用,可以实现360°全面视觉感知,弥补雷达在物体识别上的缺陷,是最接近人类视觉的传感器。随着自动驾驶技术的发展,要求的车载摄像头数量越来越多,清晰度越来越高,稳定性越来越强。
目前L2+、L3级别车辆搭载的摄像头根据安装位置主要分为前视摄像头、环视摄像头、后视摄像头、侧视摄像头以及内置摄像头五种类别。在行车时,前视、侧视、后视与毫米波、激光雷达共同感知融合,提供给算法模块可行驶区域、目标障碍物等信息,实现ACC/ICA/NCA、AEB、LKA、TSR等功能,同时内置摄像头会监控驾驶员的状态,实现疲劳监测功能;在泊车时,环视摄像头和超声波雷达共同感知停车位环境,实现APA功能。 车载摄像头在汽车高级驾驶辅助系统(ADAS)中扮演着重要角色,为我们的行车安全提供了强大的支持。
那么在做ADAS HiL测试时如何实现Camera仿真呢? 北汇信息提供以下两种实现方案
视频暗箱视频暗箱是将虚拟仿真场景视频信号连接到暗箱中的显示器上,使用真实摄像头对着显示器拍摄视频,通过同轴线缆将拍摄到的视频信号传输给自动驾驶控制器,使控制器认为处于实车环境中,从而达到对ADAS控制器测试的目的。图2视频暗箱方案示意图暗箱设备主要由箱体、滑轨、显示器、透镜、摄像头及相关支架、底座组成。视频暗箱不需要主机厂或者Tire1提供图像采集模块与图像处理模块之间的通信协议,其采用真实的摄像头,这种方式容易实现、成本较低,但是需要根据显示器的大小,精确的设定摄像头的摆放位置和角度,易受光线和显示器的影响,同时显示器的频率有可能会造成图像识别的延迟。此方案适用于单目摄像头,并且摄像头视场角要小于120°(环视摄像头无法使用此方案),视频暗箱设备较大,一个暗箱只支持一路摄像头,精度也较低。图3视频暗箱整体结构
摄像头标定分两部分,首先是硬件设备位置标定,保持摄像头、透镜、显示器中心在一条水平线上;其次要在仿真场景中对拍摄到的车道线进行标定。 视频注入视频注入系统可用于摄像头原始数据流视频注入,使用VX1161视频回灌硬件对ADAS系统的车载摄像头传感器进行替换。摄像头仿真设备通过HDMI/DVI接口接收虚拟仿真场景不同Camera视角的视频信号,内部进行图像处理后以特定协议的视频信号注入给ADAS控制器。
图4视频注入方案示意图视频注入技术不受光线的影响,仿真精度高,支持在线调节摄像头信号颜色空间(RGB,YUV,RAW等)。一个VX1161视频回灌硬件同时支持多路摄像头仿真,设备体积较小,在仿真多路摄像头信号时,各通道视频信号可通过串行器来同步信号触发,适用于多目摄像头、多通道注入。视频注入需要特定的视频协议信息,需要主机厂或者Tire1提供图像采集模块与图像处理模块之间的通信协议,开发存在畸变标定、色差调节等技术难点,成本较高。视频注入系统支持对多种Camera安装位置和特征进行配置(包括Resolution、Frame rate、Optics和Sensor特性等),适用于各类基于摄像头的应用。使用DYNA4作为场景和动力学仿真软件,视频注入+摄像头模型还能在仿真环境中实现其他镜头特性效果,例如屏闪、镜头畸变、鱼眼、运动模糊等,模拟由于环境光线突变导致的摄像头短时间曝光过度或不足、部分或全部通道增益调节错误、摄像头成像噪点或图像失真、镜头被雨雾或污泥遮挡导致的成像故障。
对于视频注入方案,摄像头仿真模型需要根据真实畸变数据、FOV、像素大小、分辨率等参数生成,但仿真模型仍与真实车载摄像头存在细微畸变差异,需要进行标定。标定有两种方法,方法一是获取摄像头模型拍摄的图片,计算出图片的畸变参数,修改ADAS控制器配置的摄像头畸变参数;方法二是使用模型生成的黑白棋盘格图像和真实摄像头图像比照,细微调整仿真模型的参数,以达到畸变参数一致。
ADASHiLADAS HiL中,仿真的摄像头视频流数据与动力学模型数据及其他传感器数据共同传输给控制器,在CANoe软件中做实验管理,形成闭环链路。
1
仿真摄像头可以模拟真实世界中的各种场景和情况,包括不同的道路条件、天气条件和交通情况。通过模拟这些场景,可以评估控制器在各种情况下的性能和鲁棒性。
2
ADAS控制器接收视频流原始数据、激光雷达点云数据、毫米波雷达和超声波雷达目标列表数据,评估控制器对不同传感器数据的融合和处理能力。
3
摄像头仿真还可以用于测试和验证控制算法和功能。通过模拟各种场景和情况,可以验证控制器的目标检测、目标跟踪、车道保持、自动紧急制动等功能的准确性和可靠性。
4
视频流数据模拟全黑、全白、噪声叠加、运动模糊、丢帧、延迟等故障,注入给控制器,验证控制器功能安全机制。
总结
本文首先介绍了车载摄像头在ADAS系统中的作用,重点描述了在ADAS HiL中视频暗箱和视频注入两种摄像头仿真方案的差异,最后简要介绍了车载摄像头仿真在ADAS HiL中的应用。
北汇信息作为Vector的技术合作伙伴,覆盖智能驾驶系统MiL/HiL/ViL测试、车联网测试,传感感知测试等,为客户提供优质的智驾测试解决方案、测试集成系统和服务,助力智能驾驶仿真测试系统的快速验证和测试。
关键字:车载摄像头 ADAS HiL 仿真方法
引用地址:
车载摄像头在ADAS HiL中的仿真方法
推荐阅读最新更新时间:2024-11-17 17:05
堆算力有用么?小鹏G6电子架构与ADAS系统分析
最近小鹏和问界的AEB测试非常引人瞩目,媒体的黑暗测试环境中,小鹏G6进行30km/h测试时,完全没有反应,直接撞上了假车,驾驶员踩下刹车才刹停;作为对比,问界M5 EV从30km/h到80km/h全部一次性成功刹停。实际上,问界M5并没有采用 华为 的 ADS 2.0,问界M5采用的是博世的ADAS系统,阿维塔11才是华为的ADS2.0。 小鹏G6的前视双目 小鹏G6的前视双目并非华为那种立体双目,应该就是一个远距离 摄像头 ,一个近距离摄像头。如果是立体双目,那么双目之间的距离至少也在8厘米之上,这个显然没有。小鹏的双目都是800万像素。 阿维塔11的立体双目 阿维塔11最外侧是立体双目摄像头,之间距离估计大约
[汽车电子]
安森美半导体开创性图像传感器促成新一代ADAS方案
安森美半导体(ON Semiconductor,美国纳斯达克上市代号: ON )今天宣布,博世 (Bosch) 已选择全球汽车图像传感器称冠的安森美半导体作为其 先进驾驶辅助系统 (ADAS) 一项未来摄像机技术的图像传感器供应商。新型图像传感器是为满足 OEM 对未来 ADAS 摄像机的需求而研发的,具有高动态范围 (HDR) 特性,并且配有顶尖的安全功能特性。 由于驾驶员越来越因各种小玩意装置而分心,因此这新技术在增强安全方面起着关键不同的作用,这些不同之处有助于驾驶员在非常微光条件下也能识别行人或骑自行车的人。安全标准诸如 欧盟新车安全评估协会 (EuroNCAP)已引领全球设立减轻追尾相撞危害的要求,
[汽车电子]
基于CarSim的Euro NCAP ACC测试
Euro NCAP(欧洲新车评估计划)是欧洲新车评估计划的缩写,由一个自愿的五星级安全评级系统组成,自1996年以来一直存在。该评估协议由一系列的车辆测试组成,目的是帮助消费者和企业在安全性能方面对车辆进行相对比较。 在自动驾驶辅助系统(ADAS)的辅助驾驶-公路辅助系统的测试中,一个基本的系统是自适应巡航控制,即ACC。在欧洲NCAP的测试协议中,ACC是通过车对车的测试来进行的,其中包括使用反射式全球车辆目标(GVT),或GVT和实际切入或切出的车辆(由人类司机驾驶),以及测试车辆,或被测车辆(VUT)。在CarSim中包含的例子中,利用了欧洲NCAP测试与评估协议中规定的GVT目标和车辆(移动)物体目标。 本文讨论了
[汽车电子]
基于E3的ADAS及BMS应用方案介绍
基于E3的ADAS及BMS应用方案介绍 最后一部分介绍下芯驰的应用方案,包括了ADAS及BMS。这两个应用在现在芯驰E3的市场推广中处于非常好的状态,我们也总结了十几家客户的设计经验和系统应用的情况,提供了一个总结性的框图给大家去做参考。相信各位很多是这方面应用的专家,所以这里更多的是抛砖引玉,介绍下我们方案的主要特点和价值。 BMS部分主推的是E3430芯片,它在BMS里我们客户使用的很多,这颗芯片有4个物理上的RAM内核,可以做两对独立运行的锁步内核或者一个锁步内核+两个独立运行的内核,无论如何,它的算力可以满足BMS复杂算法的部署要求。 同时,片内3MB SRAM也是非常充沛的。方案中有一些高性能的外设,包括SPI、
[嵌入式]
车载摄像头防水设计要点
车载摄像头防水检测的要点 1、确保车载摄像头的安装位置:应确保车载摄像头安装的位置是否能够抵抗外部的水流、气流以及水滴的冲击,这样才能确保摄像头的使用寿命。 2、检查车载摄像头的密封性:要确保车载摄像头处于密封状态,防止外部水分或者空气进入摄像头,同时保证摄像头内部的温度和湿度稳定。 3、保证车载摄像头外壳的厚度:要确保车载摄像头外壳的厚度能够抵抗外界环境的压力,防止车载摄像头被外界水流、气流以及水滴的冲击损坏。 4、检查车载摄像头的防水性能:要检查车载摄像头的防水性能,确保它具有良好的防水性能,以防止外界水分和空气进入摄像头,以及防止摄像头内部的湿度过高。 5、保证车载摄像头外壳的防水性能:要确保车载摄像头外壳的防水性能,以防止
[嵌入式]
恩智浦对ADAS和自动驾驶汽车市场的关注和思考
恩智浦推出了“全球首个完全可扩展计算架构S32”,主要面向OEM和Tier 1供应商,实现节点、软件和通用功能在汽车不同域、应用和SoC之间的重复利用。不过到2018年下半年之前,我们暂时还看不到任何基于该平台打造的芯片产品。 不过,作为一家全球领先的汽车芯片供应商,恩智浦倒是对目前汽车研发所面临的挑战有深入的了解:不断膨胀的软件数量,不同的应用太过复杂难以集成等等,而这个时候推出S32,反映出恩智浦对ADAS和自动驾驶汽车市场的关注和思考,也是对其他竞争对手的“示威”。 恩智浦S32汽车处理器平台 在提到目前业界常见的“车内遍布着被当做ECU使用的汽车MCU”,恩智浦NXP汽车微控制及处理器事业部总经理兼集团副总马特·约
[汽车电子]
基于视觉的ADAS解决方案,近在咫尺!
随着中高端汽车市场的快速发展,以及各国政府和民众安全性意识的大幅提升,曾经服务于小众高端市场的高级驾驶员辅助系统(ADAS)技术获得了快速发展的动力,特别是随着平台和解决方案成本的下降,ADAS应用及传感平台的配备已经从高端汽车向中端甚至入门级汽车车型中快速渗透。对于汽车 OEM厂商来说,在被动安全系统以及信息娱乐设备、ABS、ESP等已成为当前汽车电子标配设备之后, ADAS这类先进的主动安全系统还可作为产品差异化的增值亮点。
据IHS isuppli公司的汽车研究专题报告,2011年自适应巡航控制系统(ACC)、车道偏离警告(LDW)和侧面物体探测(SOD)等三大ADAS技术的营业收入合计达到16.5亿美元,比20
[嵌入式]
罗姆发布车载电源树参考设计白皮书
近年来,随着汽车事故预防措施和自动驾驶技术的发展,对支持高等级安全要求(ASIL)的高级驾驶辅助系统( ADAS )的需求也与日俱增。自动驾驶是指由搭载于汽车中的单元代替驾驶员执行人类驾驶汽车的四个要素(通过耳朵和眼睛进行“认知”,通过大脑进行“预测”和“判断”,通过方向盘和油门进行“操作”)的驾驶。要想实现安全的自动驾驶,需要准确的感应和及时的显示和控制。因此,硬件中摄像头和传感器的使用数量呈增加趋势,并且为了能够准确地告知情况,对信息娱乐系统也提出了多功能化要求。 在这种情况下,用于实现安全功能的单元还需要监控内部运行状态,并注意因单元故障而导致的功能丧失情况。这也需要电子电路来监控每个单元内部的运行状态,这将使电子电路变
[汽车电子]