【摘 要】
:
机动车在夜间行驶过程中,受来向车辆明亮灯光影响,驾驶员视觉容易发生眩目,无法准确判断前方路况,造成道路安全隐患。通过红外相机和可见光相机同步拍摄晕光场景,进行异源图像融合,能够有效剔除融合图像中的晕光信息,减小晕光对人眼带来的不利影响。但抗晕光图像融合算法复杂,计算量大,利用软件实现存在计算效率低、耗时长、应用困难等缺点。因此,本文基于ZYNQ异构平台对抗晕光图像融合算法进行硬件加速,设计了一款运
【基金项目】
:
陕西省重点项目基金(编号:2019GY-094);
论文部分内容阅读
机动车在夜间行驶过程中,受来向车辆明亮灯光影响,驾驶员视觉容易发生眩目,无法准确判断前方路况,造成道路安全隐患。通过红外相机和可见光相机同步拍摄晕光场景,进行异源图像融合,能够有效剔除融合图像中的晕光信息,减小晕光对人眼带来的不利影响。但抗晕光图像融合算法复杂,计算量大,利用软件实现存在计算效率低、耗时长、应用困难等缺点。因此,本文基于ZYNQ异构平台对抗晕光图像融合算法进行硬件加速,设计了一款运算速度快、图像处理效率高、体积小且功耗低的嵌入式夜视抗晕光图像融合系统,减小晕光对驾驶员的干扰,提高夜间行驶的安全性。本文做出的工作如下:1)为保证图像融合时异源图像数据的同步性,进行了异源图像并行同步采集的设计。首先设计了基于VDMA的异源图像同步采集工程;然后在ARM端进行了Linux系统移植,完成了USB3.0工业相机、VDMA图像搬运模块的驱动设计,在FPGA端进行输出模块的设计;最终在ARM+FPGA的异构体系下完成了红外与可见光视频图像的同步采集与显示。2)为提高抗晕光图像融合的质量,在ZYNQ的FPGA端进行了图像预处理算法的数字逻辑优化设计。首先,采用计算量小的仿射变换实现异源图像的配准,消除了异源图像空间上的差异;然后,采用多尺度Retinex(MSR)图像增强算法对红外图像和可见光图像的暗处细节信息进行增强,由于MSR涉及到不同尺度卷积核的卷积运算,在采用FPGA实现时复杂度较高,对其计算过程进行了优化,通过多次复用最小尺度的卷积核去完成不同尺度的卷积运算,大大的降低了MSR在FPGA中的实现难度,图像暗处细节信息得到显著增强。3)为提高嵌入式夜视抗晕光系统融合图像的亮度与清晰度,在ZYNQ的FPGA端设计了基于YUV色彩空间的NSCT图像融合算法,同时为彻底的剔除融合图像中的晕光信息,避免晕光信息参与融合过程,设计了高频模值取大和低频权值自适应的融合规则,利用FPGA逻辑资源丰富与并行架构的硬件优势,在保证抗晕光系统实时性的前提下,显著提高了融合图像的亮度与清晰度,有效提高了行车安全性。通过Vivado开发平台完成抗晕光系统硬件模块的集成,对抗晕光系统进行多个晕光场景的验证分析,多组实验结果表明,本文设计的基于多核异构的异源图像融合抗晕光系统实时性较高,且输出的消晕光视频图像流畅清晰,具有实时性高、功耗低、便于汽车安全领域应用等优势。
其他文献
姿态传感器是一种高精度测量仪器,其输出数据易受温度影响,为了保证工作精度,需要对其进行温度补偿。温度补偿作为姿态传感器出厂校准重要环节,相关技术已经成为姿态传感器误差补偿的重要研究领域。本文研究并设计了一套温度误差补偿系统,消除了由于温度变化造成的姿态传感器数据误差,提高了姿态传感器数据精度。主要内容包括:1.为了解决温度补偿系统控制延时和超调问题。通过研究石英灯辐射原理,对辐射过程进行分析和建模
近年来,煤化工企业的安全问题一直是社会的关注焦点,在煤化工企业内部存在的泄漏隐患对社会及个人的生命财产造成威胁,因此工厂内部的日常巡检工作起到了至关重要的作用。目前已经出现利用巡检机器人代替传统人工巡检的巡检方式,但单个巡检机器人的巡检效率依旧较为低下,且由于其巡检范围有限,无法做到对煤化工厂内的高低同检。本课题使用无人机-无人车组成的异构多移动机器人作为实验平台,针对异构多机器人在煤化工厂储罐区
声纳浮标是一种现代海军反潜作战中应用较为广泛的水下目标探测设备,主要用于反潜作战初期大范围搜索阶段。声波是目前已知唯一能在水中远距离传播的能量形式,随着海洋水下和水上船只潜艇的数量增加,近年来声纳浮标的采集系统逐渐从单通道发展为较复杂的多通道同步采集,同时逐渐使用高精度的集成电路进行接收信号处理和传输。因此对于声纳信号采集系统的发展,小型化硬件、实时性和声纳信号处理算法是水声采集领域的重点研究内容
陆战场作为军队活动最早和最频繁的战场空间,是重要的作战场景之一,对于军事战略的成败和保障国家安全至关重要。伴随着科学技术的提高与发展,军事目标检测技术也在逐步优化,而针对陆战场环境下的传统检测手段,存在着耗时、耗力的问题,因此基于人工智能、机器视觉等领域的军事智能化检测算法应运而生。目前,现有的大多数模型的训练与检测都依赖大型计算机或服务器,相关算法参数量冗余,难以在资源受限设备上部署,但军事战场
因重物倒塌致人体机械性损伤是地震等灾害发生后的常见伤类。有研究表明,遭受机械性损伤的伤员常常因罹患挤压综合征而在重物移除后致使其伤情突然加重甚至于死亡,故而在搜救中提早获悉被压埋人员的挤压生命状态是至关重要的。相较于可见光或热成像等传统灾后搜救设备,生物雷达可以利用电磁波在间隔一段距离、穿透非金属障碍物的条件下,检测因人类心肺活动而引起的生命体征信号,具备可穿透、不受光照、气候等条件影响的优势。因
情绪往往是人类生活中的一种佐料,有效的情绪识别技术,可以利用反馈的方式,来调整自己的身体对负面情绪的影响,这不但对维持自己的身心健康有帮助,同时也有利于实现智能情绪计算的人机交互,然而,现有的情绪识别技术及其可靠性仍存在许多优化问题,比如,依据主观性、单模态数据检测情绪结果的真实性和准确性,本文就针对以上问题采用了融合显式的面部表情和内隐客观的生理信号的方式来识别情绪,主要研究内容如下:(1)分析
机场跑道异物(Foreign Object Debris,FOD)是指遗落在机场跑道上的物体,会对飞机的起降带来严重的安全隐患。随着全球航空业的发展,机场跑道的安全问题也备受关注,为保障飞行安全,减少意外事故的发生,各国对机场跑道异物检测提出了更高的标准和要求。目前,机场跑道异物的检测主要以计算机视觉技术为研究方向。但现有自动化检测设备受限于搭载方式、检测精度,无法有效检测小型异物,目前小型异物仍
当前,我国机动车数量的飞速增长使得交通拥堵问题愈演愈烈,信号灯控制的交叉口是交通拥堵的主要发生地,传统定时的交通信号控制方法无法适应动态变化的交通环境。随着人工智能技术的发展,建立智能化的交通信号控制系统,提高城市道路车辆的通行效率成为当下必然选择。首先构建单交叉口信号控制的深度强化学习智能体模型,并设计模型中的状态空间、动作空间、奖赏函数等要素。具体以交叉口入口道上车辆数目、平均速度、信号相位构
在军事演练实验场景中,移动机器人通常代替人充当着重要角色。在无人侦察、无人打击、无人假想敌靶标方面都发挥着重要作用,在智能装备体系试验中,多移动目标的位置、姿态及其它状态的感知是体系装备作战效能考核的基础。对于传感系统不开放或不具备的实验装备,用户无法通过应用接口读取装备位置姿态信息,难以实现多目标集成问题。此时,加入外部组合定位导航系统可以很好的解决位姿测量问题,同时构建数据网关以解决系统数据难
在工业生产过程中,传统工业流水线多使用人工方法对工件进行检测、识别与上料,该方法存在劳动力强度大、效率低及价格昂贵等缺点。由于机器视觉具有高精度、非接触、高适应等优点,因此常与机械手结合应用于工业生产中。本文针对多个壳状工件在随意摆放和整齐摆放的多目标多角度状态下,利用视觉机械手对其进行识别上料工作,提高系统的智能化和高效化水平。由于壳状工件在识别中存在边界锈渍及阴影、遮挡等问题,本文基于灰度信息