基于深度学习的交通标志识别方法及FPGA验证

来源 :内蒙古大学 | 被引量 : 0次 | 上传用户:luohz09
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
交通标志识别是目标检测领域的一个热点和难点。自然场景下的道路环境复杂多样,交通标志牌在环境中的占比非常小,自身的有效特征会被背景环境中诸如广告牌、树枝等物体遮挡和稀释,导致识别难度增大。交通标志识别用于自动驾驶、辅助驾驶等车载场景时,其识别速度越快,越能及时发现重要交通标志并反馈给驾驶员,这对交通标志识别的边缘部署能力和处理速度提出了要求。而现有的交通标志识别方法中,很难兼顾在嵌入式场景下对小目标识别的准确率和处理速率。针对上述问题,本文尝试将深度学习方法应用于交通标志识别,同时面向体积、功耗受限的车载环境,研究了交通标志识别方法的FPGA(Field Programmable Gate Array)部署,其中主要工作如下:(1)针对交通标志在自然场景下占比小、有效特征被稀释的问题,对数据集进行改进,通过过采样、复制样本目标的方法增强数据集,改善网络识别效果。(2)针对卷积神经网络YOLOv4-tiny对小目标的识别率、召回率低的问题,对网络结构进行改进,利用特征融合的思想,将YOLOv4-tiny提取的高层次语义特征和低层次原始特征相融合,增加了 52×52尺度的输出,使分割图像的像元变小,并在网络训练前使用聚类方法设置了新的先验框参数,改进后网络的平均精度由44.2%提升至83.0%。(3)针对交通标志检测技术对于边缘部署和推理速度的要求,对YOLOv4-tiny的权重进行了动态定点量化,将网络参数在硬件平台上的资源占用从55.4%降至40.8%。在硬件部署时对三维卷积进行了循环展开和循环交换,设计了卷积加速通路,提高了卷积效率,将池化操作分解为横向池化和纵向池化,增加了突发传输长度,降低了传输时延。(4)在实验室环境下模拟现实场景中交通标志检测的场景,搭建了智能车作为FPGA验证平台的补充,进一步验证网络的实际性能,结果表明,本文交通标志识别方法在边缘侧的单帧推理速度为1.03s,较CPU性能提升了近24倍。
其他文献
在如今受新冠疫情影响的时代,市场经济愈发不景气,大部分行业又都以销售为主,如何在外部市场环境发生变化的情况下,依旧让企业保持原有的成长势头,甚至超越原有的成长势头?企业实施的盈利模式是重要的影响因素之一。如今越来越多的企业选择了由重资产向轻资产转型,实施轻资产运营模式的企业往往会将创造价值低的环节外包给其他更擅长该环节的企业,这样不仅节省时间,还节省人力,从而达到以较少的资源投入为企业创造更高的价
针对传统信息采集系统存在的执行任务过程功耗大且耗时长的问题,基于中间件和流计算,设计了新的跨业务综合能源信息采集系统。该系统将STM32F4系列单片机作为信息采集模块核心结构,使模拟量能够满足AD采集要求。然后以ADP7159芯片为基础设计电源模块电路,满足电路板电流扩展需求;使用EEPROM可擦除可编程存储模块,抵抗非法修改BIOS芯片的CIH病毒,避免出现任务执行延迟的问题。基于此,使用COR
西瓜是一种重要的园艺作物,经济效益显著,但枯萎病的发生严重限制了西瓜的生产。为了解决这一难题,利用简单、方便、实用性强的分子标记技术辅助选育抗性强的西瓜品种对于西瓜产业的优质发展具有重要意义。以父本sugarlee、母本伊选、F1代、F2代及F3代遗传群体为材料,通过苗期接种鉴定,对父本的抗性遗传规律进行研究,发现父本sugarlee对枯萎病生理小种1的抗性遗传为单基因显性性状遗传;然后利用CAP
期刊
<正>一世界屋脊上的关帝庙拉萨市中心,距布达拉宫约九百米,有小山,名"帕玛日",因形似磨盘,又名磨盘山。西藏最重要的关帝庙便坐落于此。庙坐北朝南,主殿是典型汉式石木建筑,抬梁式架构,单檐歇山顶(2007年
期刊
随着技术的不断进步,大数据正在更多的领域中发挥着日益巨大的功能。目前大数据开始慢慢融入到审计业务当中,海外许多大型企业例如高盛等公司都全面开始采用审计大数据,许多企业在经历第一轮试水以后也已经开始争相应用,大数据技术正不断地在审计业界传播起来。文章中通过对问题背景说明,首先阐述了大数据技术的重要性。之后又对国外有关会计大数据的有关理论进行了说明。文中借助案例分析法,对具体的企业进行研究,讨论会计大
本文分析了陆域指挥信息系统国产化软件平台的建设需求,面向服务器、指控端、机载终端、火控终端、手持终端等异构环境,开展了可支撑跨平台软件开发/运行/集成、多种场景作战运用的国产化指挥信息系统软件平台设计,提出多模态自适应人机交互、跨平台服务开发集成、异构硬件平台适配优化、软件运行库和跨平台中间件集成优化等关键技术解决方案,为陆域指挥信息系统的异构软件集成部署、跨平台协同运行、多场景适配运用提供了基础
<正>每年的假期,父亲都会带着我们全家到外地旅行。在2021年讨论暑假旅行的家庭会议上,我提议进行一次大河人文之旅,这样不仅可以沿途观赏到沿途山川的壮丽景色,品尝沿途各地的特色美食,还可以通过实地考察将学习过的语文、地理和历史知识贯通起来。我的提议得到了全家人的一致同意,而且我们决定选择黄河作为此次大河人文之旅的对象。黄河是中华民族的母亲河,她孕育了几千年的中华文明。不管是文学、地理,还是历史,与
期刊
“忠实”一直以模糊、多义且演化的样态主导着翻译实践与研究。《西游记》英译者余国藩关于翻译的思与行之道,为我们研究忠实翻译问题提供了一定的思路。余国藩秉持认同差异、兼顾读者、面向原文整体的忠实观。这一观念使他奉行异于其他译者的求真务实原则:在意义层面,求原文寓意之真,务原旨可读之实;在审美层面,求诗学形式之真,务韵美可读之实;在风格层面,求乡土风格之真,务风情可读之实。这番思与行的关联分析揭示了翻译
为验证伪狂犬病病毒(pseudorabies virus, PRV)US3基因缺失后作为疫苗的免疫效力,构建PRV△gE/TK/US3基因缺失株。利用PRV QYY2012变异株基因组扩增US3基因两侧序列作为同源重组的左右侧同源臂,以绿色荧光蛋白(EGFP)为标记基因,经酶切依次连接至pBluescript SK(-),构建重组转移载体pSK-US3-LR-EGFP。将pSK-US3-LR-EG