【摘 要】
:
由于视觉方面的障碍,全世界约2.53亿视障人士的出行和生活面临着诸多不便,对于环境的感知尤其困难,严重影响着他们的生活质量。传统的盲人辅助手段(如盲杖、导盲犬)的使用存
论文部分内容阅读
由于视觉方面的障碍,全世界约2.53亿视障人士的出行和生活面临着诸多不便,对于环境的感知尤其困难,严重影响着他们的生活质量。传统的盲人辅助手段(如盲杖、导盲犬)的使用存在着不少局限,而现有的导航、避障、定位等辅助方式又不足以提供比较全面的场景信息(包括周围的物体,以及地面墙面等环境信息)。种种困难让视障人士群体迫切希望有一套辅助他们感知周围环境的系统。近年来,利用卷积神经网络、借助深度学习手段进行图像识别和分割的技术在图像内容理解和信息获取领域有了十分广泛的应用。其中,语义分割对图像进行像素级分类,能获取丰富的物体和场景信息,很适合场景感知任务。然而,盲人辅助的场景感知有其特殊的应用要求:环境中存在海量信息,对于冗余信息盲人无需感知;网络在盲人常用的移动设备上运行,要满足一定的实时性要求,实现精度和实时性的平衡;同时,盲人活动范围为室内外,光照变化对语义分割鲁棒性有较大影响。针对这些问题和需求,本文研究可用于移动端的轻量级语义分割网络,并将其应用于移动端设备上,为盲人辅助场景感知提供支持。本文总结了相关技术的发展现状,并归纳了核心部分——实时语义分割网络常用的主要技术方法。在此基础上,采用基于DeepLabv3+网络结构、MobileNet v2及改进的ShuffleNetv2作为特征提取器的轻量级语义分割网络,并通过适当增减调整空洞空间金字塔池化层(ASPP层)的数目对其加以改进;训练数据上,对室内外场景数据集ADE20K做类别缩减去除冗余信息,再经光照不变性预处理,以提高模型精度和鲁棒性;采用多次预训练的方式,使用不同的初始学习率,对模型在经过和未经光照不变性预处理的数据集上分别进行了训练和验证,并在Gardens Point Walking数据集白天和夜晚图像上进行了测试,验证模型对光照的鲁棒性。对两种轻量级语义分割网络模型,在精度、实时性和模型规模及计算量方面与已有模型进行对比,在1080Ti上,以MobileNetv2为backbone的网络mIoU为 50.9%,运行速度为 64 FPS;以 ShuffleNet v2 为 backbone 的网络mIoU 为 45.8%,运行速度为83 FPS。随后对训练好的模型完成了安卓手机端的移植部署。最后本文对盲人辅助场景感知的轻量级语义分割网络进行了总结,对目前存在的可改进之处和今后的发展方向作了展望。
其他文献
锆钛酸铅(PZT)压电陶瓷是一种可将机械能和电能相互转换的陶瓷材料。利用其压电特性设计成的压电传感器广泛应用于声纳系统、气象探测、遥感环保、家用电器、医疗和通信等领
随着秘鲁的建筑业持续发展,公司之间的竞争力也随之增长,一些重要指标,诸如企业社会责任(CSR)是企业战略决策的主要关键因素。秘鲁的建设工程管理质量相比其他国家还不够好。
柔性传感器的主要功能是将外界声、光、力和热等信号转化为可视的电信号,因此无论在人体健康监测、生物医学、电子皮肤等医学相关领域,还是对新一代机器人等电子设备的升级都
随着情感分析领域研究的不断发展,音乐作为人们日常生活中常见的多模态信息载体,其往往通过歌词和旋律传递情感,因此也被逐渐纳入到情感分析的研究范畴之中。除了歌词和旋律,
香蕉(Musa spp.),作为我国南方四大佳果之一,在热带地区广泛栽培。香蕉组培苗与传统吸芽繁殖相比,具有无病毒、变异率小、生长一致、种苗便于运输等优点。自推广以来,随着需求量日益增大,香蕉组培苗的工厂化育苗也在不断发展。光是香蕉工厂化育苗重要环境因素之一,因此,研究补光对香蕉组培苗生长发育的影响具有重要的意义。本研究以’天宝蕉’为实验材料,通过调控光质和光周期对香蕉组培苗进行补光培养,筛选出光
碳纳米管(CNTs)以其高的抗拉强度(11-63 GPa)和弹性模量(270-950 GPa),优异的热学和电学性能而著称。在高性能的金属基复合材料中CNTs作为理想的增强相被认为具有广阔的应用前景。由于CNTs范德华力强以及与金属基体界面润湿性较差造成其性能无法充分的发挥。因此如何有效的在金属基体中均匀分散CNTs和实现其与基体之间良好的界面结合是面临的两个主要挑战。本研究采用粉末冶金法结合喷雾
具有延迟索赔和随机红利策略的风险模型,一直是风险理论的热门课题。本文主要研究两类具有这两种特征的离散时间风险模型。第一个是马尔可夫二项风险模型,并以Gerber-Shiu罚
当前人们主要通过社交网络来分享自己的生活并结识更多的朋友,随着社交网络的不断发展,社交网络平台呈现多样化的形式,形成异构社交网络平台集合,进而在网络环境中产生了一个庞大的社交网络结构。异构社交网络中的实体主要包括用户、位置以及话题等。异构社交网络中实体锚链接识别可提高跨社交网络用户推荐以及网络信息扩散的准确性。本文主要研究异构社交网络用户实体锚链接识别关键技术与位置实体锚链接识别关键技术。首先,针
在驱动设备中,永磁同步电机(Permanent Magnet Synchronous Motor,PMSM)的角度位置要求必须精准可靠,这关系到控制系统性能的好坏。而在恶劣的工作环境下,传统电机位置传感器
第一部分克山病全国和地方病情分析研究目的:本研究分析克山病全国和地方病情趋势和控制情况研究方法:选取了1999-2009年文献报道的全国克山病病情监测报告和2009年至今的7个