基于FPGA动态手势识别系统研究与实现

来源 :成都理工大学 | 被引量 : 0次 | 上传用户:fly383910564
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人工智能已经成为时下最热门的话题,手势识别又是人工智能的重要领域之一。基于穿戴式数据手套笨重、昂贵的缺点限制了使用场景,大量基于机器视觉的手势识别应运而生。在手势识别中,手势状态分为静态和动态,动态手势识别是目前研究趋势。通过分析现有国内外研究动态手势识别技术现状,发现动态手势识别速度和精确性仍然是一大挑战。为了能够提高手势识别的速度和准确度,提出借助FPGA的并行处理能力和现场可编程的特点来加速动态手势识别的前端处理部分,而后端的识别部分则交给擅于复杂算法的PC上位机来实现的思想。系统首先采用肤色模型和计算手势质心方向角分割手势区域和提取手势质心特征,通过对比隐马尔科夫和动态时间规整算法,选择动态时间规整算法作为手势识别模型。前端利用FPGA加速,后端限制DTW搜索范围提高算法速度。论文研究工作主要包括以下方面:第一,研究大量国内外动态手势识别的现状和最新成果,针对系统的实时性要求,提出利用FPGA作为图像处理硬件加速平台,PC上位机作为手势识别算法处理平台的系统方案。第二,通过对图像处理算法的研究和分析,结合仿真平台,对动态手势识别算法的可行性进行了验证分析,并且为该系统搭建了一个仿真模型。分别为肤色检测、数学形态学处理、Sobel边缘检测、质心特征提取、识别算法进行对比验证。第三,以FPGA芯片为硬件加速平台,采用UP TO DOWN的设计方式,Verilog HDL语言完成硬件加速部分的功能设计。包括肤色检测模块、中值滤波模块、腐蚀膨胀模块、Sobel边缘检测模块和手势特征提取模块。在前期仿真和调试的时候通过串口发送图像数据到FPGA中,经过各个模块处理后,最后扫描到VGA屏幕上显示。第四,在FPGA提取了动态手势特征序列后,通过串口将特征序列发送给上位机进行手势识别。手势识别采用了动态规整模型算法,针对算法提出改进优化,提高了识别算法的搜索效率。并且结合Python语言完成对算法的训练和识别。并且编写了系统展示界面。第五,系统设定训练8种动态手势,4种手势运动轨迹为直线型,4种手势运动轨迹为曲线型。针对这8种手势种类,在4种不同场景下进行测试,得出轨迹为直线型的平均手势识别率在95%左右,曲线型的平均手势识别率在80%以上。并且以查全率、查准率、精确率三个指标来评估系统的性能,经过最后的测试,发现系统在识别准确度和实时性上都能满足预期功能要求和设计目标。本文针对借助FPGA完成动态手势识别的研究成果对具有实时性、无接触要求的智能化控制场景具有一定的意义和参考价值。
其他文献
在近海地区的钢筋混凝土(RC)结构中,钢筋由于高潮湿度和高氯离子含量作用而产生锈蚀的现象普遍存在,如何早期监测RC结构中钢筋锈蚀的产生与发展及破坏全过程具有重要意义。然而,在RC结构中钢筋锈蚀具有一定的局部性且沿钢筋与混凝土界面产生和发展的特点,给钢筋锈蚀程度(尤其是锈蚀面积)与定位评价带来较大挑战。本文采用一种将理论分析、数值计算和试验验证相结合的方法,对RC结构中钢筋的局部锈蚀问题进行监测与评
随着人类生活与生产水平的不断提高,能源需求也与日俱增,如何解决好可持续发展与能源需求之间的矛盾是我们不得不面临的历史性问题。站在中华民族持续发展的高度,迫切需求我们倡导节约资源、调整经济结构和建立可持续发展的生产模式。合理开发利用可再生能源是解决当前问题的有效途径。近年来,具有清洁低碳、原料丰富、可替代化石能源等优点的生物质能(沼气),受到了广大科技工作者的研究与关注。目前为止,沼气因为可直接燃烧
随着中国经济的不断发展,我国金融市场上的竞争也越来越激烈,城市商业银行应对市场风险的要求也越来越高:一方面,国内银行经营同质化严重,通过产品和服务难以取得市场竞争优势;另一方面,伴随我国人民币国际化战略和WTO保护期即将结束,国内银行业将被动地或主动参与国际银行业竞争,而越来越多的理论与实践研究表明,商业银行间的竞争,归根到底是银行间企业文化的竞争,因此如何基于企业文化建设需要提高银行竞争力就成为
当今社会,一家企业的责任意识对这个企业能否良好发展,尤为重要,企业必须加强对社会的责任意识。而我国很多企业其中包括商业银行在这方面做的都不是很到位,尤其是在支持绿色
电连接器是电子电气系统中用于传递电信号的必不可少的元件,电信号的传递主要靠接触件完成。而系统中电信号的丢失往往会引起系统故障甚至瘫痪,因此对电连接器接触件的可靠性
近年来,随着互联网技术的飞速发展,我国民航、铁路、城市交通、建筑、物资、化工、商贸、机械等基础行业也保持着稳定快速的发展趋势,但是其运营管理的效率及现代化、智能化的程度,还有待于更进一步地提升。现有基于ISE(IBM的小型机、SqlServer数据库、EMC存储设备)单机架构的城市轨道交通运营管理系统,上线使用不到五年,其性能、拓展性、可用性等方面都已经不能满足使用需求。需要采用分布式服务架构进行
人权保障、无罪推定、程序正义和控辩平衡等刑事司法理念为侦查阶段的辩护律师辩护权提供了扎实的法理基础。2018年新修订的《刑事诉讼法》对辩护律师的辩护制度做了大幅修订
当前移动通信技术飞速进步,人们有了更高的网络的性能需求,超密集网络(Ultra-Dense Network,UDN)逐渐成为备受关注的热点技术。UDN由于部署了大量的低功率节点(Low Power Node,LPN),使得用户的体验、频谱效率以及网络的容量得到非常大的提升,但也带来网络能耗大大增加的弊端。为此,本研究主要围绕基站能效方面展开。本文对相关技术基础进行了调研,详细研究分析了UDN技术,
研究目的:本文拟对身体形态、素质与女大学生身体自我进行研究,比较身体形态、素质与不同专业、年级女大学生身体自我的关系,在了解身体形态、素质、身体自我的基础上,进一步探究各项身体素质对女大学生身体自我的影响大小,丰富女大学生身体自我的相关研究,弥补国内外在较全面的身体形态、身体素质与身体自我之间关系方面理论研究的不足,为女大学生有针对性地提升自己的身体形态和身体素质,以改善身体自我,促进其身心健康提
随着机器人领域的发展,使用工业机器人代替人工从事重复性、艰苦性作业已是行业大趋势。我国是汽车产销大国,经过长足的发展,当前国内汽车制造领域大部分已实现自动化生产,唯独汽车轮毂的打磨抛光作业仍大量依靠人工。由于目前机器人自动化磨抛仍存在诸如造价高昂、精度不稳定等限制,汽车工业不得不放弃具有更好作业质量、更高的作业效率的自动化作业方式。而制约自动化磨抛在汽车领域大面积应用的主要因素,是末端执行器的力位