面向云端结合的视频情感分析系统的设计与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:blyd831104
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人工智能技术的发展,对人机交互方式提出了更高的需求的同时,让智能设备更理解用户的情感状态也成为可能。通过对用户的情感进行分析,可以为用户提供更加个性化的服务策略,这对于提高服务质量、提高用户满意程度具有至关重要的作用。在电力营销、智能客服等场景中,情感分析所带来的效果提升更为明显。面向云端结合的视频情感分析系统就是在这样的背景下提出的。本文以音视频情感分析为主要内容,结合雾计算环境,设计并实现用于音视频情感分析的系统平台。本文提出了一种基于深度神经网络的视频情感分析方案,使用人脸数据以及人脸关键点数据,结合卷积神经网络完成对视频数据的情感识别;提出了一种基于CRNN的双路语音情感识别方案,通过对语音信号的处理,提取语音信号的统计特征以及梅尔频谱等特征利用循环神经网路进行训练,以此实现对语音信号的情感分类;对于音视频情感融合方案,为了保留单独的音视频情感识别应用场景,设计了基于权重准则的音视频情感识别融合方案;最后,为了利用雾计算环境,减少网络中数据传输带来的时延,提出了一种基于多服务器协同的云端结合部署方案,通过雾节点完成情感识别任务处理,云计算中心进行协调控制的思想减少网络中数据传输,实现更低的时延。通过面向云端结合的视频情感分析系统,可以满足用户单独视频情感识别、单独音频情感识别以及音视频情感识别融合的需求,在保证较高识别准确率的同时,利用雾节点完成边缘设备的情感识别任务,数据在云计算中心进行统一存储,实现更低的时延,减少了网络中的数据传输,降低了网络带宽压力。本文首先介绍了情感识别的研究背景以及国内外研究现状并对关键技术进行了简要介绍。随后,在完成需求分析的基础上,对系统中涉及的关键问题及解决方案进行了详细的描述。最后,完成了系统的总体设计并基于此对系统详细实现进行了介绍,包括系统的总体架构、系统关键模块的设计与实现等,并对系统的整体性和可用性进行了验证。
其他文献
近些年来,基于互联网和共享经济的众包方案作为一种新型的计算模式带来了巨大的社会和经济效益,越来越多的大型公司选择网页或移动端众包作为一种新型的问题解决方法。现有大多数众包方案的构建基于第三方众包平台,而这种集中化的数据管理模式面临一些不可避免的问题,例如,易遭受Do S攻击、远程劫持和Sybil攻击,存在单点故障、隐私泄露和数据丢失的风险。此外,第三方平台可能对众包过程进行恶意仲裁,从而导致奖励的
质子和α粒子束流普遍存在于空间等离子体环境中,它们在很大程度上影响电子-质子-α等离子体中的本征波模特性,特别是可以触发静电离子束流不稳定性和电磁离子束流不稳定性。本文全面研究了质子束流和α粒子束流等离子体中平行于磁场方向传播的波和不稳定性。首先,基于等离子体多流体理论,给出了温度各向同性等离子体中一般色散方程的解析表达式,并据此分析了不同束流速度下的电磁不稳定性特性。接着进一步考虑了温度各向异性
英语双及物构式又分为双宾构式和与格构式,其中与格构式在中国学生使用中频率更高,同时是初中语法教学项目之一。但长期以来语法教学过于侧重形式规则,教学效果不尽如人意,这
随着IC技术向无线通信领域的不断发展,无线传感网络等新型应用对集成系统的尺寸缩减提出了新的挑战,由射频电路、数字基带电路和传感器等集成的片上系统(SOC)就此诞生。而天线作为无线系统中不可或缺的重要组成部分,能够通过芯片加工工艺与射频电路在芯片上集成,从而在降低射频电路和天线间的传输损耗的同时达到缩减整个系统尺寸的目的,这就是片上天线(AOC)技术。然而,片上天线技术采用的CMOS工艺中低电阻率、
村规民约是村民自治组织对其内部事务进行管理的规则,同时也是村民实现其自治权的重要载体之一。村规民约发挥了弥补法律法规空白、调整乡村秩序、弘扬优秀传统文化的积极作用,从而对巩固基层法治、夯实村民自治、培育乡村德治等方面具有重要价值,并且其在乡村社会治理方面的重要价值得到了党和政府的高度重视。但不可否认的是,在实践中部分村规民约仍然存在诸多问题,如制定程序不合法、内容与法律冲突、侵害特殊人群合法权益等
学位
进入本世纪后,随着中国老龄化程度不断加深,残疾人以及老年行动不便人士的数量快速上升,对智能化轮椅的需求越来越迫切。对于很多轮椅用户来说,其生理反应速度较慢,对轮椅的操控能力较弱,使得他们难以安全便捷地使用传统的非智能化轮椅。本文以智能轮椅为研究课题,主要针对轮椅在自动驾驶情况下进出窄门这一问题进行研究,寻找安全、舒适和高效的方法。相较于室外道路导航而言,自动驾驶轮椅室内进出门过程中存着在近门环境下
桥梁作为国民经济的基础设施,是人民赖以生存的生命线工程,容易在地震中遭受到破坏,并且一旦破坏很难及时修复。这便会给震后救灾工作开展造成影响,错过救灾的最佳时机。钢拱
由于稀土离子复杂的能级状态以及未充满的4f能级,不同的稀土离子掺杂对基质玻璃的影响也近相同,稀土离子掺杂的发光玻璃目前在诸如彩色电视器、太阳能电池、中红外激光器、传感器等领域都有着重要的应用前景,探索和研究具有良好光学性能及实用价值的玻璃以适应科技社会的发展变得越来越重要。本课题运用熔融淬火法的制备工艺,把具有较低的声子能量优点的碲酸盐以及高热稳定性的硅酸盐作为基质来制备稀土发光玻璃。借助于稀土与
共青团组织作为政治性群团组织,担负着巩固和扩大党执政的青年群众基础的政治责任。网络文化作品是通过网络平台创作的各种文化作品的集合,是共青团组织开展青年工作的重要手段。然而随着互联网时代迅速发展,网络意识形态日趋复杂,青年需求样态日益多元化、复杂化,这些都对共青团工作提出了严峻挑战和更高要求。H省作为经济欠发达省份,更需要通过网络文化作品探索青年工作新路径,开拓青年服务新载体。本文结合H省共青团和共
近几年,随着网络技术和电子商务的快速发展,Web服务引起了越来越多人的关注。建立在WSDL,SOAP以及UDDI等标准之上,结合XML等技术,Web服务在企业管理、消费服务、网络信息系统