基于Hadoop的智能变电站数据管理系统设计

来源 :吉林大学 | 被引量 : 0次 | 上传用户:yayaguo123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
伴随我国智能变电站和相应的监测体系不断成熟和完善,产生的电力数据在数量方面大大提高,海量的数据存储和复杂的数据类型使得传统的数据管理模式很难满足电力领域对于数据存储和管理的要求。为使智能变电站高效、稳定的工作,同时实现站内外各类数据的统一管理,需要构建智能变电站信息一体化平台来提高站内各个部门交流与合作,并且基于大量监控数据的存储和管理来为领导层辅助决策。因此,构建新型的智能变电站数据管理系统,以满足企业在海量状态信息存储与查询分析的需要具有重要的意义。同时,Hadoop、No SQL等大数据相关技术的快速发展,为支持海量数据存储、快速检索的智能变电站数据管理系统的研发奠定了坚实基础。本文的具体研究内容如下:(1)针对智能变电站数据特点将数据整理为结构化、半结构化、非结构化三种类型,分别对不同类型的数据设计管理模式,研究变电站在线监测数据的故障诊断框架和方案;(2)设计基于Hadoop的智能变电站数据管理系统总体框架、数据流转过程、存储和检索功能,基于信息融合对变电站故障设备进行精确分析,基于关键词提取设计变电站文献关联检索;(3)在信息一体化平台的基础上开发基于Hadoop框架的智能变电站数据管理系统,采用分布式文件系统(HDFS)和HBase数据库对数据进行分布式存储和管理,并行计算框架Map Reduce作为海量数据查询分析的计算模式,利用Java语言实现B/S模式的智能变电站数据管理系统;(4)使用真实的变电站运行监测数据进行系统测试,分析系统的存储性能、查询性能、读写延迟对比、分布式索引对比。基于Hadoop的智能变电站数据管理系统可以实现变电站各类信息的存储和管理,包括变电站运行数据、在线监测数据、设备管理信息、故障处理报告等。数据的录入既可以手动输入也支持批量导入,管理的数据类型包括结构化数据、半结构化数据和非结构化数据,文档管理中可以自动生成关键词进行存储,便于操作人员快速的检索和读取。利用Hadoop集群对不同规模数据集进行集群I/O性能测试、多维数据查询与分析,测试结果表明该系统能够合理的发挥出Hadoop在分布式存储和计算方面的优势,完成对智能变电站各类业务信息的稳定保存和快速检索等管理功能,不仅极大的降低了运维成本,而且在系统稳定性、扩展性等方面具有明显优势,能够满足大规模智能变电站数据存储查询的需要,同时也为电力系统信息化的建设进行了有益探索。
其他文献
<正> 哈佛台阶试验,由于试验方法简便易行,而且能客观地反映心功能变化的情况,所以它是体育测量与评价中常用的心血管机能试验。在1967年,阿斯特兰德和伯斯特朗(Astrand和Bers
常规单脉冲雷达由于测角精度高而被广泛用于目标跟踪,但其很难区分落在一个波束的同一距离单元内的多个目标。目前,我国在多目标分辨个数、分辨精度及实时性方面的研究都与国
应用地统计学、专家系统、地理信息系统和智能农机等技术,研究了吉林省黑土区土壤养分变异规律,提出了适于黑土区的玉米精准施肥模型,开发了玉米精准施肥专家系统,并通过变量
为了规范和推动户外运动在高校健康、有序地发展,保障高校学生在户外运动中的人身安全,采用文献资料法、问卷调查法、数理统计法等研究方法,对浙江省11所高校学生参与户外运
研究了热处理工艺参数对A357合金力学性能的影响,并对合金的强化机理进行了分析。研究结果表明A357合金最优化的热处理工艺为:固溶温度(548±3)℃,时间12h;淬火水温度40℃;时
从上世纪九十年代开始,中介人和中介组织已经逐渐走入人们的视野,并得到社会的普遍认可。其中,“居间人”这一从战国时期就出现的角色又重新活跃在我国经济社会舞台上,经过二
针对当前我国农业现状和智能灌溉技术方面的情况,现设计一套通过管路连接系统的高效精准灌溉施肥机,来改善传统的灌溉方式,该设备通过检测灌溉管道中的EC/PH值的浓度来实现自
<正> 最近,广东教育学会组织了一些高等师范院校的教育史、教育学专家、教授和教师,座谈对孔子教育思想的再评价。同志们认为,毛主席早就对孔子作过正确的评价,对孔子的思想
随着社会的不断发展,为满足日益增长的全社会用电需求,保证供电可靠性,我国的电力建设进入到一个飞速发展的新时期。如何管理好基建项目,提高电网项目建设管理过程中的工作效
杠杆收购是20世纪80年代盛行于美国并购市场的一种特殊并购方式。文章在介绍杠杆收购的概念及其性质的基础上,重点探讨其在公司融资领域和公司治理领域对经济发展的重要意义;