面向大规模雷电信息的数据库存储与管理

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:double3A
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着雷电探测站点的增多以及长期对雷电信息的监测,中心站实时定位系统数据库遇到了新的挑战。雷电数据是进行计算和研究的重要依据,面对突发性强的大规模数据,如果没有高效快速的存取方法将破坏整体后期数据处理的实时性。本文从数据的加载存储、数据库管理组织以及数据备份和恢复等方面来进行研究,保证数据的实时性和有效性,主要内容如下:  第一,实现了数据库的高效实用存储设计。针对海量雷电信息处理的需求,通过分析数据库高速加载工具SQL*LOADER,提出了自动定时批量并行数据加载的方法。首先对数据进行解析,然后实现多级并行加载。整个应用程序在VC平台开发完成,在数据库服务器端自动定时值班。  第二,制定了基于分区的实时数据与历史数据的分离存储策略。当数据对定位计算系统可用后,为减少查询分析中的数据量和实现数据的高效管理,根据数据的保活期将实时数据和历史数据分离,并按照不同的时间粒度进行分区操作。  第三,实现了对数据库性能调整和优化。本文首先对数据库系统随着数据量增大所面临的问题进行了总结,并使用性能监测工具分析数据库运行状态。以此为基础,进行了综合查找分析,主要在SQL语句、磁盘I/O、数据库参数配置和分区转换等方面提出了优化方法和策略。  第四,完成了数据库的备份和恢复设计。通过对数据库备份与恢复方法的研究以及RMAN的工作机制深入分析,提出了雷电数据库在线多级备份策略。根据不同的时间频率和时间点,对不同的数据对象进行自动、增量备份。该方法可以有效的减少数据备份时间,降低备份操作对数据库计算业务的影响。
其他文献
Ⅰ型单纯疱疹病毒(herpes simplex virus1,HSV-1)的UL47基因属于晚期(late,L)基因,编码一个693氨基酸的蛋白。UL47可以被磷酸化和糖基化修饰,有两种不同修饰形式的蛋白,分子质量分
乳腺疾病已经成为威胁妇女身体健康的最普遍因素之一,尤其乳腺癌已是最常见的恶性肿瘤。近几十年来,国内外学者致力于改进乳腺癌的治疗工作,但世界各国乳腺癌总死亡率始终未
土壤有机碳是陆地生态系统碳库的主体,同时也是重要的大气碳库源汇,对全球气候变化有举足轻重的作用。土壤碳库的精确估算是确切把握土壤碳储存状况及源汇变化,制定固碳减排对策
目标电磁散射特性的研究一直是计算电磁学中一个重要的领域,原有的解析法只能适用于为数不多简单模型。随着计算机技术和各种快速计算方法的发展,原来用解析方法无法求解的电
随着3G在全球不断的兴起,规模的不断扩大,对于网络管理的要求也日益提高。如何构建一个功能强大、性能可靠、运行高效、可拓展性好的3G网络管理系统已经越来越受到关注。配置
肝炎是危害人类健康的重大疾病,可由多因素诱发产生,如肝炎病毒的感染、酒精的摄入及自身免疫反应介导的肝炎等,慢性肝炎往往会逐渐发展成肝纤维化、肝硬化和肝癌。机体的免疫反
DFT(Discrete Fourier Transformation)是数字信号分析与处理如图形、语音及图像等领域的重要变换工具,直接计算DFT的计算量与变换区间长度N的平方成正比.当N较大时,因计算量
在受损湖泊中,通过沉水植被恢复可高效改善水质和维持湖泊清水稳态。沉水植物可为沿岸带浮游甲壳动物提供良好的栖息环境,对沿岸带浮游动物群落结构的构建有重要作用。光照对水
彩色等离子显示平板技术(PDP)是九十年代初飞速发展起来的一种新型大屏幕平板显示技术,是目前处在迅速发展和应用之中的新型平板显示技术之一,它具有显示面积大、分辨率高、
肝豆状核变性,又称威尔逊氏病(WD),是一种由铜离子转运蛋白基因ATP7B突变造成的肝遗传疾病。已有的该疾病动物模型均不能很好全面地模拟其临床表现的复杂多样性。诱导性多能干