【摘 要】
：
针对水利普查数据海量、多维的特点,研究近年来在"大数据"概念下发展迅速的Hadoop与Hive,结合传统数据仓库在多维数据分析方面的成熟技术,提出基于Hive的水利普查数据仓库的
【基金项目】
：
国家自然科学基金资助项目(51079040);水利部948项目(201016)
论文部分内容阅读
针对水利普查数据海量、多维的特点,研究近年来在"大数据"概念下发展迅速的Hadoop与Hive,结合传统数据仓库在多维数据分析方面的成熟技术,提出基于Hive的水利普查数据仓库的构建方法,描述数据仓库系统的架构,并根据Hive的设计特点,通过分桶、消减维度表和冗余事实表的方法来改进传统的多维分析模型,最后搭建集群系统对水利普查数据集进行查询与分析测试。测试结果表明该数据仓库可以满足海量多维水利普查数据的存储与查询要求。
其他文献
随着社会城市的发展,公共自行车系统逐渐成为了交通体系的重要组成部分,在人们的城市近距离生活出行,自行车、电动车与公交系统的换乘和节假日运动休闲娱乐等方面起着不可或
氮氧化物（NOx）是主要的大气污染物之一，近些年随着城市机动车保有量的增加，特别是柴油车数量的增加，城市机动车尾气NOx污染问题日益突出。NH3-SCR是最具发展前景的柴油车NOx排放控
文章首先对我国现阶段普遍存在的私营企业会计核算不规范问题进行了分析,指出其严重危害性。继而从宏观和微观两方面具体分析私营企业会计核算不规范的原因,在分析原因的基础
为了探讨绿化植物生活型构成对边坡植被物种多样性及护坡性能的影响,揭示生活型构成–群落特征–物种多样性–生态系统功能间的内在联系,借助三物种组装实验,分别构建以草本
<正>近几年,越来越多的企业和个人已经开始认识到保护环境的重要性,且自发地参与到这场史无前例的抗击污染行动中,这其中就包括在水和空气过滤领域拥有核心竞争力的3M公司。2
云计算的出现使企业与个人可以通过网络方便地使用云中的计算资源和存储资源,云计算中数据安全问题也越来越引起人们的广泛关注。本文讨论云计算安全的目标和要求,对云计算中
近年来,民办教育在我国迅猛发展，教育是培养人才的战略型措施之一，而高校又是国家快速发展的人才教育基地，伴随着民办高等院校人事分配制度改革的不断深入,高校的薪酬机制发生了
近年来我国提出极小种群野生植物(plant species with extremely small populations,PSESP)的概念并启动实施了全国极小种群野生植物拯救保护工程规划,然而PSESP概念自提出后
电子对抗作为电子战的重要组成部分及关键环节，贯穿其始末。而雷达脉冲分选又是电子对抗的重要组成部分中的关键技术。雷达侦查接收机能否对接收到的脉冲流作出正确、实时的分