大规模异构数据并行处理系统的设计、实现与实践

来源 :大数据 | 被引量 : 0次 | 上传用户:swb39274355
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网和物联网应用的快速发展,数据处理模式从结构化逐渐扩展到结构化、半结构化和非结构化混合的异构数据处理模式。设计了一种大规模异构数据并行处理系统,在统一的平台功能视图基础上,采用统一的资源管理框架,实现对结构化、JSON/XML、图数据、文档数据等多种异构数据进行存储和查询,采用统一的开发语言,实现跨数据类型和数据存储引擎的并行计算,满足多业务应用开发的需要,并通过实际的商业部署,验证了系统的可行性。
其他文献
本文提出了企业在实施平衡计分卡过程中经常存在的问题,指出创新性应用平衡计分卡对提升企业绩效的重要性,从七个方面分析了平衡计分卡创新应用点,可以认识到:应用平衡计分卡
目的:阐明NDRG2(N-Myc downstream-regulated gene 2)在肝癌细胞中对CD24的调控及其对乳腺癌细胞侵袭能力的影响。方法:Western blot检测低转移性的肝癌细胞Huh7、高转移性的
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
对NaOH作添加剂对尿素作还原剂的选择性非催化还原(NOxOUT)脱硝工艺的影响进行了试验研究。无添加剂时,在780℃~1 000℃范围内随温度升高,NO的浓度先降低后升高,N2O浓度先升高
随着国家经济水平的飞速提升,推动了各个行业领域的发展,通信技术也正在顺应这一发展趋势不断创新。计算机网络的普及促进了大数据时代的发展。各种通信软件和APP为人们的日
以柳湾煤矿61107综放工作面为实例,提出综放工作面末采段回采工艺及特殊情况顶板控制措施。
音乐审美作为一项感性活动,无疑与主体感性能力以及聆听过程中的感性方式紧密相关。笔者受到康德的感性研究成果《先验感性论》的启发,认识到感性具有按照时间和空间的先验感性
【目的】建立一种可同时检测2种猪冠状病毒即猪传染性胃肠炎病毒(TGEV)和猪流行性腹泻病毒(PEDV)的双重RT-PCR检测方法并进行临床应用。【方法】对TGEV和PEDV的单项RT-PCR方
该文探讨了供给侧改革的内涵,分析供给侧改革与PPP模式的关系,在此基础上对PPP项目的识别阶段进行VFM定量研究,并通过实证分析,比较PPP模式与传统模式的不同。该文的研究,旨
数据流模型是一种高效的计算模型,由于其在并行性方面具有天然的优势,数据流技术在软硬件领域得到了广泛的应用。在硬件体系结构方面,数据流模型引领计算机体系结构在传统冯&