【摘 要】
:
随着信息化技术在钻井行业的应用,钻井工程数据呈现指数级增长方式,海量的钻井工程数据的存储、分析及利用成为当前钻井工程行业的一个热点问题。本文利用Hadoop技术,设计并
论文部分内容阅读
随着信息化技术在钻井行业的应用,钻井工程数据呈现指数级增长方式,海量的钻井工程数据的存储、分析及利用成为当前钻井工程行业的一个热点问题。本文利用Hadoop技术,设计并实现了一个钻井工程实时数据分析系统,为钻井工程的实时作业提供指导。本文设计并实现了利用HBase分布式存储技术对海量钻井工程数据进行存储,利用Sqoop工具及MapReduce分布式计算框架实现异构钻井数据的导入。利用MapReduce分布式计算框架为存储于HBase分布式存储系统的历史钻井工程数据创建二级索引表,提升了实时数据在历史数据表中的检索效率,并结合MapReduce对检索结果进行整合分析,从历史钻井工程数据表中获取与实时钻进环境相对应的钻井数据信息,进而获取实时钻进过程的优化参数。最后,在检索分析获取的优化参数中提取钻头优化数据、钻井事故预测数据、钻井工程事故诊断与处理数据以及钻井轨迹数据等信息上传至系统界面,对钻井工程实时作业提供指导。与基于传统数据库的钻井工程软件相比,基于Hadoop的钻井工程数据分析系统针对多源、分布的数据进行更加全面的分析,获取更加准确的分析结果,能够对钻井工程现场作业较好地进行指导。
其他文献
目前,数据挖掘(Data Ming,DM)采用较新的技术是粗糙集(Rough Set,RS)。它在分析和处理不完整、不一致和不精确的数据并进行知识的约简时不需要先验经验。粗糙集主要的研究内
随着计算机及其应用技术的迅猛发展,人类获取数据的能力得到很大程度的提高,数据流(Data Streams)已成为重要的数据来源之一,因此有关数据流的挖掘算法也已成为一个重要的前
近年来,为了满足材料科学、结构力学以及生物学等学科对于物质微观结构探索的需求,国内外先后建立了几个大型的同步辐射装置和中子源装置。气体中子探测器是这些装置中的重要
随着网络技术的不断发展,网络入侵的方法和手段也日益丰富,传统的静态防御、被动防御很难满足当前网络安全的需求。基于蜜网(honeynet)技术的主动防御的安全体系逐渐成为网络
随着Internet和信息技术的迅速发展,三维模型已成为继声音、图像和视频之后的第四种多媒体数据类型。三维模型检索技术成为多媒体信息检索领域新兴的研究热点。三维模型检索
蛋白质组学(Proteomics)已经成为当前生命科学研究新的主旋律,其中的蛋白质序列鉴定对于系统了解蛋白质的结构、功能及进化关系等生物学知识具有十分重要的意义。质谱技术具有
无线Ad Hoc网络的节点之间通过无线链路通讯,且不依赖于任何预先设置的基础设施。但无线信号覆盖的范围通常比较有限,Ad Hoc网络中的端到端传输路径通常是多跳的。由于节点要
航班着陆调度(Aircraft Landing Scheduling, ALS)是机场终端区空中流量管理(Air Traffic Flow Management, ATFM)的核心,它旨在为待着陆的航班给出有效的着陆调度方案,保证
现有跟踪系统大部分采用PC机或工控机结构,主要考虑图像处理涉及数据量大、对处理器要求高的特点。然而,这种结构存在明显不足:
(1)大量无意义画面的回传,增加了数据通
手机上网具有无可比拟的优点,它不受物理条件的限制,具有灵活、不易受黑客攻击等特点。由中国互联网络信息中心发布的《2009年中国移动互联网与3G用户调查报告》中指出,截至2