Hadoop框架相关论文
基于Hadoop开发的海量数据存储平台优势显著,使用者无需掌握架构底层的搭建细节,只需根据应用层的功能指引便可以开展分布式程序的......
针对海量工业大数据的多源异构性特征,提出一种基于优化深度置信网络的大数据清洗算法。在Hadoop框架下,利用曼哈顿距离描述高维空......
介绍了MapReduce编程框架产生的背景,研究了Hadoop MapReduce的架构和工作过程,给出了MapReduce的优缺点,并指出了下一步发展的方......
在大数据时代,不同地区、不同院校都会根据自己的教学特点独立制作相应的课程教学资源,相应的数据量增长极快。后疫情时代,越来越......
外观专利图片包含着丰富的视觉信息,但是由于数量巨大,检索范围很大,若只靠人工识别,工作量非常大而且效率很低。然而,图像检索是......
互联网和信息技术的迅速发展导致了信息的爆炸,巨大的Web信息资源库不但给人们提供了各种信息,同时也增加了人们从海量数据中获取......
随着信息时代的到来,互联网上的信息爆发式的增长,我们日常使用的搜索引擎需要检索的内容信息量也随着迅速增加。整个世界的信息数据......
近年来离散制造企业高度重视信息化的建设,经过几年的发展,已初具成效。在几年的业务发展中,企业内产生了大量的信息化数据,包括办......
随着互联网规模的日益增大,需要处理与存储的数据量也越来越多,云计算已经成为一种典型的解决方案。目前,云计算已经受到学术界与......
随着云计算受到越来越多的关注,许多大型网络公司也对其产生了浓厚的兴趣,云计算环境与传统网络环境的结合已经是不可避免的趋势。而......
随着计算机网络的发展,应用的不断深入,云计算被提出,并成为当今计算机领域最热的研究领域之一。Hadoop是一种云计算框架,适用于大规模......
随着互联网应用的发展,各大IT公司纷纷推出自己的云计算平台,并把云计算作为未来重要的发展战略之一。伴随着数据量的爆炸式增长,......
频繁模式挖掘是数据挖掘领域的重要算法。频繁模式挖掘在事务数据库、时间序列数据库和许多其他类型数据库的挖掘研究中都得到了广......
“智能交通”和“社交网络”越来越普及,然而如何处理这些领域背后复杂图结构的问题迫在眉睫。比如,在“智能交通”中,如何计算两......
摘 要:针对易制毒化学品数据的海量增长问题,如何对这些数据进行分析,进而为易制毒化学品交易提供参考,是当前思考的重点。对此基于易......
数字图书馆的出现给人们生活带来了极大的改善,它将图书信息进行数字化存储于计算机中,通过计算机网络进行传播,使得图书信息资源......
主题爬行是互联网中获取特定领域信息的重要技术,随着网络技术的不断发展,从中获取准确、实用、质量较高的网页信息已经成为一个常......
针对传统的故障诊断方式已经不能满足风电故障系统实时性、准确性的要求,提出了基于Hadoop框架,并结合粗糙集属性约简以及Apriori......
为了解决地质测绘工作中所产生的海量数据,运用我国的大数据技术,建议构建基于Hadoop架构的地质测绘管理系统。为了该系统的作用能......
针对云计算环境下很难确定出有助于实现良好性能的Hadoop参数集的问题,设计了一种MapReduce模拟器.首先,对Hadoop的各种参数进行建......
随着信息技术的飞速发展,大量应用程序的执行产生了跨越千兆级门槛的数据,因此增加了对数据的处理和分析能力的要求.本文在对Hadoo......
摘要:随着当前科学技术的发展,我国各行业的发展进入了大数据时代,这就为数据挖掘算法创造了条件。在大数据环境下,为了使数据挖掘的速......
大数据是信息社会发展到一定程度的必然产物,数字档案馆在大数据到来之际面临着艰巨挑战,本文分别从数字档案的接收、存储和信息挖......
为了高效快速的开发和使用Hadoop远程通信功能,对Hadoop远程过程调用(Remote Procedure Call,RPC)机制进行分析,提出独立调用Hadoop ......
‘#赢i蠢囊!”蛰哪’:菇、籍旌翳鬻鬻孽攀繁震誊鬻藜囊i燃黼蒸《瓣≮舔黼媾鬻戮蠢器搿黼搿群∞ij;.I.._iⅥ.^鲤l黼麟鬻鬻m黼薹需麓......
Hadoop是大数据处理的基础框架,负载均衡策略的优劣对Hadoop集群的处理性能有着非常重要影响。现有调度算法的一个基本假设是每个......
目前绵阳市共建设超过700个公路卡口,每天的过车记录数据信息超过600万条,并伴随有大量的图片和视频数据信息。但是随着更多新建的......
本文首先对大数据平台以及HadoopSg-架的概念和特点进行了介绍,然后依次对Hadoop架构核心、技术优点进行了阐述,最后对通信系统话单......
针对视频数据非结构化和体量大的特点,提出了一种基于Hadoop并发处理框架下的分片解码处理方法。该框架采用FFmpeg作为视频解码器,......
针对传统的面向终端的粗粒度流量控制方法易引起数据中心网络拥塞问题,将软件定义网络(SDN)引入大数据应用体系架构,提出了基于SDN的......
随着大数据处理技术的不断发展,互联网金融也进入了大数据时代。面对海量的财经文章,使用自然语言处理技术对其进行解析已成为技术......
针对当前网络中视频媒体数量大、更新快、内容多、下载难,以及基于单机的视频网络爬虫系统中的处理速度慢、并发度低和下载速度慢......
随着社会经济的进步和交通运输业的快速发展,面对快速增长的城市道路交通数据,论文提出了基于Hadoop的智能交通分析系统设计方案,......
在智慧时空大数据与云平台建设工作中,如何进一步挖掘分析海量空间数据是实现高效应用的一项关键任务。针对佛山市税务机关的业务......
本文首先对大数据的优势和应用进行了介绍,然后分析了Hadoop的核心技术架构,最后对通信系统流处理中Hadoop框架的应用进行了剖析。......
长期积累的预警情报大数据中蕴含目标、装备、环境等相关知识,快速准确获得这些知识,需要海量的存储能力和计算能力作为支撑.针对......
随着智能电网的建设以及电力变压器在线监测技术的成熟,电力变压器在线监测数据呈现出体量大、类型多等特点。使用传统存储技术存......
针对传统机器翻译系统准确性差、人工翻译成本高等缺陷,提出了一种基于Hadoop云计算框架与XMPP协议的云翻译系统解决方案,结合传统......
针对传统关联规则算法存在较大规则冗余问题,提出基于最小单调约束闭包Hadoop并行化关联规则。首先,基于闭包算子约束规则等价关系......
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们......
通过药物虚拟筛选,发现在具有生物活性化合物过程中,存在小分子结构相似性比较计算繁杂等问题。为此,结合MapReduce模型,提出一种......
针对当前海量的用户用电地址,以及地址管理的混乱问题,提出两种解决方案。一是借助Hadoop框架体系完成对海量数据的存储,同时借助M......
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清......
为提高大数据聚类效率,提出一种基于Hadoop框架的K均值聚类算法。采用Hadoop框架所用的MapReduce模型,将大数据划分成许多数据块。......
为改变依靠说教和事后分析找对策的传统学生管理方式,基于大数据的视角,构建了校园学生行为数据的分析模型,并通过大数据处理框架H......
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清......