【摘 要】
:
随着科学技术的不断进步,云计算的概念深入人心,基于云平台的分布式计算系统成为研究的热点。Hadoop是一个在大型集群廉价硬件设备上运行应用程序的框架系统。Hadoop为应用程
论文部分内容阅读
随着科学技术的不断进步,云计算的概念深入人心,基于云平台的分布式计算系统成为研究的热点。Hadoop是一个在大型集群廉价硬件设备上运行应用程序的框架系统。Hadoop为应用程序提供了一组透明、稳定、可靠的接口和数据流,在Hadoop中实现的Google MapReduce算法能够把应用程序分割成许多很小的工作单元,使得每个单元可以在任何集群节点上执行。本文的研究主要专注Hadoop MapReduce程序的调度问题。Hadoop本身提供了承载量调度器、公平调度器和HOD调度器。现阶段对于Hadoop的调度算法研究主要可以分为两大方向:一种是针对MapReduce构架的调度算法研究,主要通过减少MapReduce构架中内部数据迁移、I/O开销、时间预期等方法以达到优化的目的;另一种是针对Hadoop公平调度算法研究,主要通过对job的合理调度从而优化算法。针对目前Hadoop调度中没有考虑任务的优先级这一现状,本文提出一种基于优先级的Hadoop调度算法,旨在降低高优先级工作在优先级工作队列中执行的平均等待时间。本文给出了工作优先级的设定和基于优先级的Hadoop MapReduce系统结构,通过实验比对了一般顺序执行调度算法与基于优先级的调度算法每个优先级的工作平均等待时间。实验结果证实本文方法的有效性。
其他文献
目的通过对医院门诊病人时间分布和预约诊疗服务的现况研究,分析目前实施预约诊疗服务的影响因素,从而有针对性地提出对策和建议,对今后医院实施预约诊疗服务起到一定的促进
本文以钢板中传播的板波为例,给出了板波相速度与频率板厚积关系方程的数值解,并利用C语言程序进行了实际求解,为板波探伤中板波模式的选择提供了可靠的依据。
改革开放以来,我国的“两会”越来越为媒介所关注,每年三月,国内外新闻记者聚焦人民大会堂,激烈的新闻争夺战成为每年春天北京的一道风景线。从历史来看,“两会”曾有秘密召
<正>从南开中学的同学所读之书,可以窥见南开中学"允公允能、日新月异"的校训,所读之书涉及历史、政治、文学、经济,等等,对愿意读这些书的同学们真心点一个赞。习近平总书记
韩美林是我国当代极具影响力的艺术实践者和开拓者之一。在其跨门类的艺术探索中,始终植根中华沃土,围绕传统文化内核,深入民间和生活,创作了一批富有传统文化元素和民族艺术
本文将明清世情小说作为一个整体对象,从雅俗及地域的视角,通过中国文学古今视角的换位与互动研究,立足于对作品文本的细致解读,以期深度还原明清世情小说深广的思想内涵与上
目的建立快速、精准的细菌质谱鉴定方法,以缩短血培养阳性的实验周转时间。方法共收集血培养阳性瓶91个(活性炭吸附瓶),采集培养液分别转种肉汤和血平板增菌培养4h后,用基质
基于生态文明建设的理念,利用生态足迹的理论和方法,分析陕西省1978—2006年的经济增长、产业结构调整与生态压力变化的关系。对6个反映经济增长和产业结构调整的指标进行因
近二十年来,在经济社会转型和城市化进程不断加快的背景下,我国许多大城市的就业—居住空间结构发生了巨大的变化。本研究以北京都市区为例,建立北京都市区就业—居住基础地
本文研究现代汉语语篇的互文形式。主旨是根据语言研究所遵循的形式与意义相结合的原则,将文学批评的互文性概念语言学化,藉此分析语篇的文本互动机制,具体研究语篇互文的标