【摘 要】
:
针对Hadoop分布式文件系统(HDFS)的写性能在执行效率上的不足,提出一种在节点性能异构环境中对HDFS数据块进行并发传输的调度算法。该算法实时监控HDFS集群中每个节点的资源状
【机 构】
:
南瑞集团公司(国网电力科学研究院),国电南瑞科技股份有限公司,智能电网保护和运行控制国家重点实验室
【基金项目】
:
国家电网公司科技项目“超大规模电网调控系统集群化关键技术研究”.
论文部分内容阅读
针对Hadoop分布式文件系统(HDFS)的写性能在执行效率上的不足,提出一种在节点性能异构环境中对HDFS数据块进行并发传输的调度算法。该算法实时监控HDFS集群中每个节点的资源状态和内存缓存队列,动态地将接收节点与转发节点进行配对传输,使全系统节点的网卡和磁盘并发工作,缩短了所有副本写入分布式文件系统的时间。将数据写入磁盘后请求下一个数据块,保证数据安全性,同时也使得各个节点获得与自身性能相匹配的副本数,使性能异构的系统能达到较高的写入速度。性能测试结果表明,使用该算法的分布式文件系统的写入性能较原始
其他文献
科技查新是一项集文献检索和情报调研相结合的综合性研究工作,它能够为学术研究、专利申请等提供专业的技术支持。鉴于目前高校研究生中信息检索能力普遍不高的现状,提出利用科
美国洛斯阿拉莫斯国家实验室官方网站10月12日报道,该实验室高等太阳能光物理中心的研究团队通过向普通玻璃喷涂薄层量子点,获得了一定的太阳能转化效率,从而可以将建筑物中的玻璃窗户变成低成本光伏发电系统。新研究证明,量子点等纳米晶体可用来制作大面积和高性价比的收集散射光源的装置,对吸光性和稳定性的相关测试也表明,这类装置与其他太阳能电池相比毫不逊色。而且这些涂层还能回收再利用,玻璃也随手可得,正是那些
在列车控制与服务网络(TCSN)中,为确保控制业务的优先传输,并保证其他控制和服务业务的服务质量需求,必须对AF业务流量进行监管。传统流量监管方式是静态的,不能适应网络负载状
新闻事件:日前,一篇题为《离职能直接影响中国登月的人才,只配待在国企底层?》的文章引发公众关注。文章称,西安某航天科研机构处于“关键岗位”的员工张小平被一家民营企业以百万年薪挖走。当天,张小平原单位发布情况说明,承认在劳动仲裁材料中措辞失当,夸大了张小平在所参与研制项目中的地位和作用。 单就本事件而言,张小平的跳槽属于正常的人才流动,这种流动不但可以带动企业间的良性竞争,同时也能为社会发展注入活
新闻事件:近期,一则喝王老吉凉茶能延长寿命的消息成了舆论热点.一种饮料能延长寿命本就赚足了眼球,更令人关注的是,当事人更是称这一结果源自863计划的一项研究.