论文部分内容阅读
在Hadoop的电子政务平台中针对存储成千上万的用户上传文件，利用HDFS提高文件的存储效率。设计了一个在云存储过程中小文件上传存储的处理方案。设定临时容器来暂存上传的小文件，使用定时器或临时容器满为临界条件进行文件的合并组合。通过增加NFS服务器和分离NameNode节点的职责，建立相关予类来存储和云同步服务信息，降低客户端访问数据的压力。设计一个简单的预测系统负荷的算法，使文件的合并组合在系统负荷较小时进行，减少等待时间，提高效率。通过实验表明合理的设置临时容器的大小和增加NFS服务器，在系统负荷低时