基于调度树的分布式文件系统数据流调度算法研究

摘要

文章针对HDFS的数据写入性能不高的问题提出了一种基于调度树的数据流并发传输的调度算法.该算法将文件系统的节点分为转发节点和叶子节点,按流量匹配原则将节点编排为调度树后进行副本分发,让所有节点的网卡并发传输,磁盘并发写入,减小了副本写入分布式文件系统的时间.性能测试表明,使用该算法的分布式文件系统的写入性能较原始的HDFS更高.