新疆大学学报(自然科学版)(中英文)

2017, v.34;No.145(01) 90-95

[打印本页] [关闭]
本期目录(Current Issue) | 过刊浏览(Past Issue) | 高级检索(Advanced Search)

Storm环境下一种改进的任务调度策略
An Improved Storm Task Schedule Strategy in Storm Environment

刘月超;于炯;鲁亮;

摘要(Abstract):

随着大数据业务的快速增长,针对大规模数据处理的实时计算变成了一种业务上的需求,缺少"实时的Hadoop系统"经成为整个大数据生态系统中的一个巨大缺失,Storm的出现很好地满足了这一需求.然而,Storm默认的round-robin资源调度,既不考虑内部组件的传输延迟时间,也不考虑节点间的传输延迟.因此,本文提出了Storm环境下一种改进的任务调度策略(Improved Storm Task Schedule Strategy,ISTS),该策略旨在提高通过最大限度地提高资源利用率和吞吐量同时最小化网络延迟.实验结果表明,使用ISTS进行任务调度时,可以同时满足软、硬资源限制以及最小化组件之间的网络传输距离.

关键词(KeyWords): 大数据;Storm;数据处理;调度

Abstract:

Keywords:

基金项目(Foundation): 国家自然科学基金项目(61462079,61262088,61562086,61363083,61562078)

作者(Author): 刘月超;于炯;鲁亮;

Email:

参考文献(References):

扩展功能
本文信息
服务与反馈
本文关键词相关文章
本文作者相关文章
中国知网
分享