报告人: 新疆大学鲁亮博士
报告题目:大数据流式计算框架Storm的任务迁移策略
报告时间:2018年5月7日9:00
报告地点:理工楼212
内容简介:包括Storm在内的大多数主流流式计算框架默认采用静态的任务调度策略,这种方法忽略了拓扑运行过程中的工作节点负载、任务负载以及数据流大小的变化,不能满足流式大数据实时、多变的特点。针对这一问题,报告交流一种大数据流式计算框架Storm的任务局部迁移策略。首先建立资源约束模型、最优通信开销模型和任务迁移模型,提出并证明迁移优化原则和节点间数据流最优性原理,并由此推出最优迁移原则;其次构建任务迁移过程的完整体系,从任务迁移过程中源节点选择、阻尼任务选择和目的节点选择三个方面进行分析,提出源节点选择算法和任务迁移算法。