专利详情

专利名称	一种面向流式数据的作业调度方法及装置
申请号	CN201310451552.X	专利类型	发明专利
公开（公告）号	CN103491024A	公开（授权）日	2014.01.01
申请（专利权）人	中国科学院信息工程研究所	发明（设计）人	王旻;韩冀中;李勇;张章;孟丹
主分类号	H04L12/863(2013.01)I	IPC主分类号	H04L12/863(2013.01)I
专利有效期	一种面向流式数据的作业调度方法及装置至一种面向流式数据的作业调度方法及装置	法律状态	实质审查的生效
说明书摘要	本发明涉及一种面向流式数据的作业调度方法，包括以下步骤：调度管理器从调度队列中实时获取待调度作业，根据待调度作业的信息利用有向无环图生成处理单元队列;调度管理器根据物理节点的非本地通信数和主导资源比例，为处理单元队列中的每个处理单元分别选择物理节点，将所有处理单元分别分配给对应的物理节点；执行器在启动处理单元时，先在该物理节点上创建一个linux容器，然后在linux容器内部启动处理单元。本发明将处理单元调度到非本地通信数较小、负载较低的物理节点上，可以将需要频繁通信的处理单元集中到同一物理节点，减少了跨物理节点的网络通信。