专利号 | 2015104253530 | 申请日 | 2015-07-17 | 专利名称 | 一种云计算平台中的异构分布式任务处理系统及其处理方法 |
授权日 | 2018-03-13 | 专利权人 | 中国海洋大学 | 发明人 | 秦勃;夏海涛;景辉;朱勇 |
主分类号 | G06F9/48 | 关键词 | 应用领域 | ||
摘要 | 本发明公开了一种云计算平台中的异构分布式任务处理系统及其处理方法,所述处理系统包括任务加载器、任务调度器、任务启动器以及任务执行器;任务加载器,用于将加载的任务描述信息生成对应的任务描述对象,并保存入任务队列中;任务调度器,用于采用预定调度算法对任务队列中的任务描述对象进行调度排序,生成顺序变化的待提交任务队列;任务启动器,用于根据待提交队列中任务描述对象的顺序以及spark集群上执行资源的使用状态,依次启动所述任务描述对象并将其提交到spark集群上;所述任务执行器,用于执行提交到spark集群上的任务描述对象。通过本发明,能够在云计算平台上实现异构分布式任务的并行批处理。 | ||||
创新点 | |||||
技术分类 | 标 签 | 战兴产业 | 新一代信息技术  下一代信息网络产业 | ||
运营方式 | 合作方式 | ||||
联系人 | 联系电话 | 电子邮箱 | |||
详细说明 |