全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211270954.5 (22)申请日 2022.10.18 (71)申请人 苏州市中地行信息技 术有限公司 地址 215000 江苏省苏州市中国(江苏)自 由贸易试验区苏州片区苏州工业园区 旺墩路122号1幢16 01-1602室 (72)发明人 金智辉 朱明君 钟玲  (74)专利代理 机构 北京君莫知识产权代理事务 所(普通合伙) 11715 专利代理师 崔云鹤 (51)Int.Cl. G06F 9/50(2006.01) (54)发明名称 一种基于多数据中心的任务调度与可视化 方法和系统 (57)摘要 本发明提出一种基于多数据中心的任务调 度与可视化方法和系统, 属于 数据中心资源调度 技术领域。 方法包括步骤S1: 解析待处理任务的 属性参数, 基于所述属性参数确定目标资源参 数; S2: 获取多个数据中心的每个数据主机的当 前性能参数; S3: 基于目标资源参数, 确定待处理 任务的可分配数据主机; S4: 将待处理任务发送 至可分配数据主机进行处理; S5: 将每个数据主 机当前正在处理的任务通过拓扑图可视化显示。 系统包括中心服务器和多个数据中心, 每个数据 中心配置多个数据主机, 每个数据主机包括多个 虚拟机。 本发 明可以支持多数据中心的多任务的 资源调度并确保任务能够在截止时间内匹配到 符合条件的数据主机并可视化执 行。 权利要求书2页 说明书11页 附图3页 CN 115357401 A 2022.11.18 CN 115357401 A 1.一种基于多数据中心的任务调度与可视化方法, 其特征在于, 所述方法包括如下步 骤: S1: 解析待处 理任务的属性 参数, 基于所述属性 参数确定目标资源参数; S2: 获取多个数据中心的每 个数据主机的当前性能参数; S3: 基于所述目标资源参数, 确定所述待处 理任务的可分配数据主机; S4: 将所述待处 理任务发送至所述可分配数据主机进行处 理; S5: 将每个数据主机当前正在处 理的任务 通过拓扑图可视化显示; 其中, 在所述可视化的拓扑图上, 处理相同任务的数据主机在所述拓扑图上采用相同 的节点标识。 2.如权利要求1所述的一种基于多数据中心的任务调度与可视化方法, 其特 征在于, 所述步骤S1中, 所述待处理任务的属性参数包括任务数据量大小、 任务处理截止时间、 任务所需的GPU 进程数、 任务所需的CPU 进程数以及任务所需的显存大小。 3.如权利要求1所述的一种基于多数据中心的任务调度与可视化方法, 其特 征在于, 所述方法由中心服 务器执行, 所述多个数据中心的每 个数据主机包括多个虚拟机; 所述步骤S2包括: 所述中心服务器与 所述多个数据中心的每个数据主机通信, 用于获取每个数据主机包 括的多个虚拟机的数量以及每 个虚拟机的当前性能参数; 所述当前性能参数包括: 每个虚拟机是否处于空闲状态、 每个虚拟机在空闲状态可调 用的CPU核数、 GPU个数以及显存资源大小。 4.如权利要求1所述的一种基于多数据中心的任务调度与可视化方法, 其特 征在于, 所述待处 理任务为多个; 所述步骤S1还包括: 将多个待处理任务按照任务处理截止时间进行排序后分组, 得到 多个待处理任务组; 每个待处理任务组所有待处理任务的处理截止时间的差值不超过设定 时间阈值。 5.如权利要求 4所述的一种基于多数据中心的任务调度与可视化方法, 其特 征在于, 所述步骤S3具体包括: 将每一个待处 理任务分配至同一个数据中心的同一个数据主机; 并且将属于同一个待处理任务组的所有待处理任务分配至同一个数据中心的多个数 据主机; 所述多个数据主机当前性能参数满足所述所有 待处理任务的目标资源参数, 或者, 所述多个数据主机在设定时间阈值之内的性能参数满足所述所有待处理任务的目标 资源参数。 6.如权利要求 4所述的一种基于多数据中心的任务调度与可视化方法, 其特 征在于: 所述多个数据中心位于不同地理位置; 所述设定时间阈值基于接收所述待处理任务的中心服务器与所述多个数据中心的物 理传输距离以及当前接收的待处 理任务的数据大小确定 。 7.一种基于多数据中心的任务调度与可视化系统, 其特征在于, 所述系统包括中心服 务器和多个数据中心, 每 个数据中心配置多个数据主机, 每 个数据主机包括多个虚拟机; 所述中心服务器接收多个待处理任务, 通过解析多个待处理任务的属性参数获得目标权 利 要 求 书 1/2 页 2 CN 115357401 A 2资源参数, 并对待处理任务进行分组得到多个待处理任务组; 每个待处理任务组所有待处 理任务的处 理截止时间的差值 不超过设定时间阈值; 所述中心服务器获取多个数据中心的每个数据主机的当前性能参数后, 基于所述目标 资源参数, 确定所述待处 理任务的可分配数据主机; 所述中心服务器将所述待处理任务发送至所述可分配数据主机进行处理, 并将每个数 据主机当前正在处 理的任务 通过拓扑图可视化显示; 其中, 在所述可视化的拓扑图上, 处理相同任务的数据主机在所述拓扑图上采用相同 的节点标识; 所述设定时间阈值基于接收所述待处理任务的中心服务器与所述多个数据中心的物 理传输距离以及当前接收的待处 理任务的数据大小确定 。 8.如权利要求7 所述的一种基于多数据中心的任务调度与可视化系统, 其特 征在于: 每个待处理任务Taski的属性参数表示 为: Taski={DataMi, DeadTimei, NumGPUi, NumCPUi, Vmemoryi}; DataMi表示任务Taski的数据量大小, 单位 为兆字节; DeadTimei表示任务Taski的任务处 理截止时间; NumGPUi表示任务Taski所需的GPU 进程数; NumCPUi表示任务所Taski需的CPU进程数; Vmemoryi表示任务Taski所需的显存大小, 单位 为兆字节; 所述中心服务器获取多个数据中心的每个数据主机的当前性能参数后, 基于所述目标 资源参数, 确定待处理任务Taski的可分配数据主机的当前性能参数满足{NumGPUi, NumCPUi, Vmemoryi}, 或者, 待处理任务Taski的可分配数据主机在设定时间阈值之内的性能参数满足{NumGPUi, NumCPUi, Vmemoryi}。 9.如权利要求7 所述的一种基于多数据中心的任务调度与可视化系统, 其特 征在于: 所述中心服务器获取多个数据中心的每个数据主机的当前性能参数后, 基于所述目标 资源参数, 确定所述待处 理任务的可分配数据主机, 具体包括: 将每一个待处 理任务分配至同一个数据中心的同一个数据主机; 并且将属于同一个待处理任务组的所有待处理任务分配至同一个数据中心的多个数 据主机。 10.如权利要求7 所述的一种基于多数据中心的任务调度与可视化系统, 其特 征在于: 所述中心服 务器位于所述多个数据中心的其中之一。权 利 要 求 书 2/2 页 3 CN 115357401 A 3

PDF文档 专利 一种基于多数据中心的任务调度与可视化方法和系统

文档预览
中文文档 17 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共17页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种基于多数据中心的任务调度与可视化方法和系统 第 1 页 专利 一种基于多数据中心的任务调度与可视化方法和系统 第 2 页 专利 一种基于多数据中心的任务调度与可视化方法和系统 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 01:00:32上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。