全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211317916.0 (22)申请日 2022.10.26 (71)申请人 数数信息科技 (上海) 有限公司 地址 200052 上海市长 宁区凯旋路138 8号 长宁国际T1, 5楼 (72)发明人 周津 王力 李志明 杨若臣  陈云  (74)专利代理 机构 上海华诚知识产权代理有限 公司 313 00 专利代理师 徐乐乐 (51)Int.Cl. G06F 9/50(2006.01) G06F 9/54(2006.01) (54)发明名称 大数据计算资源处理方法、 系统、 设备、 介质 和程序产品 (57)摘要 本发明涉及计算机数据处理领域, 特别涉及 一种大数据计算资源处理方法, 该方法包括路由 步骤, 接收不同来源的查询请求, 通过预定通道 将所述查询请求路由到预定的弹性集群, 对所述 查询请求对应的任务进行优先级处理和抢占式 处理, 基于预定路由规则提交所述任务; 监控步 骤, 实时监测所述预定的弹性集群的资源使用 率, 将所述资源使用率的数据发送至预定数据 库; 控制步骤, 基于所述预定数据库中的所述资 源使用率的情况动态增加或减少预定弹性集群 的节点的数量。 本发明还涉及一种大数据计算资 源处理系统、 设备、 介质和程序产品。 本发明可以 解决资源分配不合理、 时效性差、 无法隔离等问 题, 持续优化计算资源达 到最佳成本的效果。 权利要求书2页 说明书10页 附图4页 CN 115543631 A 2022.12.30 CN 115543631 A 1.一种大 数据计算资源处 理方法, 用于电子设备, 其特 征在于, 包括: 路由步骤, 接收不同来源的查询请求, 将所述查询请求路由到预定的弹性集群, 对所述 查询请求对应的任务进行优先级处理和抢占式处理, 基于预定路由规则确认预定任务, 提 交所述预定任务; 监控步骤, 实时监测所述预定的弹性集群的资源使用率, 将所述资源使用率的数据发 送至预定数据库; 控制步骤, 基于所述预定数据库中的所述资源使用率的情况动态增加或减少预定弹性 集群的节点的数量。 2.根据权利要求1所述的大数据计算处理方法, 其特征在于, 还包括部署步骤, 基于预 定弹性规则和预定隔离规则配置路由和计算资源池, 动态处理计算资源池中的弹性集群, 通过资源声明部署至少一套隔离的所述弹性 集群。 3.根据权利要求1所述的大数据计算资源处理方法, 其特征在于, 所述查询请求包括 adhoc查询、 定时查询、 api 查询。 4.根据权利要求1所述的大数据计算资源处理方法, 其特征在于, 所述路由步骤还包括 设置预定路由处理规则, 所述预定路由处理规则包括预定通道配置、 预定通道处理、 预定通 道选择、 预定通道参数加载。 5.根据权利要求4所述的大数据计算资源处理方法, 其特征在于, 所述预定通道间可以 进行通信。 6.根据权利要求1所述的大数据计算资源处理方法, 其特征在于, 所述实时监测的方法 包括对所述预定的弹性 集群的资源进行基础指标采集和指标 预测。 7.根据权利要求2所述的大数据计算资源处理方法, 其特征在于, 所述预定弹性规则包 括弹性区间、 实例规格、 定时混部, 所述预定隔离规则包括按请求类型隔离、 按项目隔离、 按 业务场景隔离 。 8.根据权利要求2所述的大数据计算资源处理方法, 其特征在于, 所述资源声明来自计 算资源池的管理客户端。 9.一种大 数据计算资源处 理系统, 其特 征在于, 包括: 路由模块, 接收不同来源的查询请求, 将所述查询请求路由到预定的弹性集群, 对所述 查询请求对应的任务进行优先级处理和抢占式处理, 基于预定路由规则确认预定任务, 提 交所述预定任务; 监控模块, 实时监测所述预定的弹性集群的资源使用率, 将所述资源使用率的数据发 送至预定数据库; 控制模块, 基于所述预定数据库中的所述资源使用率的情况动态增加或减少预定弹性 集群的节点的数量。 10.根据权利要求9所述的大数据计算资源处理系统, 其特征在于, 还包括部署模块, 基 于预定弹性规则和预定隔离规则配置路由和计算资源池, 动态处理计算资源池中的弹性集 群, 通过资源声明部署至少一套隔离的所述弹性 集群。 11.根据权利要求10所述的大数据计算资源处理系统, 其特征在于, 所述预定弹性规则 包括弹性区间、 实例规格、 定时混部, 所述预定隔离规则包括按请求类型隔离、 按项目隔离、 按业务场景隔离 。权 利 要 求 书 1/2 页 2 CN 115543631 A 212.根据权利要求10所述的大数据计算资源处理系统, 其特征在于, 所述资源声明来自 计算资源 池的管理客户端。 13.一种电子设备, 其特征在于, 所述设备包括存储有计算机可执行指令的存储器和处 理器, 所述处理器被配置为执行所述指令以实施根据权利要求1 ‑8中任一项所述的大数据 计算资源处 理方法。 14.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质中存储有至少一 条计算机指 令, 所述至少一条指 令由处理器加载并执行, 以实现如权利要求 1‑8中任一项 所 述的大数据计算资源处 理方法。 15.一种计算机程序产品, 其特征在于, 所述计算机程序产品包括计算机指令, 所述计 算机指令被执 行时, 实现如权利要求1 ‑8中任一项所述的大 数据计算资源处 理方法。权 利 要 求 书 2/2 页 3 CN 115543631 A 3

PDF文档 专利 大数据计算资源处理方法、系统、设备、介质和程序产品

文档预览
中文文档 17 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共17页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 大数据计算资源处理方法、系统、设备、介质和程序产品 第 1 页 专利 大数据计算资源处理方法、系统、设备、介质和程序产品 第 2 页 专利 大数据计算资源处理方法、系统、设备、介质和程序产品 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 01:00:30上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。