[发明专利]一种开放式大数据处理系统、方法及介质有效
申请号: | 202111062984.2 | 申请日: | 2021-09-10 |
公开(公告)号: | CN113849503B | 公开(公告)日: | 2023-10-20 |
发明(设计)人: | 麻志毅;龚小龙;郑聪;陈曦 | 申请(专利权)人: | 杭州未名信科科技有限公司;浙江省北大信息技术高等研究院 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2453;G06F16/28 |
代理公司: | 北京辰权知识产权代理有限公司 11619 | 代理人: | 付婧 |
地址: | 311200 浙江省杭州市萧*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 开放式 数据处理系统 方法 介质 | ||
1.一种开放式大数据处理系统,其特征在于,包括:
资源虚拟层,用于关联和管理全局数据空间中的物理数据,其中,所述全局数据空间包括各处理对象相关的物理数据;
内核公共服务层,与所述资源虚拟层连接,用于对所述开放式大数据处理系统的处理任务的管理、对处理形成接口的管理及对用户权限的管理;
软件开发工具包层,与所述内核公共服务层连接,用于构建主题数据资产或管理应用研发服务,其中,所述主题数据为依据业务目标导向的离线和/或实时的多种类业务场景数据。
2.根据权利要求1所述的开放式大数据处理系统,其特征在于,所述软件开发工具包层包括主题数据资产构建与运维管理平台或开放式应用研发服务管理平台。
3.根据权利要求2所述的开放式大数据处理系统,其特征在于,所述主题数据资产构建与运维管理平台还包括数据业务服务资源平台,所述数据业务服务资源平台包括数据服务构建工具集、业务服务构建共性组件和资源库。
4.根据权利要求1所述的开放式大数据处理系统,其特征在于,所述资源虚拟层在用于关联全局数据空间中的物理数据时,具体包括:
当要关联全局数据空间中的第一物理数据时,在所述资源虚拟层建立逻辑表,其中,所述逻辑表存储关联到所述第一物理数据的路径;
当要关联全局数据空间中的第二物理数据时,所述资源虚拟层通过人工智能算法自动辅助解析所述第二物理数据的语义结构且关联所述第二物理数据。
5.根据权利要求1所述的开放式大数据处理系统,其特征在于,所述内核公共服务层在用于对所述开放式大数据处理系统的任务管理时,具体包括:
监控用户提交的任务申请;
对所述任务申请通过调度算法进行调度。
6.根据权利要求2所述的开放式大数据处理系统,其特征在于,所述对处理形成接口的管理包括所述内核公共服务层与所述资源虚拟层连接产生的数据接口管理和所述内核公共服务层与所述软件开发工具包层连接产生的应用程序编程接口管理。
7.根据权利要求6所述的开放式大数据处理系统,其特征在于,所述开放式应用研发服务管理平台具体用于:
监测用户提交的应用程序编程接口修改请求;
确定所述应用程序编程接口修改请求合法时允许修改。
8.一种开放式大数据处理方法,其特征在于,所述方法包括:
关联和管理全局数据空间中的物理数据,其中,所述全局数据空间包括各社会单位基于数据库、信息系统或企业数字化而形成的物理数据;
管理处理任务、管理处理形成接口及管理用户权限;
构建主题数据资产或管理应用研发服务,其中,所述主题数据为依据业务目标导向的离线和/或实时的多种类业务场景数据。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求8所述方法的步骤。
10.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求8所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州未名信科科技有限公司;浙江省北大信息技术高等研究院,未经杭州未名信科科技有限公司;浙江省北大信息技术高等研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111062984.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:热熔胶膜与PI膜覆合工艺
- 下一篇:一种肾内科检验用多层尿液取样留存器