[发明专利]一种基于数据分类的数据总线在审
申请号: | 202210030132.3 | 申请日: | 2022-01-12 |
公开(公告)号: | CN114510522A | 公开(公告)日: | 2022-05-17 |
发明(设计)人: | 刘昊;王秋烨;谭玉珊;张磊;张涛;陈志凌;陈巍;王朋;郁晨熹;刘荫隆;刘哲峰 | 申请(专利权)人: | 南湖实验室;北京大数据先进技术研究院 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/27;G06F16/28 |
代理公司: | 浙江永鼎律师事务所 33233 | 代理人: | 张晓英 |
地址: | 314001 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据 分类 总线 | ||
1.一种基于数据分类的数据总线,其特征在于,数据总线按照数据结构种类被划分为多个数据空间,每一类数据结构对应一个数据空间,每个数据空间对应一个接口基类和多个接口子类,各接口子类通过继承相应数据空间中的接口基类进行本数据总线与相应数据结构种类的子类数据结构之间的对接。
2.根据权利要求1所述的基于数据分类的数据总线,其特征在于,所述的数据空间包括结构化数据空间、半结构化数据空间、非结构化数据空间和二进制数据空间;
结构化数据空间对应的数据结构种类为结构化数据类,半结构化数据空间对应的数据结构种类为半结构化数据类,非结构化数据空间对应的数据结构种类为非结构化数据类,二进制数据空间对应的数据结构种类为二进制数据类;
结构化数据类对应的子类数据结构为各种关系型数据库类,包括MySQL、Oracle、SQLServer、DB2;
半结构化数据类对应的子类数据结构为各种非关系型数据库类,包括Mongo、Neo4j、Hbase和Redis;
非结构化数据类对应的子类数据结构包括文件、文本、视频、音频、图像;
二进制数据类对应的子类数据结构包括二进制文件、编码数据。
3.根据权利要求2所述的基于数据分类的数据总线,其特征在于,结构化数据空间对应有结构化数据接口基类和多种关系型数据接口子类,每种关系型数据接口子类均通过继承结构化数据接口基类与相应关系型数据库实现对接;
半结构化数据空间对应有半结构化数据接口基类和多种非关系型数据接口子类,每种非关系型数据接口子类均通过继承半结构化数据接口基类与相应非关系型数据实现对接;
非结构化数据空间对应有非结构化数据接口基类和多种非结构化数据接口子类,每种非结构化数据接口子类均通过继承非结构化数据接口基类与相应非结构化数据实现对接;
二进制数据空间对应有二进制接口基类和多种二进制数据接口子类,每种二进制数据接口子类均通过继承二进制接口基类与相应二进制数据的对接。
4.根据权利要求3所述的基于数据分类的数据总线,其特征在于,所述的数据总线作为数据湖系统的接入层,用于连接计算引擎和数据源,以实现数据湖系统与计算引擎、数据源的互通。
5.根据权利要求4所述的基于数据分类的数据总线,其特征在于,所述的数据总线中具有用于匹配数据空间的数据类型配置文件。
6.根据权利要求5所述的基于数据分类的数据总线,其特征在于,结构化数据接口基类包括通用字段类型映射模块,结构化数据接口子类包括特有字段类型映射模块,所述的通用字段类型映射模块用于对各种关系型数据库通用的字段进行映射转换,特有字段类型映射模块用于对相应的关系型数据库的特有字段进行映射转换。
7.根据权利要求6所述的基于数据分类的数据总线,其特征在于,结构化数据接口基类包括用于存储各种关系型数据库的基础信息的关系型数据库配置文件;结构化数据接口子类包括关系型数据库配置文件中相应关系型数据库的基础信息。
8.根据权利要求7所述的基于数据分类的数据总线,其特征在于,半结构化数据接口基类包括通用数据格式转换模块,半结构化数据接口子类包括特有数据格式转换模块,所述的通用数据格式转换模块用于对各种非关系型数据库通用的字段进行转换,特有数据格式转换模块用于对相应的非关系型数据库的特有字段进行转换;
半结构化数据接口基类包括用于存储各种非关系型数据库的基础信息的非关系型数据库配置文件;非结构化数据接口子类包括非关系型数据库配置文件中相应非关系型数据库的基础信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南湖实验室;北京大数据先进技术研究院,未经南湖实验室;北京大数据先进技术研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210030132.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置