[发明专利]一种数据处理方法、装置、设备及存储介质有效
| 申请号: | 201911206771.5 | 申请日: | 2019-11-29 |
| 公开(公告)号: | CN112883088B | 公开(公告)日: | 2023-01-31 |
| 发明(设计)人: | 夏宝宁;张双杰 | 申请(专利权)人: | 贵州白山云科技股份有限公司 |
| 主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/2455 |
| 代理公司: | 北京名华博信知识产权代理有限公司 11453 | 代理人: | 苗源 |
| 地址: | 550003 贵州省贵阳市*** | 国省代码: | 贵州;52 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据处理 方法 装置 设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,
接收源数据,并读取所述源数据的信息;
基于预设方式对所述源数据的信息进行解析,获得与所述源数据的信息对应的映射为schema格式的解析信息,以及用于对所述解析信息进行结构化查询语言处理的配置信息;
根据所述解析信息和所述配置信息进行计算;
输出schema格式的计算结果;
以与所述源数据的信息对应的映射为schema格式的解析信息中分隔的字段为依据定义所述源数据的信息的类型,将所述源数据的信息的类型与所述schema格式数据中的关键字结合,确定所述配置信息;
其中,所述配置信息包括所述解析信息的unit类型、string类型和/或dict类型。
2.如权利要求1所述的数据处理方法,其特征在于,所述接收源数据包括:
接收来自至少一个数据源的不同协议类型的源数据和/或不同格式的源数据。
3.如权利要求2所述的数据处理方法,其特征在于,所述接收来自至少一个数据源的不同协议类型的源数据和/或不同格式的源数据包括:
通过接入提供所述源数据的数据源的api接口,接收所述源数据。
4.一种数据处理装置,其特征在于,包括:
接收模块,用于接收源数据,并读取所述源数据的信息;
解析模块,用于基于预设方式对所述源数据的信息进行解析,获得与所述源数据的信息对应的映射为schema格式的解析信息,以及用于对所述解析信息进行结构化查询语言处理的配置信息;
计算模块,根据所述解析信息和所述配置信息进行计算;
输出模块,用于输出schema格式的计算结果;
所述解析模块还用于以与所述源数据的信息对应的映射为schema格式的解析信息中分隔的字段为依据定义所述源数据的信息的类型,将所述源数据的信息的类型与所述schema格式数据中的关键字结合,确定所述配置信息;
其中,所述配置信息包括所述解析信息的unit类型、string类型和/或dict类型。
5.如权利要求4所述的数据处理装置,其特征在于,所述接收模块,还用于接收来自至少一个数据源的不同协议类型的源数据和/或不同格式的源数据。
6.如权利要求4所述的数据处理装置,其特征在于,所述接收模块,还用于通过接入提供所述源数据的数据源的api接口,接收所述源数据。
7.一种传输设备,其特征在于,所述传输设备包括:收发器、存储器、处理器;
所述收发器用于收发报文;
所述存储器用于存储指令和数据;
所述处理器用于读取所述存储器中存储的指令和数据,以执行权利要求1至3任一项所述的数据处理方法。
8.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1至3任一项所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于贵州白山云科技股份有限公司,未经贵州白山云科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911206771.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:苯职业暴露与致癌风险评估方法
- 下一篇:一种电子商务货物转运系统





