[发明专利]一种数据处理方法、装置及其设备有效
申请号: | 201810582292.2 | 申请日: | 2018-06-07 |
公开(公告)号: | CN110647563B | 公开(公告)日: | 2023-06-13 |
发明(设计)人: | 孙艳;黄晓婧;赵丹;陈国庆 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06Q50/26 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 林祥 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 及其 设备 | ||
本申请提供一种数据处理方法、装置及其设备,该方法包括:获取原始输入数据,并根据所述原始输入数据创建源数据表;根据所述源数据表创建仓库数据表,所述仓库数据表包括至少一个主题域;针对仓库数据表的主题域,从源数据表中选取与所述主题域对应的数据项,对选取的数据项进行处理,并在所述主题域下记录处理后的数据项;从所述仓库数据表中确定与应用数据表关联的主题域;根据所述主题域的数据项创建应用数据表。通过本申请的技术方案,可以非常灵活的供上层应用使用,更好的支持交通领域的上层业务,方便的进行数据共享,充分发挥数据价值。
技术领域
本申请涉及互联网技术领域,尤其涉及一种数据处理方法、装置及其设备。
背景技术
数据是城市发展的基础资源,通过对数据进行归集,可以对城市的全局数据和实时数据进行有效分析,并根据分析结果有效的调配和优化公共资源,不断修正城市运行中的缺陷,解决城市发展中的关键问题,提高城市的竞争力。
交通数据是城市发展的重要数据,通过对交通数据进行归集,可以有效分析交通数据,根据分析结果调配和优化公共交通资源,解决城市发展中的交通问题。但是,分布在各业务系统的交通数据,具有分布性、异构性、有效性和及时性等问题,如何对交通数据进行有效归集,是目前需要被解决的问题。
发明内容
本申请提供一种数据处理方法,所述方法包括:
获取原始输入数据,并根据所述原始输入数据创建源数据表;其中,所述源数据表的数据项包括对象与数据描述信息的对应关系;
根据所述源数据表创建仓库数据表,所述仓库数据表包括至少一个主题域;针对仓库数据表的主题域,从源数据表中选取与所述主题域对应的数据项,对选取的数据项进行处理,并在所述主题域下记录处理后的数据项;
从所述仓库数据表中确定与应用数据表关联的主题域;
根据所述主题域的数据项创建应用数据表。
本申请提供一种数据处理方法,所述方法包括:
获取原始输入的交通数据,并根据所述原始输入的交通数据创建源数据表;其中,所述源数据表的数据项包括对象与数据描述信息的对应关系;
根据所述源数据表创建仓库数据表,所述仓库数据表包括至少一个主题域;针对仓库数据表的主题域,从源数据表中选取与所述主题域对应的数据项,对选取的数据项进行处理,并在所述主题域下记录处理后的数据项;
根据所述仓库数据表创建集市数据表,所述集市数据表包括至少一个数据中心;针对集市数据表的数据中心,从仓库数据表选取与所述数据中心对应的数据项,对选取的数据项进行处理,并在所述数据中心下记录处理后的数据项。
本申请提供一种数据处理装置,所述装置包括:
源数据接入层模块,用于获取原始输入数据,并根据所述原始输入数据创建源数据表;所述源数据表的数据项包括对象与数据描述信息的对应关系;
基础数据层模块,用于根据所述源数据表创建仓库数据表,所述仓库数据表包括至少一个主题域;针对主题域,从源数据表中选取与所述主题域对应的数据项,对选取的数据项进行处理,并在所述主题域下记录处理后的数据项;
应用数据层模块,用于从所述仓库数据表中确定与应用数据表关联的主题域;根据所述主题域的数据项创建应用数据表。
本申请提供一种数据处理装置,所述装置包括:
源数据接入层模块,用于获取原始输入的交通数据,并根据所述原始输入的交通数据创建源数据表;其中,所述源数据表的数据项包括对象与数据描述信息的对应关系;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810582292.2/2.html,转载请声明来源钻瓜专利网。