[发明专利]一种数据处理的方法及装置在审
申请号: | 201710104627.5 | 申请日: | 2017-02-24 |
公开(公告)号: | CN108509444A | 公开(公告)日: | 2018-09-07 |
发明(设计)人: | 冯闯 | 申请(专利权)人: | 深圳市优朋普乐传媒发展有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 518000 广东省深圳市罗湖区翠*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 描述信息 内容类型 原始数据 子数据 数据结构 预先配置 数据处理 计算机技术领域 接收原始数据 数据结构转换 代码程序 预先设置 重新配置 转换 | ||
1.一种数据处理的方法,其特征在于,包括:
flume接收原始数据,所述原始数据为第一数据结构的数据,所述第一数据结构的数据中包括至少一个子数据;
所述flume从预先配置的内容类型的描述信息中,确定与所述至少一个子数据中的各个子数据分别对应的内容类型的描述信息;
所述flume根据所述原始数据和与所述原始数据中各个子数据分别对应的内容类型的描述信息,生成第二数据结构的数据,所述第二数据结构的数据中包括所述至少一个子数据,以及与所述至少一个子数据中各个子数据分别对应的内容类型的描述信息。
2.如权利要求1所述的方法,其特征在于,所述flume接收原始数据,包括:
所述flume通过与至少一个预先配置有内容类型的描述信息的拦截器分别对应的至少一个source中的第一source接收原始数据;
所述flume从预先配置的内容类型的描述信息中,确定与所述原始数据中各个子数据分别对应的内容类型的描述信息,包括:
所述flume根据与所述第一source对应的拦截器中预先配置的内容类型的描述信息,确定所述原始数据中各个子数据分别对应的内容类型的描述信息。
3.如权利要求2所述的方法,其特征在于,所述flume根据与所述第一source对应的拦截器中预先配置的内容类型的描述信息,确定所述原始数据中各个子数据分别对应的内容类型的描述信息,包括:
所述flume根据与所述第一source对应的拦截器中预先配置的内容类型的描述信息、和与所述第一source对应的拦截器中预先配置的内容类型的描述信息的配置顺序,确定所述原始数据中各个子数据分别对应的内容类型的描述信息。
4.一种数据处理的方法,其特征在于,包括:
flume接收目标数据,所述目标数据为第二数据结构的数据,且所述目标数据中包括至少一个子数据,以及与所述至少一个子数据中各个子数据分别对应的内容类型的描述信息;
所述flume根据预先配置的内容类型的描述信息,确定所述目标数据中所述至少一个子数据分别对应的内容类型的描述信息;
所述flume根据所述目标数据中所述至少一个子数据分别对应的内容类型的描述信息,从所述目标数据中提取所述至少一个子数据,生成第一数据结构的数据,所述第一数据结构的数据中包括所述至少一个子数据。
5.如权利要求4所述的方法,其特征在于,所述flume接收所述目标数据,包括:
所述flume通过与至少一个预先配置有内容类型的描述信息的拦截器分别对应的至少一个source中的第一source接收目标数据;
所述flume根据预先配置的内容类型的描述信息,确定所述目标数据中所述至少一个子数据分别对应的内容类型的描述信息,包括:
所述flume根据与所述第一source对应的拦截器中预先配置的内容类型的描述信息,确定所述目标数据中所述至少一个子数据分别对应的内容类型的描述信息。
6.如权利要求5所述的方法,其特征在于,所述flume根据与所述第一source对应的拦截器中预先配置的内容类型的描述信息,确定所述目标数据中所述至少一个子数据分别对应的内容类型的描述信息,包括:
所述flume根据与所述第一source对应的拦截器中预先配置的内容类型的描述信息、和与所述第一source对应的拦截器中预先配置的内容类型的描述信息的配置顺序,确定所述原始数据中各个子数据分别对应的内容类型的描述信息。
7.一种数据处理的装置,其特征在于,包括:
接收模块,用于接收原始数据,所述原始数据为第一数据结构的数据,所述第一数据结构的数据中包括至少一个子数据;
处理模块,用于从预先配置的内容类型的描述信息中,确定与所述至少一个子数据中的各个子数据分别对应的内容类型的描述信息;以及据所述原始数据和与所述原始数据中各个子数据分别对应的内容类型的描述信息,生成第二数据结构的数据,所述第二数据结构的数据中包括所述至少一个子数据,以及与所述至少一个子数据中各个子数据分别对应的内容类型的描述信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市优朋普乐传媒发展有限公司,未经深圳市优朋普乐传媒发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710104627.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:课件切片的更新方法、装置及系统
- 下一篇:一种互联网期刊管理系统