[发明专利]数据电商的一种高效的技术框架

权利要求书

1.数据电商的一种高效的技术框架，其特征在于，

包含五个子模块，分别为：混合数据结构的数据整理汇总模块dGather、数据REST开放服务模块dOpen、数据权限控制模块dAuth、数据商品交易服务模块dTrade和数据服务计费模块dCharge；

其中，dGather数据整理汇总模块、dOpen开放模块和dAuth数据权限控制三部分被定义为DataMall框架数据端dmall-Data：负责数据电商数据整合，并提供给用户可以使用数据的方式；dTrade模块和dCharge模块统称定义为DataMall框架销售端dmall-Sale：负责将可以使用的数据销售给大众用户，并且对数据的使用方式进行计费。

2.根据权利要求1所述的技术框架，其特征在于，

将客户定义的一个数据需求，进行智能的匹配采；将定义好的一个需求主题经过dmall-data系统进行多任务化为任务集合，集合中任意一个任务可再按维度细化成子任务，按照主从心跳模式由调度节点分配给执行节点执行汇总，对于执行完采集的节点，调度节点主动进行整理，采取分布式存储，并与行业内部组织数据进行整合分析的技术；同时，将采集到的互联网数据通过dOpen系统结合dAuth权限方式以轻量级方式分享给用户，以可度量的dCharge服务方式对外提供dTrade支付交易。

3.根据权利要求2所述的技术框架，其特征在于，

具体实现分如下步骤：

步骤1、dGather根据配置参数，自动匹配行业模板及其汇总方法，并回馈给客户以验证是否符合要求；如果不符合，提供给用户自定义数据管理和汇总方法；

步骤2：确定汇总任务模板，dGather中<适配功能>首先接收到这个模板，将模板分解为多个汇总任务，并将每个任务分配给调度监控集群；

步骤3：汇总整理调度节点根据任务进行按维度划分，并负责将各个子任务分配给执行节点，同时监控执行情况；对于异常进行动态迁移到正常执行节点；调度节点与执行节点依赖MapReduce计算模型；

步骤4：第三方用户如果想获取DMall的数据服务请求，首先通过dAuth进行权限认证，验证是否为合法用户，是否有相应的数据权限；

步骤5：通过dAdapter将用户的请求分解并适配到对应主题所在的节点上，系统将汇总后的结构反馈给用户；

步骤6：汇总到开放库的数据通过dOpen模块开放为第三方接口，同时接入dTrade在线商城交易，完成数据商品推送到用户；

步骤7：用户拿到交易数据商品以后，可以通过API接口的方式访问数据，数据将以json、dmp文件、sql文件等方式返回；同时，系统通过dCharge计费模块实现数据商品的流量付费功能。