[发明专利]一种基于云计算技术的数字内容统一引入与管理方法及系统在审
申请号: | 201810748906.X | 申请日: | 2018-07-10 |
公开(公告)号: | CN108984717A | 公开(公告)日: | 2018-12-11 |
发明(设计)人: | 贺麟;王玺;李丽琴;赵耀;肖智宽 | 申请(专利权)人: | 四川汇源吉迅数码科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;H04L29/08 |
代理公司: | 成都九鼎天元知识产权代理有限公司 51214 | 代理人: | 郭彩红 |
地址: | 610031 四川*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 管理方法及系统 并行数据挖掘 数据存取功能 配置文件 数字内容 数据处理 云计算 算法 存储 数据处理请求 数据处理性能 调度信息 基本数据 基本信息 开放接口 数据存取 数据文件 数据准备 提取数据 信息控制 用户提交 组件控制 引入 管理 数据库 告知 统一 响应 加工 | ||
1.一种基于云计算技术的数字内容统一引入与管理方法,具体方法包括,
数据请求,当用户提交数据处理请求时,通过开放接口提交数据处理必须的参数和基本数据给管理云模块,管理云模块利用已有信息控制生成配置文件,配置文件中包括加工过的并行数据挖掘算法的参数和存储云数据存取需要用到的基本信息;
数据准备,存储云模块的数据存取功能组件控制从数据库和数据文件中提取数据;
数据处理,数据准备完成后,数据存取功能组件通过调度信息告知管理云模块,启动选好的并行数据挖掘算法进行数据处理。
2.根据权利要求1所述的数字内容统一引入与管理方法,所述方法还包括,将数据库进行分离,包括,
生产资源库,用于存放数据存取的具体数据内容;
管理库,用于存放数据存取的具体规则内容;
日志库,用于存放数据存取记录日志文件。
3.根据权利要求1或2所述的数字内容统一引入与管理方法,所述方法还包括,存储云模块采用节点式管理方法,每个数据节点管理自己节点上的所有物理数据;其中,主节点统一管理存储云模块的文件系统命名空间,存放所有挖掘待处理的数据;所述待处理的数据包括物理数据的名字空间、存取控制、数据块的位置信息和数据块的备份信息。
4.一种基于云计算技术的数字内容统一引入与管理系统,便于实现权利要求1到3之一所述的数字内容统一引入与管理方法,其特征在于:包括存储云模块和管理云模块;其中,
管理云模块,接收用户提交的数据处理请求,并根据数据处理请求信息控制生成配置文件;所述数据处理请求信息包括数据处理必须的参数和基本数据;所述配置文件中包括加工过的并行数据挖掘算法的参数和存储云数据存取需要用到的基本信息;
存储云模块,包括数据存取功能组件,控制从数据库和数据文件中提取数据,并通过调度信息告知管理云模块,启动选好的并行数据挖掘算法进行数据处理。
5.根据权利要求4所述的数字内容统一引入与管理系统,其特征在于,所述存储云模块还包括数据库,所述数据库包括,
生产资源库,用于存放数据存取的具体数据内容;
管理库,用于存放数据存取的具体规则内容;
日志库,用于存放数据存取记录日志文件。
6.根据权利要求4或5所述的数字内容统一引入与管理系统,其特征在于,所述存储云模块管理结构为节点式管理结构,包括,
主节点,统一管理存储云模块的文件系统命名空间,存放所有挖掘待处理的数据;所述待处理的数据包括物理数据的名字空间、存取控制、数据块的位置信息和数据块的备份信息;
数据节点,管理自己节点上的所有物理数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川汇源吉迅数码科技有限公司,未经四川汇源吉迅数码科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810748906.X/1.html,转载请声明来源钻瓜专利网。