[发明专利]一种用于PDM系统的大数据采集与处理方法

摘要

本发明公开了一种用于PDM系统的大数据采集与处理方法，所述方法在使用过程中使用到的系统模块包括PDM系统、PDM系统数据库、PDM系统文件卷、数据采集接口模块、选项管理模块、算法管理模块、决策分析模块、分析结果显示模块、算法库、大数据分析系统数据库。本发明实现PDM系统与工业大数据分析系统的集成，实现从PDM系统、三维设计数据中提取数据，加载到大数据分析系统中使用。为产品的设计者、制造者和使用者提供可靠的数据分析、事件预警，可以有效地解决海量数据存储访问、高并发、高扩展等问题。

主权项

1.一种用于PDM系统的大数据采集与处理方法，所述方法使用到的系统模块包括PDM系统、PDM系统数据库、PDM系统文件卷、数据采集接口模块、选项管理模块、算法管理模块、决策分析模块、分析结果显示模块、算法库、大数据分析系统数据库；具体使用方法包括以下步骤：步骤1、在决策分析模块分析选项设置子功能中加载大数据分析系统存储的分析选项，并从分析选项列表中选取要进行大数据分析的选项组合，填写数据筛选条件，生成一份选项清单；由分析选项设置子功能将选项清单及对应的属性信息、数据筛选条件存储到大数据分析系统数据库；步骤2、决策分析模块算法加载与校验子功能根据选项清单及属性信息、筛选条件，从算法库中加载关联的大数据分析算法和特征提取算法程序，遍历并校验大数据分析算法程序算法输入字段与分析选项的数据字段名称映射是否完整，完成校验后将数据字段名称列表、数据字段采集方式、筛选条件传入数据采集接口；步骤3、数据采集接口模块根据传入的数据字段名称列表、数据字段采集方式、筛选条件，确定每个数据字段的采集方式，生成PDM系统数据库SQL查询语句；步骤4、数据采集接口模块连接PDM系统数据库, 使用生成的数据库SQL语句，从PDM系统数据库表中查询与大数据分析选项数据数据字段名称映射的属性值，将属性值存储到大数据分析系统数据库，并以数据集Attribute_Dataset的方式缓存到计算机内存；步骤5、数据采集接口模块从PDM系统文件卷中获取三维设计数据物理文件，调用三维CAD软件的图形数据加载程序，在计算机内存中加载获取到的三维设计数据物理文件，执行预加载的特征提取算法程序，输出三维设计数据特征值，将特征值存储到大数据分析系统数据库，并以数据集Feature_Dataset的方式缓存到计算机内存；步骤6、决策分析模块大数据分析子功能将计算机内存中数据集Attribute_Dataset、Feature_Dataset作为大数据分析程序的算法输入字段；执行大数据分析算法，将处理结果推送至分析结果显示模块。