[发明专利]可视化数据采集到展现系统

权利要求书

1.一种可视化数据采集到展现系统，其特征在于，包括：

数据源定义模块，用于定义不同类型的数据源；

数据源连接配置模块，用于设置每个所述数据源定义模块定义的数据源的连接配置信息，通过所述连接配置信息，可访问到对应的所述数据源；

数据源连接模块，用于根据所述数据源的连接配置信息，与所述数据源通过通信网络进行连接；

数据表目录获取模块，用于与所述数据源通过通信网络进行连接后，获取到所述数据源包含的所有数据表的数据表目录；所述数据表目录由多个数据表名称组成；

数据表预览模块，用于在获取到所述数据表目录后，对于每个所述数据表名称，向所述数据源发送携带有数据表名称的数据表预览请求；并接收所述数据源返回的对应的数据表，实现数据表预览功能；

数据模型创建模块，用于创建数据模型；具体的，用于对所述数据表目录获取模块获取到的多个数据表名称进行操作，选择需要建立表关联关系的至少两张数据表；配置表关联关系的类型；然后，获取选择到的每张数据表的表字段；再配置每个表字段的属性信息；所述属性信息包括表字段显示或隐藏的属性；然后，建立各张数据表之间表字段之间的关联性，表关联关系和表字段之间的关联性形成了最终的数据表之间的关联关系，即形成的数据模型；

数据采集配置模块，用于配置数据采集参数；所述数据采集参数包括数据采集起始时间以及数据采集频率；

数据存储方式配置模块，用于配置数据存储方式；

执行模块，用于按所述数据采集配置模块配置的数据采集起始时间以及数据采集频率，循环调用所述数据模型，获取所述数据模型中具有表关联关系的每张数据表名称，再获取所述数据模型中具有表字段之间的关联性的每张数据表的关联字段；再获取所述数据模型中表关联关系的类型以及表字段的属性信息；

根据所述数据表名称、关联字段、表关联关系的类型以及表字段的属性信息，向所述数据源发送查询对应数据表中对应未隐藏的目标表字段信息以及未隐藏的目标表字段具有的表记录信息，即查询对应数据表中经过筛选处理后的数据表信息；

然后，根据所述表关联关系的类型，将所述数据源返回的筛选处理后的各张数据表信息进行融合，得到融合后的数据表；并按所述数据存储方式配置模块配置的数据存储方式，存储融合后的数据表；

展现模块，用于将所述融合后的数据表进行分析，并显示分析结果；

其中，所述执行模块具体用于：

假设数据模型中具有表关联关系的每张数据表名称分别为数据表A和数据表B；数据表A中共有n个字段，n1个字段为未隐藏属性，n-n1个字段为隐藏属性；数据表B中共有m个字段，m1个字段为未隐藏属性，m-m1个字段为隐藏属性；数据模型中需要建立数据表A中未隐藏属性字段中字段C和数据表B中未隐藏属性字段中字段D之间的关联；数据表A中每个字段具有x个记录值；数据表B中每个字段具有y个记录值；假设当前配置的表关联关系为左连接；数据表A为当前数据表；数据表B为数据表A的左侧数据表；

则：当到达数据采集时间点时，执行模块向对应的数据源采集数据，获取数据表B的m1个未隐藏属性的字段以及每个未隐藏属性的字段的y个记录值，记为子表B；再获取数据表A的字段C对应的x个记录值；比对数据表B的字段D的y个记录值和数据表A的字段C的x个记录值，筛选得到与数据表B的字段D的记录值相等的数据表A的字段C的记录值，假设筛选得到的数据表A的字段C的记录值分别为第i行记录值和第j行记录值；然后，所述执行模块向对应的数据源发送查询数据表A的第i行所有未隐藏字段的记录值和第j行所有未隐藏字段的记录值，并接收数据源返回的查询结果，查询结果记为子表A；

然后，所述执行模块融合获取到的子表B和子表A，得到并存储融合后的数据表。

2.根据权利要求1所述的可视化数据采集到展现系统，其特征在于，所述数据源定义模块定义的不同类型的数据源，包括：文件类型数据源、web接口类型数据源、数据库类型数据源和数据服务类型数据源。