[发明专利]一种数据存储、查询、加载方法及装置

摘要

本发明提供了一种数据存储、查询、加载方法及装置，在进行用户数据存储时，为用户数据创建对象，对象包括用户数据本身以及用户数据的属性信息，且每个对象具有对应的对象标识；将用户数据的属性信息存入元数据库中，根据用户数据的属性信息将其写入相应的底层存储系统，元数据库中用于存储属性信息的各属性信息表之间通过对象标识进行关联；在接收到查询请求时根据对象标识在各属性信息表中确定数据存储位置进行数据查询；在用户数据的数据类型需要改变时，修改用户数据相应的属性信息表后进行数据加载。采用本发明的技术方案，可以在不改变软件结构的情况下，更好的适应数据结构的变化。

主权项

一种数据存储方法，其特征在于，包括如下步骤：在进行用户数据存储时，为所述用户数据创建对象，所述对象包括用户数据本身以及所述用户数据的属性信息，每个对象具有对应的对象标识；将所述属性信息存入元数据库中，根据用户数据的属性信息将用户数据写入相应的底层存储系统，在所述元数据库中用于存储所述属性信息的各属性信息表之间通过对象标识进行关联；所述属性信息包括对象的数据类型信息、关联信息和数据存储信息，所述将用户数据的属性信息存入元数据库中，包括：将所述对象的数据类型信息存储于对象信息表中，将所述关联信息存储于关联信息表中，将所述数据存储信息根据数据类型的不同分别存储于不同的数据存储信息表中；所述对象的数据类型包括结构化数据类型、半结构化数据类型和非结构化数据类型，所述半结构化数据由HBase管理和加载，所述非结构化数据由HDFS管理和加载，可变属性列的结构化数据由HIVE管理和加载，不可变属性列的结构化数据由关系型数据库RDMS管理和实现。