[发明专利]数据接入处理方法和装置

权利要求书

1.一种数据接入处理方法，其特征在于，包括以下步骤：

从至少一个接入终端的业务数据中提取原始数据，包括：从所述业务数据中提取实验数据，从所述实验数据中提取所述原始数据，其中，所述业务数据包括：至少一个接入终端初次上传的业务数据；或者，至少一个接入终端上传到的历史业务数据；所述实验数据是从业务数据中随机提取的一些数据，或从业务数据中提取的有代表性的一些数据；

将所述原始数据与标准格式数据的字段进行匹配，确定与所述原始数据对应的映射字段，其中，根据与所述标准格式数据的各字段对应的解析器，识别所述标准格式数据中与所述原始数据匹配的字段，所述解析器根据标准格式数据字段的特点和业务特点决定，如果与所述原始数据匹配成功的为一个字段，则将所述字段确定为与所述原始数据对应的映射字段，如果与所述原始数据匹配成功的为多个候选字段，则确定与每个候选字段对应的权重，并发送到控制中心进行确认，并将与确认结果对应的字段确定为与所述原始数据对应的映射字段；

根据所述原始数据与所述映射字段的对应关系，生成与接入终端对应的转换脚本。

2.如权利要求1所述的方法，其特征在于，所述从至少一个接入终端的业务数据中提取原始数据，包括：

根据预设的分隔符列表识别所述业务数据中的分隔符；

如果所述业务数据包括一种类型的分隔符，则根据所述分隔符对所述业务数据进行数据拆分获取原始数据。

3.如权利要求2所述的方法，其特征在于，还包括：

如果所述业务数据包括多种类型的分隔符，则根据所有类型的分隔符，依次对所述业务数据进行数据拆分获取多组候选的原始数据；

根据所述标准格式数据的格式信息与所述多组候选的原始数据进行匹配，分别获取每组候选的原始数据与所述标准格式数据的匹配度；

比较所有的匹配度，选择匹配度最高的候选原始数据。

4.如权利要求3所述的方法，其特征在于，所述标准格式数据的格式信息包括以下至少之一：

字段数量，关键字符。

5.如权利要求1所述的方法，其特征在于，在所述识别所述标准格式数据中与所述原始数据匹配的字段之前，还包括：

根据业务类型以及所述标准格式数据中的字段特征，生成与所述标准格式数据的每个字段对应的解析器。

6.如权利要求1所述的方法，其特征在于，在所述生成与各接入终端对应的转换脚本之后，还包括：

检测接入终端的业务运行状况；

如果检测获知所述业务运行状况不符合预设指标，则调整相应接入终端中所述原始数据与所述映射字段的对应关系，并更新对应的转换脚本。

7.一种数据接入处理方法，其特征在于，包括以下步骤：

接收携带接入终端标识的业务数据，其中，所述业务数据包括：至少一个接入终端初次上传的业务数据；或者，至少一个接入终端上传到的历史业务数据；

获取与所述接入终端标识对应的转换脚本，其中，所述转换脚本是根据所述业务数据中的原始数据与标准格式数据的映射字段的对应关系生成的，从所述业务数据中提取实验数据，从所述实验数据中提取所述原始数据，所述实验数据是从业务数据中随机提取的一些数据，或从业务数据中提取的有代表性的一些数据；

根据所述转换脚本完成所述业务数据到所述标准格式数据的映射；

如果没有存储与所述接入终端标识对应的转换脚本，则将所述业务数据中的原始数据与所述标准格式数据的字段进行匹配，确定与所述原始数据对应的映射字段，进而生成与所述接入终端标识对应的转换脚本，其中，根据与所述标准格式数据的各字段对应的解析器，识别所述标准格式数据中与所述原始数据匹配的字段，所述解析器根据标准格式数据字段的特点和业务特点决定，如果与所述原始数据匹配成功的为一个字段，则将所述字段确定为与所述原始数据对应的映射字段，如果与所述原始数据匹配成功的为多个候选字段，则确定与每个候选字段对应的权重，并发送到控制中心进行确认，并将与确认结果对应的字段确定为与所述原始数据对应的映射字段。