[发明专利]一种基于流式处理的数据脱敏系统及其脱敏方法

权利要求书

1.一种基于流式处理的数据脱敏系统，包含用于获取数据的获取模块、对数据进行脱敏处理的脱敏模块和将脱敏后的数据发出的发送模块，其特征在于；还包含有： 缓存模块；判断模块，所述判断模块用于判断目前收到的一个或一个以上的数据包是否包含完整的记录行，并将收集到的一个或一个以上的数据包存储在所述缓存模块中，当所述判断模块判断一个完整的记录行存在于一个数据包中，所述脱敏模块直接对该数据包进行脱敏处理，当所述判断模块判断一个完整的记录行存在于两个或两个以上的数据包中，先由合并模块将这两个或两个以上的数据包进行拼接，随后所述脱敏模块再对合并后的记录行数据进行脱敏，当所述判断模块判断一个数据包中既存在前一个记录行的部分数据又存在下一个记录行的部分数据，则先有合并模块将该数据包和之前包含前一个记录行的所有数据包进行拼接，随后脱敏，脱敏后发送模块只发出该数据包之前所有包含前一个记录行的所有数据包。

2.根据权利要求1所述的一种基于流式处理的数据脱敏系统，其特征在于：所述脱敏模块包含提取模块、映射模块和替换模块，所述提取模块用于查找和提取数据中的敏感数据和与所述敏感数据对应的目标脱敏规则，所述映射模块用于在映射关系中查找与所述目标脱敏规则所对应的目标数据字典，所述替换模块用于将所述目标数据字典对相对应的所述敏感数据进行替换处理。

3.一种基于流式处理的数据脱敏系统的脱敏方法，其特征在于,包括以下步骤: 步骤一：抓包步骤， 在该步骤中，获取模块逐个获取来自服务器发送来的数据包，且缓存在缓存模块中； 步骤二：判断步骤， 在该步骤中，判断模块对于数据包是否拥有完整的记录行进行判断，若有完整的记录行，则进入下一步骤，若没有，则继续抓取数据包，直至拥有完整的记录行； 步骤三：脱敏步骤，在该步骤中，脱敏模块对步骤二中获取到的拥有完整的记录行的数据包进行脱敏处理； 步骤四：数据发送步骤， 发送模块将脱敏后的数据发送给客户端；其中，当所述判断模块判断一个完整的记录行存在于一个数据包中，所述脱敏模块直接对该数据包进行脱敏处理；当所述判断模块判断一个完整的记录行存在于两个或两个以上的数据包中，先由合并模块将这两个或两个以上的数据包进行拼接，随后所述脱敏模块再对合并后的记录行数据进行脱敏；当所述判断模块判断一个数据包中既存在前一个记录行的部分数据又存在下一个记录行的部分数据，则先有合并模块将该数据包和之前包含前一个记录行的所有数据包进行拼接，随后脱敏，脱敏后发送模块只发出该数据包之前所有包含前一个记录行的所有数据包。