[发明专利]一种分布式银行数据脱敏方法及系统

说明书

本发明公开了一种分布式银行数据脱敏方法及系统，该方法包括：定义数据库自定义脱敏函数、Hive自定义脱敏函数和Java脱敏工具；备份数据库生产环境、Hive生产环境和非结构化文本生产环境下的数据作为数据脱敏源并分别存储在数据库备份库、Hive备份库和非结构化备份库中；在各备份库中创建数据库自定义脱敏函数、Hive自定义脱敏函数和脱敏工具；在数据库备份库中调用数据库自定义脱敏函数或Java脱敏工具，在Hive备份库中调用Hive自定义脱敏函数或Java脱敏工具，在非结构化备份库中调用Java脱敏工具；同时各备份调用函数时还输入脱敏规则参数A和C,或D。本发明可适用于不同数据库、Hive环境及非结构化文本环境，具有数据可逆性追溯和数据不易破解优点。

技术领域

本发明涉及人信息处理领域，尤其涉及一种分布式银行数据脱敏方法及系统。

背景技术

随着银行信息技术的发展，数据中心规模的不断扩大，银行存储的敏感数据也逐渐增多，数据在银行内不同流程的流转过程中，数据安全风险也随之增加。目前对于大多数银行来说，通过线上网银、线下网点在用户注册、开户过程中收集/存储的用户个人信息，包括姓名、手机号、邮箱、身份证号码、住址等，都属于需要保护的敏感信息。而这些敏感信息在银行内部由于业务需要，可能会参与开发测试、数据分析、数据挖掘、大数据报表等环节流程中，这就需要在不同的环节流程中对敏感数据进行数据脱敏，以金融业务需求主导，根据不同场景进行全部敏感信息处理或者部分敏感信息处理。

在敏感数据的实际处理过程中，涉及到结构化数据/大数据留存数据/非结构化数据等多种数据形态，而目前市面上安全厂商提供的安全产品，如单独对数据库进行脱敏的数据库脱敏系统，如单独对文本进行脱敏的系统等，往往一套产品无法满足多场景的适用，也无法满足Hive等新兴场景的数据留存与非结构化数据的关联关系，也无法做到一个银行内所有数据的脱敏规则统一化和关联化

鉴于银行数据安全的重要性，而当前市面上脱敏产品/方案存在适用场景不全、目标数据支持种类不全等缺陷，亟待研发设计出一种在银行内不同场景下通用的分布式数据脱敏系统。

发明内容

本发明的目的旨在解决上述问题，从而提供一种分布式银行数据脱敏方法及系统。

为实现上述目的，在第一方面，本发明提供了一种分布式银行数据脱敏方法，该方法包括如下步骤：

定义数据库自定义脱敏函数、Hive自定义脱敏函数和Java脱敏工具；

备份数据库生产环境、Hive生产环境和非结构化文本生产环境下的数据作为数据脱敏源并分别存储在数据库备份库、Hive备份库和非结构化备份库中；

在数据库备份库、Hive备份库和非结构化备份库中分别根据定义的数据库自定义脱敏函数、Hive自定义脱敏函数和Java脱敏工具创建数据库自定义脱敏函数、Hive自定义脱敏函数和脱敏工具；

在数据库备份库中调用数据库自定义脱敏函数或Java脱敏工具，并向数据库自定义脱敏函数或Java脱敏工具输入脱敏规则参数A和C,或D，更新脱敏源数据，获取脱敏后数据并保存在数据库备份库中；

在Hive备份库中调用Hive自定义脱敏函数或Java脱敏工具，并向Hive自定义脱敏函数或Java脱敏工具输入脱敏规则参数A和C,或D，更新脱敏源数据，获取脱敏后数据并保存在Hive备份库中；

在非结构化备份库中调用Java脱敏工具，并向Java脱敏工具输入脱敏规则参数A和C,或D，更新脱敏源数据，获取脱敏后数据并保存在非结构化备份库中；

其中，A为初始随机输入参数，A的值为任意正整数；C为过程输入参数，C的值可选0或1；D为初始随机输入参数，D的值为2020～2120。

进一步地，所述脱敏规则参数A,C,D的值由脱敏管理平台输入。