[发明专利]一种网络身份关联归一化方法、存储装置及移动终端

说明书

本发明公开了一种网络身份关联归一化方法，该方法包括以下步骤：将采集到的移动终端的网络身份数据发送到配置的FTP中；对采集接收网络身份数据进行清洗处理，包括：根据异常身份算法剔除偶然性网络身份和多人同时同用一台上网终端产生的网络身份；根据数据内容的不同特征，将该网络身份和elasticsearch中之前记录的身份进行智能归一操作，然后将智能身份关联归一之后的信息重新写入elasticsearch库中。本发明利用采集设备，采集上网终端产生的数据，对数据进行分类，对数据进行清洗，然后利用归一话策略规则进行归一处理，可以将没有直接关联关系的网络身份关联归一起来，准确率高。

技术领域

本发明涉及网络身份归一领域，具体涉及一种网络身份关联归一化方法、存储设备及移动终端。

背景技术

在现在的大数据爆炸的时代，在采集一些网络数据时，需要将网络中的多个身份进行归一，现有的技术基础上进行网络身份的归一，只能将一些有直接关联的网络身份进行关联归一，例如，淘宝账号与支付宝账号这里有之间关联的账号，不能很好地对无关联关系的网络身份进行归一，例如淘宝账号与微信账号，京东等无任何关系联系的账号进行归一，并且现在技术身份归一关联的准确率偏低，容易把一些非同一人的网络身份进行了关联归一。

因此需要对现有的网络身份归一技术进行进一步地改进，以提高网络身份归一的准确性，同时能够将一些无直接关联的网络身份进行归一。

发明内容

为了解决上述技术问题，本发明的提供一种网络身份归一的准确性高，并且能够将一些无直接关联的网络身份进行归一的网络身份关联归一化方法。

为实现上述目的，本发明采取的技术方案如下：一种网络身份关联归一化方法，该方法包括以下步骤：

S1:采集设备利用无线Wi-Fi传输协议自动采集移动终端MAC地址；

S2:利用空中拦截无线Wi-Fi信息号技术和对无线Wi-Fi信号解析技术,在移动终端处于无线Wi-Fi连接状态采集移动终端上网记录中无关联关系的网络身份数据；

S3：将采集到的移动终端的网络身份数据发送到配置的FTP中；

S4：使用Java程序对ftp接收的数据进行预处理，清理掉不完整数据，并将预处理后的数存储到统一的消息组件kafka中；

S5:在消息组件kafka中对预处理后的数据进行进一步清洗处理；

清洗处理如下：

S5-1：异常身份剔除：根据异常身份算法剔除偶然性网络身份和多人同时同用一台上网终端产生的网络身份；

S5-2：网络身份分类：根据数据内容的不同特征，对网络身份进分类；

S5-3:智能身份关联归一:根据归一策略规则，将该网络身份和elasticsearch中之前记录的身份进行智能归一操作，然后将智能身份关联归一之后的信息重新写入elasticsearch库中；

归一策略规则如下：

归一策略规则一：清除异常数据；

归一策略规则二：一分钟内，多人同时同用一台上网终端产生的网络身份，不能视为同一身份；

归一策略规则三：无直接关联的网络身份，多次在同一时间窗口出现在同一采集设备的网络身份，可归一。

优选地，所述异常身份算法中以下几种情况都属于异常身份：

异常ip；异常mac；以及异常imsi。

优选地，所述上网记录数据包括QQ、微信、淘宝、京东、支付宝以及百度贴吧的登录账号的网络身份的两种及以上。