[发明专利]数据分类方法、装置、电子设备和可读存储介质在审
| 申请号: | 202011075308.4 | 申请日: | 2020-10-09 |
| 公开(公告)号: | CN112329816A | 公开(公告)日: | 2021-02-05 |
| 发明(设计)人: | 薛淼;孟格思;李敏;王瑜 | 申请(专利权)人: | 北京嘀嘀无限科技发展有限公司 |
| 主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 北京睿派知识产权代理事务所(普通合伙) 11597 | 代理人: | 刘锋 |
| 地址: | 100193 北京*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 分类 方法 装置 电子设备 可读 存储 介质 | ||
1.一种数据分类方法,其特征在于,所述方法包括:
获取目标行为数据集,所述目标行为数据集包括通过终端侧程序记录的多个人机交互行为和网络访问行为数据;
基于所述目标行为数据集,确定目标行为特征,所述目标行为特征用于表征所述目标行为数据集对应的画像;以及
基于预先训练的行为分类模型,以所述目标行为特征作为输入,确定所述预先训练的行为分类模型输出的目标行为类别,所述预先训练的行为分类模型基于训练样本集训练确定,所述训练样本集包括多个生成样本,所述生成样本由预先训练的行为特征样本生成模型生成。
2.根据权利要求1所述的方法,其特征在于,所述行为特征样本生成模型包括生成器模块和判别器模块,所述行为特征样本生成模型基于如下步骤进行训练:
获取第一预设数量的真实行为特征样本,所述真实行为特征样本用于表征采集到的行为数据对应的行为特征;
基于所述生成器模块生成第二预设数量的虚拟行为特征样本;
基于所述判别器模块,确定所述真实行为特征样本和所述虚拟行为特征样本之间的损失函数;以及
基于所述损失函数,调整所述行为特征样本生成模型的参数。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
获取调整参数后的生成器模块生成的多个虚拟行为特征;
基于所述判别器模块对所述多个虚拟行为特征进行判别操作,确定所述多个虚拟行为特征对应的判别概率,所述判别概率用于表征所述判别器模块判断所述虚拟行为特征是真实行为特征的概率,或者用于表征所述判别器模块判断所述虚拟行为特征是虚拟行为特征的概率;以及
响应于所述判别概率未处于预设阈值范围内,调整所述行为特征样本生成模型的参数,以使得所述判别概率处于预设阈值范围内。
4.根据权利要求2或3所述的方法,其特征在于,所述训练样本集还包括所述真实行为特征样本、所述真实行为特征样本对应的标注和所述生成样本对应的标注;
所述行为分类模型基于如下步骤进行训练:
获取训练样本集;
将所述生成样本和所述真实行为特征样本作为输入,确定所述行为分类模型输出的行为类别;以及
基于所述行为类别、所述真实行为特征样本对应的标注和所述生成样本对应的标注,调整所述行为分类模型的参数。
5.根据权利要求1所述的方法,其特征在于,所述目标行为数据集包括基本信息、表现信息和埋点信息,所述基本信息用于表征固有属性,所述表现信息用于表征信用行为,所述埋点信息用于表征预设的埋点算法所收集的数据;
所述获取目标行为数据集,包括:
从预先设置的第一数据库中获取所述埋点信息,所述第一数据库用于收集并预处理埋点数据,以确定所述埋点信息,所述预处理包括数据结构化处理;
从预先设置的第二数据库中获取所述基本信息和所述表现信息,所述第二数据库用于收集并预处理基本数据和表现数据,以确定所述基本信息和所述表现信息;以及
基于所述基本信息、所述表现信息和所述埋点信息,确定所述目标行为数据集。
6.根据权利要求5所述的方法,其特征在于,所述第一数据库为数据仓库hive处理器,所述第二数据库为全链路处理器。
7.根据权利要求1所述的方法,其特征在于,所述行为特征样本生成模型基于生成式对抗网络GAN建立,所述行为分类模型包括逻辑回归模型、梯度下降树GBDT模型、分布式梯度增强库XGBoost、深度学习模型或者端到端end-to-end模型中的至少一种。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京嘀嘀无限科技发展有限公司,未经北京嘀嘀无限科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011075308.4/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





