[发明专利]一种异常检测训练集的构建方法及装置有效
| 申请号: | 201310589362.4 | 申请日: | 2013-11-20 |
| 公开(公告)号: | CN103559420A | 公开(公告)日: | 2014-02-05 |
| 发明(设计)人: | 赵朋朋;周徐;吴健;辛洁;鲜学丰;崔志明 | 申请(专利权)人: | 苏州大学 |
| 主分类号: | G06F19/00 | 分类号: | G06F19/00 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 常亮 |
| 地址: | 215123 江苏*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 异常 检测 训练 构建 方法 装置 | ||
1.一种异常检测训练集的构建方法,其特征在于,包括:
获取样本数据集合,并将所述获取到的样本数据集合确定为当前数据集合;
获取各个当前标注指令;
依据获取到的所述各个当前标注指令,在所述当前数据集合中获取与所述各个当前标注指令相对应的已标注数据,将所述已标注数据加入第一数据集合,将所述当前数据集合中的未标注数据组成第二数据集合;其中,所述已标注数据包括正常点数据或异常点数据;
判断所述第一数据集合中异常点数据的个数是否达到预设数值;
若是,依据所述第一数据集合中的已标记数据和所述第二数据集合中的未标记数据,生成训练集;
若否,依据所述第一数据集合,计算所述第二数据集合中的未标注数据的异常点概率,依据所述异常点概率,对所述第二数据集合中的未标注数据进行排序,将排序后的第二数据集合确定为当前数据集合,返回执行所述获取各个当前标注指令。
2.根据权利要求1所述的方法,其特征在于,所述依据获取到的所述各个当前标注指令,在所述当前数据集合中获取与所述各个当前标注指令相对应的已标注数据,将所述已标注数据加入第一数据集合,将所述当前数据集合中的未标注数据组成第二数据集合,包括:
解析获取到的所述各个标注指令,获得与所述各个标注指令相对应的标注;
依据标注指令与数据间的对应关系,为所述各个数据添加相对应的标注;其中,所述各个数据是在所述当前数据集合中获取的;
将所述各个添加标注的数据确定为已标注数据,并将所述已标注数据加入第一数据集合;其中,所述已标注数据包括正常点数据或异常点数据;
将所述当前数据集合中的未标注数据组成第二数据集合。
3.根据权利要求2所述的方法,其特征在于,正常点的标注为1,异常点的标注为0,则:
所述依据所述第一数据集合,计算所述第二数据集合中的未标注数据的异常点概率,包括:
将所述样本数据集合表示为X={x1,x2,...xn},将第一数据集合表示为L={x1,x2,...xl},将第二数据集合表示为U={xl+1,xl+2,...xn};
依据所述第一数据集合中各个数据的标注生成标注集合F={u1,u2,...ul};其中,所述ui为1或0;
依据所述第一数据集合、所述第二数据集合及所述标注集合,利用公式
在所述矩阵中获取与所述集合U中各个数据xi相对应的簇值,生成簇值集合{ti1,ti2,....,tik};
依据与各个数据xi相对应的簇值集合,利用公式分别计算各个数据xi的异常点的概率;
其中:所述n为获取的样本数据集合中的数据个数,所述k为所述样本数据集合中正常点形成簇的预设个数,所述Cj为第j个簇的聚类中心,所述r1、r2为预设的权重值,所述d(Cj,xi)Cj为样本xi的欧式距离。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州大学,未经苏州大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310589362.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:毛皮动物养殖装置
- 下一篇:一种铁水气化脱硅回收纳米SiO2的方法
- 同类专利
- 专利分类
G06F 电数字数据处理
G06F19-00 专门适用于特定应用的数字计算或数据处理的设备或方法
G06F19-10 .生物信息学,即计算分子生物学中的遗传或蛋白质相关的数据处理方法或系统
G06F19-12 ..用于系统生物学的建模或仿真,例如:概率模型或动态模型,遗传基因管理网络,蛋白质交互作用网络或新陈代谢作用网络
G06F19-14 ..用于发展或进化的,例如:进化的保存区域决定或进化树结构
G06F19-16 ..用于分子结构的,例如:结构排序,结构或功能关系,蛋白质折叠,结构域拓扑,用结构数据的药靶,涉及二维或三维结构的
G06F19-18 ..用于功能性基因组学或蛋白质组学的,例如:基因型–表型关联,不均衡连接,种群遗传学,结合位置鉴定,变异发生,基因型或染色体组的注释,蛋白质相互作用或蛋白质核酸的相互作用





