[发明专利]基于Logistic回归的中文垃圾邮件过滤方法无效
| 申请号: | 200810059602.9 | 申请日: | 2008-01-28 |
| 公开(公告)号: | CN101227435A | 公开(公告)日: | 2008-07-23 |
| 发明(设计)人: | 徐从富;王庆幸;彭鹏 | 申请(专利权)人: | 浙江大学 |
| 主分类号: | H04L12/58 | 分类号: | H04L12/58;H04L29/06;G06F17/30;G06Q10/00 |
| 代理公司: | 杭州求是专利事务所有限公司 | 代理人: | 张法高 |
| 地址: | 310027*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 logistic 回归 中文 垃圾邮件 过滤 方法 | ||
1.一种基于Logistic回归的中文垃圾邮件过滤方法,包括如下步骤:
1)利用JavaMail和HTMLParser的应用程序接口对邮件进行解析,提取邮件标题、邮件文本、邮件字符集、邮件附件标题的文本信息;
2)对提取的文本信息进行分词;
3)统计文本信息中的词条的词频,利用TF-IDF公式计算词的权重,将邮件文本信息表示成加权特征向量,重复步骤1)~步骤3)得到加权特征向量集;
4)利用LIBLINEAR工具包对邮件样本的加权特征向量集进行训练得到Logistic回归模型;
5)利用得到的Logistic回归模型对邮件进行分类,得到邮件是否为垃圾邮件的概率值。
2.根据权利要求1所述的一种基于Logistic回归的中文垃圾邮件过滤方法,其特征在于所述的对邮件进行解析,提取邮件标题、邮件文本、邮件字符集、邮件附件标题的文本信息:利用RFC2822,RFC2045,RFC2046邮件标准和MIME格式标准,对邮件进行解码、解析,提取邮件标题、邮件文本、邮件字符集、邮件附件标题的文本信息,若提取的文本信息已通过Base64和Quoted Printable编码方式进行过编码,则采用与其对应的解码方式进行解码,对html格式的邮件主体进行解析。
3.根据权利要求1所述的一种基于Logistic回归的中文垃圾邮件过滤方法,其特征在于所述的对提取的文本信息进行分词:对于解码后的文本信息进行分词,以得到经过分词后的文本信息。
4.根据权利要求1所述的一种基于Logistic回归的中文垃圾邮件过滤方法,其特征在于所述的统计文本信息中的词条的词频,利用TF-IDF公式计算词的权重,将邮件文本信息表示成加权特征向量,重复步骤1)~步骤3)得到加权特征向量集:对于经过分词后的文本信息,首先统计其中每个词的词频和邮件样本集中该词出现的词频,使用TF-IDF公式计算词的权重,将邮件样本集中所有的词组成一个特征空间,每封邮件可以映射成该特征空间的一个加权特征向量,重复步骤1)~步骤3),得到加权特征向量集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/200810059602.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:折叠式书架
- 下一篇:大屏幕平板电视壁挂式支架





