[发明专利]一种基于饥饿游戏搜索算法构建预测模型的方法在审
| 申请号: | 201910944048.0 | 申请日: | 2019-09-30 |
| 公开(公告)号: | CN110751257A | 公开(公告)日: | 2020-02-04 |
| 发明(设计)人: | 陈慧灵;杨宇涛;丁泽威;刘国民;罗云纲;赵学华;汪鹏君 | 申请(专利权)人: | 温州大学 |
| 主分类号: | G06N3/00 | 分类号: | G06N3/00;G06N20/10;G06K9/62 |
| 代理公司: | 33258 温州名创知识产权代理有限公司 | 代理人: | 陈加利 |
| 地址: | 325000 浙江省温州市瓯海*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 惩罚因子 游戏搜索 预测模型 归一化处理 样本数据 饥饿 构建 算法 收敛 全局近似最优解 分类和预测 支持向量机 分类样本 算法构建 算法优化 能力强 最优解 分类 优化 | ||
本发明提供一种基于饥饿游戏搜索算法构建预测模型的方法,包括获取样本数据并对所获取到的样本数据进行归一化处理;利用基于饥饿游戏搜索算法优化支持向量机的惩罚因子C和核宽γ;基于所获得的惩罚因子C和核宽γ,利用所归一化处理后的数据来构建预测模型,并基于所构建的预测模型对待分类样本进行分类和预测。实施本发明,通过基于饥饿游戏搜索算法来优化SVM的惩罚因子和核宽,借助算法易收敛,收敛精度高,以及逃脱局部最优解的能力强的特点,找到更优的全局近似最优解以获得分类精度更高的SVM模型。
技术领域
本发明涉及计算机技术领域,尤其涉及一种基于饥饿游戏搜索(HGS)算法构建预测模型的方法。
背景技术
支持向量机(SVM)常用于构建预测模型来对数据进行分析,该支持向量机(SVM)最常用的两种参数优化方法包括网格搜索和梯度下降。在第一种参数优化方法中,网格搜索是一种穷举搜索方法,它一般是通过设置合理的区间上下限和间隔步长对指定参数空间进行划分,然后对每个网格节点代表的参数组合进行训练和预测,将这些预测结果中取值最高的一组参数作为最终SVM模型的最佳参数。该方法虽然在一定程度上能保证得到给定参数空间内最优的参数组合,然而随着参数空间增大,其搜索效率会大大降低,特别是设置合理的区间和间隔步长值往往非常困难,从而大大降低了其可行性,而且模型也非常容易陷入局部最优值;在第二种参数优化方法中,梯度下降方法虽然能克服网格搜索方法的缺陷,但是它对初始值非常敏感,特别是初始参数设置离最优解非常远的时候,模型很容易收敛到局部最优解。
近年来,由于元启发式的搜索算法凭借其独特的全局寻优能力而受到了学术和工业界的广泛关注,它们被普遍认为比传统寻优方法具有更大的机会找到全局最优解,因此提出多种基于元启发式算法的SVM训练算法来处理参数优化问题。
SVM在具体应用时,其性能主要受包括线性核函数、多项式核函数、径向基(RBF)核函数和sigmoid核函数等核函数影响,一般情况下选择基于RBF核函数的SVM。RBF核SVM主要涉及两个重要的参数C和γ。C是惩罚因子,它用于控制对错分样本惩罚的程度,起到控制训练误差和模型复杂度之间平衡的作用;C值越小,则对数据中误判样本的惩罚也越小,使得训练误差变大,因此结构风险也变大。相反,C值越大,对错分样本的约束程度就越大,这样会导致模型虽然对训练数据的误判率很低,但整体的泛化能力却很差,容易出现“过拟合”现象。参数γ代表RBF核函数中的核宽,它决定了核函数的宽度,直接影响SVM的性能。如果γ取得不恰当,SVM很难获得预期的学习效果。γ值太小会导致过拟合,γ值太大会使SVM的判别函数过于平缓。所以惩罚因子C和核宽γ从不同的角度影响着SVM的分类超平面。在实际应用中,它们取值过大或过小都会使SVM的泛化性能变差。
但是,采用现有的元启发式的搜索算法来处理SVM参数优化问题,还有待进一步提升算法的收敛速度和收敛精度,提升算法逃脱局部最优解的能力,从而找到更优的全局近似最优解。
发明内容
本发明实施例所要解决的技术问题在于,提供一种基于饥饿游戏搜索算法构建预测模型的方法,通过基于饥饿游戏搜索算法(HGS)来优化SVM的惩罚因子和核宽,借助算法易收敛,收敛精度高,以及逃脱局部最优解的能力强的特点,找到更优的全局近似最优解以获得分类精度更高的SVM模型。
为了解决上述技术问题,本发明实施例提供了一种基于饥饿游戏搜索算法构建预测模型的方法,所述方法包括以下步骤:
步骤S1:获取样本数据并对所获取到的样本数据进行归一化处理;
步骤S2、利用基于饥饿游戏搜索算法优化支持向量机的惩罚因子C和核宽γ,具体为:
步骤S2.1、参数初始化;其中,初始化的参数包括:种群个数N、最大迭代次数Max_iter、问题维度D、总饥饿度SHungry、C的搜索空间[Cmin,Cmax]和γ的搜索空间[γmin,γmax];
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于温州大学,未经温州大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910944048.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于红外传感的畜牧测量计数装置
- 下一篇:一种基于微分进化的超球搜索算法





