基于Matlab的最小二乘支持向量机的工具箱及其应用
第26卷
2006年12月
文章编号:【∞I一908“2006)12z—0358—03
计算机应用
Cornpu【erApplicallons
Dec.撕
Vol26
基于Matlal)的最小二乘支持向量机的工具箱及其应用
李方方.赵英凯,勘昕
(南京工业史学自动化学院,江苏南京210009)
(1hn出唱101604@163
c。m)
摘要:介绍了最小二乘支持向量机的算法和基于Matlab的工具葙Ls。svMIab,工具葙主要包括数据预处理,建立模型的对象厦莫各种训蝽算法等,并且结合一个工业实例阐述了Ls—svMIab在82B钢生产预测中的应用。仿真鲒果表明,用Manab开发的最小二乘支持向量机工县葙Is—sVMl小效果好,墉程简单,易于实现。
关键词:预测:最小二袭支持向量机;Is.sVMl曲;82B钢中图分类号:TPl81文献标识码:A
0引言
直恃向量机”1(suPP。nVec嘧Machi耻s.sVM)是近几年来应用于建模的一种新的学习靠{去,与传统的神经网络丰日比.支持向量机算法蛙终将转化为一个■次型寻优问题,从理论上讲得到的蒋是全局最优点.解决了在神经网络中无法避免的局部极小值问题。支持向量机的拓扑结构由支持旬最班定,避免了传统神经网络拓扑结构需要经验试凑的打法.而且sVM的最优求解基于结构风险最小化思想.因此具有比其他非线性函数逼近方法具有更强的诬化能力。由此对支持向量机的研究掀起了一股热期。但是支持向量机的原理比较复杂,因此国内外根客学者开发T很多关于支持向量机的工具包,最著名的有台{萼学者林智L博士研发的uhvm工具箱,国外很多网站上应用比较多的有svnl埘uj00,m1I远帆myswn等等,相比之。卜,美国kPelck哪s,J简单,可扩展性强.算法丰富。
本文粹以Mdab7l为开发环境.主耍介绍了最小二乘支持向量机Ls.SvⅫ!lb工具箱的一些甬数和设计步骤,并且结台一十宴例在82B钢生产中进行建模与预估,得到了很好的预测效果,Ls.svMlab编写代码少,易于实现.是研究支持向量机的一个桐有用前工具。l
A
其中llmI控制模型的复杂度+c是正规化参数,控制对
超出谩差样本的惩罚程度。月~为误差控制函数.也即t不敏感损失函数。常用的损失函数有线性s损失函数,二次¥扭失函数.Huber损失函数。选取了不同的损失函数+可构造不同形式的支持向量机。最小二乘支持向量机在优化且标失函数为误差}.的二次项。故优化问题为:
“叮(m舯2扣‘m+c善£
5.t.:H。p(%)。m+6’+矗。l=1.”,f
(3)
式中,矗为松弛因子。用拉格朗日{去求解这个优化问题:
‘(。^f一7)5扣。m+c丢£
一∑吼(pfx.)‘w+6+f^)(4)
J】
K,s”bI旱开发的基
于MaⅡab的最小二乘支持向量机的工具箱*sVMbb编程
其中喁(}_l,r.£)是拉格朗兀乘子。根据优化条件:
=
O
=
O
(5
=
O
最小二乘支持向量机的原理
展小:乘支持向量机【2o是支持向量机的一种改进,它是
=
0
№阻㈨一憎㈨一Ⅶ哺郅
P=∑"p(^)
{.
【∑%=o
“1
将传统支持向量机中的不等式约束改为等式约束.且将瀑差平方和(su瑚SqIlnresEnw)损失丽数作为训练集的经验损失,这样就把解二次规划问题转化为求解线性方程组问题,提高求解问题的速度和收敛精度。改样本为n维向量,某区域的f十样本及其袁示为:(z.,)、),…,(t,n)∈厅。×R首先用一非线性映射廿( )把样本执原空州科映射到特征空问f(≈),弃遘十高维特征空间中构造最优次策函数:
(6)
其中:&.…盲.m-州tJt女+£一n=O。
定义梭函数臣(t+^)=P(屯) p(≈)是满足条件的对称函数。根据文献『6],优化问题转化为求解线性方程.
O
l
r-
,(x)…≯b)+6
R=÷lI
m
】B
oI
nH
:
(”
1
这}羊非线性估计函魏转化为商罐特征空问的线性估计西藏。利用结构风险最小化原则,寻找“.6就是虽小化:
赋!】^)+IA剐z【。z1)
d-
n
0+c-冗叫
(2)
7)
收稿日期:20f】6一n]一23;修订日期 2006嘶一04牛坤师、主要研究方向智能扮制、目L嚣人挖柯l
基金项目国家科技攻关计划顶目(20。4BA204BcB奶)
作者简丁r车方方(19sl一),旦.E:剪=体州凡砸上研究生,主要讲究方向:暂能建^莹与优化:趄黄凯(1943一).羽,{_I_苏镇丌^,救攫,博士
朝昕(197q).男.江苏南京^,顸十研究‘..幸要研究AjJj信息集成.贸时教掘怍
万方数据
基于Matlab的最小二乘支持向量机的工具箱及其应用_IT/计算机_专业资料。基于Matlab的最小二乘支持向量机的工具箱及其应用今日推荐 ...
Dec. 2006 文章编号 : 1001 - 9081 (2006) 12Z - 0358 - 03 基于 Matlab的最小二乘支持向量机的工具箱及其应用李方方 ,赵英凯 ,颜 昕 (南京工业大学 ...
Dec. 2006 文章编号 : 1001 - 9081 (2006) 12Z - 0358 - 03 基于 Matlab的最小二乘支持向量机的工具箱及其应用李方方 ,赵英凯 ,颜 昕 (南京工业大学 ...
基于Matlab的最小二乘支持向量机的工具箱及其应用 隐藏>> 分享到: X 分享到: 使用一键分享,轻松赚取财富值, 了解详情 嵌入播放器: 普通尺寸(450*500pix...
Matlab的支持向量机工具箱Matlab的支持向量机工具箱隐藏>> 第24 卷第 12 期 2007 年 12 月 计算机应用与软件 Computer App lications and Softw are 基于 M ...
matlab四种支持向量机工... 3页 免费 基于Matlab的最小二乘支... 7页 2...工具箱应用实例 V21 支持 向量机 分类应 用 .利用 S M工具箱进行数据 样本...
一种改进的最小二乘支持向量机及其应用_专业资料。为了克服传统支持向量机训练速度慢、计算资源需求大等缺点,本文应用最小二乘支持向量机算法来解决分类问题。同时...
最小二乘支持向量机在医疗数据分析中的应用_专业资料。以医疗数据为应用对象,应用网格搜索和交叉验证的方法选择参数,建立最小二乘支持向量机分类器,进行实际验证,...
最小二乘支持向量机的自编代码和安装SVM工具箱方法_IT/计算机_专业资料。最小...(其中保存了所有的支持向量及其系数),那么说明 libsvm 和 matlab 之间的接口已经...
基于Matlab的支持向量机工... 3页 免费 基于遗传算法的核支持向量... 8页 ...等.MATLAB遗传算法工具箱及其应用.西安:西安电子科技大学出版社,2005. 456 95....
热门文档