具有同步化特征选择的迭代紧凑非平行支持向量聚类算法

作者:方佳艳; 刘峤

摘要:本文提出了一种新的带有同步化特征选择的聚类算法,称为"具有同步化特征选择的迭代紧凑非平行支持向量聚类算法"(IT-NHSVC-SFS).在具有两个非平行超平面的学习模型中使用迭代(交替)优化算法完成聚类,同时引入两种类型的正则项,分别是欧几里得范数和无穷范数,欧几里得范数用于提升聚类模型的泛化能力,无穷范数实际上是对两个非平行超平面进行同步化地隐式特征抽取,从而降低来自于不相关特征的聚类噪音,保证了模型的聚类精度,并引入一组束缚变量(bounding variables)避免无穷范数的最大化操作,将非凸优化问题转化成二次凸优化问题.同时,由于新提出的模型体现着"最大间隔"的思想,因此具有良好的泛化能力.为了方便实现两个非平行超平面同步化的特征选择过程,文中将非平行超平面SVM(Nonparallel Hyperplane SVM,NHSVM)作为IT-NHSVC-SFS算法的基础模型,因此和TWSVM以及它的变体模型不同的是:只需要求解一个二次规划问题(QP问题)就可以同时得到两个最优超平面.同时,新算法在原有的NHSVM模型的约束条件集合中新添加了两组等式约束条件,从而无需进行原有模型中的两个大矩阵的求逆操作,降低了计算复杂度.此外,在IT-NHSVC-SFS模型中,用拉普拉斯损失函数(Laplacian loss measure)代替了NHSVM模型原有的铰链损失函数(hinge loss function),避免了算法早熟收敛(premature convergence).在一组标准数据集上的数值实验结果表明,相对于其他已有的聚类算法,IT-NHSVC-SFS算法在聚类精度方面具有更好的表现.

分类:
  • 期刊
  • >
  • 自然科学与工程技术
  • >
  • 信息科技
  • >
  • 无线电电子学
收录:
  • 国家图书馆馆藏
  • 万方收录(中)
  • CSCD 中国科学引文数据库来源期刊(含扩展版)
  • JST 日本科学技术振兴机构数据库(日)
  • 北大期刊(中国人文社会科学期刊)
  • CA 化学文摘(美)
  • 知网收录(中)
  • 上海图书馆馆藏
  • 维普收录(中)
  • EI 工程索引(美)
  • 统计源期刊(中国科技论文优秀期刊)
关键词:
  • 聚类
  • 特征选择
  • 非平行超平面支持向量机
  • 无穷范数

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

期刊名称:电子学报

期刊级别:北大期刊

期刊人气:1999

杂志介绍:
主管单位:中国科学技术协会
主办单位:中国电子学会
出版地方:北京
快捷分类:电力
国际刊号:0372-2112
国内刊号:11-2087/TN
邮发代号:2-891
创刊时间:1962
发行周期:月刊
期刊开本:A4
下单时间:1-3个月
复合影响因子:1.24
综合影响因子:1.51