噪音数据的属性选择算法
作者:
作者单位:

作者简介:

许航(1996-),女,博士生,主要研究领域为数据挖掘,机器学习.
吴兆江(1994-),男,硕士,主要研究领域为数据挖掘,机器学习.
张师超(1962-),男,博士,教授,博士生导师,CCF专业会员,主要研究领域为数据挖掘,人工智能.
李佳烨(1993-),男,博士生,CCF学生会员,主要研究领域为数据挖掘,机器学习,深度学习.

通讯作者:

张师超,E-mail:zhangsc@csu.edu.cn

中图分类号:

TP18

基金项目:

国家自然科学基金(61836016,61672177);中央高校基本科研业务费专项资金(2019zzts964)


Feature Selection Algorithm for Noise Data
Author:
Affiliation:

Fund Project:

National Natural Science Foundation of China (61836016, 61672177); Fundamental Research Funds for the Central Universities (2019zzts964)

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    正则化属性选择算法减小噪音数据影响的效果不佳,而且样本空间的局部结构几乎没有被考虑,在将样本映射到属性子空间后,样本之间的联系与原空间不一致,导致数据挖掘算法的效果不能令人满意.提出一个抗噪音属性选择方法,可以有效地解决传统算法的这两个缺陷.该方法首先采用自步学习的训练方式,这不仅能大幅度降低离群点进入训练的可能性,而且有利于模型的快速收敛;然后,采用加入l2,1正则项的回归学习器进行嵌入式属性选择,兼顾“求得稀疏解”和“解决过拟合”,使模型更稳健;最后,融合局部保留投影的技术,将其投影矩阵转换成模型的回归参数矩阵,在属性选择的同时保持样本之间的原有局部结构.采用一系列基准数据集合测试该算法,在aCC和aRMSE上的实验结果,表明了该属性选择方法的有效性.

    Abstract:

    The regularization feature selection algorithm is not effective in reducing the impact of noisy data. Moreover, the local structure of the sample space is hardly considered. After the samples are mapped to the feature subspace, the relationship between samples is inconsistent with the original space, resulting in unsatisfactory results of the data mining algorithm. This study proposes an anti-noise feature selection method that can effectively solve these two shortcomings of traditional algorithms. This method first uses a self-paced learning training method, which not only greatly reduces the possibility of outliers entering training, but also facilitates the rapid convergence of the model. Then, a regression learner with regular terms is used to select the embedded features, taking into account the "sparse solution" and "solving over-fitting" to make the model more robust. Finally, the technique of locality preserving projections is integrated, and its projection matrix is transformed into the regression parameter matrix of the model, while maintaining the original local structure between the samples while selecting the features. Some experiments are conducted for evaluating the algorithm with a series of benchmark data sets. Experimental results show the effectiveness of the proposed algorithm in term of the aCC and aRMSE.

    参考文献
    相似文献
    引证文献
引用本文

许航,张师超,吴兆江,李佳烨.噪音数据的属性选择算法.软件学报,2021,32(11):3440-3451

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2019-12-26
  • 最后修改日期:2020-01-17
  • 录用日期:
  • 在线发布日期: 2020-12-02
  • 出版日期: 2021-11-06
您是第位访问者
版权所有:中国科学院软件研究所 京ICP备05046678号-3
地址:北京市海淀区中关村南四街4号,邮政编码:100190
电话:010-62562563 传真:010-62562533 Email:jos@iscas.ac.cn
技术支持:北京勤云科技发展有限公司

京公网安备 11040202500063号