一种基于样本分层的双向过采样方法

• 作者: 余丽琴 周晓敏 曹付元
• 来源期刊: 计算机科学
• 学科: 工学
• 关键词: 非平衡数据 分类 双向过采样 密集层 稀疏层
• 年，卷（期）: 2019,（12）
• 所属期刊栏目: 大数据与数据科学
• 页码范围: 83-88
• 页数: 6页
• 分类号: TP311
• 字数: 5349字
• 语种: 中文
• DOI: 10.11896/jsjkx.190400053

摘要

重采样技术由于简单、直观,逐渐成为解决非平衡数据分类问题的一个重要方向.但是在数据集很小的情况下,重采样技术中的欠采样可能会丢失数据集的重要信息,因此过采样是非平衡数据分类问题的研究重点.现有的过采样方法虽然有效地解决了类间不平衡问题,但是有可能造成少数类的密集区域更加密集,甚至引起样本重叠.此外,由于少数类样本可能存在噪音,现有的过采样方法可能会在噪音周围生成新样本,从而造成少数类样本的分布更加混乱.针对这些问题,文中提出了一种基于样本分层的双向过采样方法,该方法首先基于最高密度点和类内平均距离将少数类样本划分成密集层和稀疏层,然后对密集层边界区样本和稀疏层的样本进行双向过采样.为了验证所提算法的有效性,在9个UCI数据集上将提出的算法和其他过采样算法进行了比较.实验结果和Friedman等检验结果显示,提出的算法在处理非平衡数据分类问题时具有一定优势.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	曹付元	山西大学计算智能与中文信息处理教育部重点实验室	34	322	8.0	17.0
2	余丽琴	山西大学计算机与信息技术学院	2	0	0.0	0.0
3	周晓敏	山西大学计算机与信息技术学院	1	0	0.0	0.0