基于局部概率抽样的标签噪声过滤方法

• 作者: 姜高霞 张增辉 王文剑
• 来源期刊: 计算机应用
• 学科: 工学
• 关键词: 标签噪声 局部概率抽样 噪声过滤 随机森林 置信度估计
• 年，卷（期）: 2021,（1）
• 所属期刊栏目: 第八届中国数据挖掘会议(CCDM 2020)
• 页码范围: 67-73
• 页数: 7页
• 分类号: TP181
• 语种: 中文
• DOI: 10.11772/j.issn.1001-9081.2020060970

摘要

分类学习任务中,在获取数据的过程中会不可避免地产生噪声,特别是标签噪声的存在不仅使得学习模型更复杂,而且容易造成过拟合并导致分类器泛化能力的下降.标签噪声过滤算法虽然在一定程度上可以解决上述问题,但是仍然存在噪声识别能力较差、分类效果不够理想以及过滤效率低等问题.针对这些问题,提出一种基于标签置信度分布的局部概率抽样方法来进行标签噪声过滤.首先利用随机森林分类器对样本的标签进行投票,从而获取每个样本的标签置信度;然后根据标签置信度的大小,将样本划分为易识别样本和难识别样本;最后分别采用不同的过滤策略对样本进行过滤.实验结果表明,在标签噪声存在的情况下,所提方法在大多数案例上能够保持较高的噪声识别能力,并且在分类泛化性能上也具有明显优势.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王文剑		97	798	14.0	23.0
2	姜高霞		14	49	3.0	6.0
3	张增辉		1	0	0.0	0.0