基于信息熵与动态聚类的文本特征选择方法

• 作者: 唐立力
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: K-means算法 动态聚类 特征选择 信息熵
• 年，卷（期）: 2015,（19）
• 所属期刊栏目: 数据库、数据挖掘、机器学习
• 页码范围: 152-157
• 页数: 6页
• 分类号: TP301
• 字数: 6258字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1502-0069

摘要

根据科技文献的结构特点，搭建了一个四层挖掘模式，提出了一种应用于科技文献分类的文本特征选择方法。该方法首先依据科技文献的结构将其分为四个层次，然后采用K-means聚类对前三层逐层实现特征词提取，最后再使用Aprori算法找出第四层的最大频繁项集，并作为第四层的特征词集合。在该方法中，针对K-means算法受初始中心点的影响较大的问题，首先采用信息熵对聚类对象赋权的方式来修正对象间的距离函数，然后再利用初始聚类的赋权函数值选出较合适的初始聚类中心点。同时，通过为K-means算法的终止条件设定标准值，来减少算法迭代次数，以减少学习时间；通过删除由信息动态变化而产生的冗余信息，来减少动态聚类过程中的干扰，从而使算法达到更准确更高效的聚类效果。上述措施使得该文本特征选择方法能够在文献语料库中更加准确地找到特征词，较之以前的方法有很大提升，尤其是在科技文献方面更为适用。实验结果表明，当数据量较大时，该方法结合改进后的K-means算法在科技文献分类方面有较高的性能。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	唐立力	重庆工商大学融智学院	19	55	5.0	7.0