基于模糊综合评判和长度过滤的SNM改进算法

• 作者: 董建怀 郭文龙
• 来源期刊: 武汉工程大学学报
• 学科: 工学
• 关键词: 相似重复记录 模糊综合评判 属性 长度过滤 SNM 算法
• 年，卷（期）: 2017,（4）
• 所属期刊栏目: 机电与信息工程
• 页码范围: 403-408
• 页数: 6页
• 分类号: TP311
• 字数: 4556字
• 语种: 中文

摘要

为了提高数据库的数据质量,需要对相似重复记录进行清洗,基本邻近排序算法是目前常用的清洗算法之一.针对判重过程中属性权值计算主观性过强的问题,提出通过多用户综合评判确定属性权值的方法,该方法能更客观地评判属性的重要性程度.在此基础上,结合属性权值计算两条记录的长度比例,排除不可能构成相似重复的记录,减少了比较次数,提高了检测效率.实验结果表明改进算法在查全率、查准率及时间效率等方面均有所提高.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郭文龙	福建江夏学院电子信息科学学院	21	57	4.0	7.0
2	董建怀	福建江夏学院电子信息科学学院	6	3	1.0	1.0