基于类别词语权重的MBL改进方法

• 作者: 孙红梅 白硕 鲁松
• 来源期刊: 模式识别与人工智能
• 学科: 工学
• 关键词: 自然语言处理 基于记忆的学习方法 可信距离 词语权重
• 年，卷（期）: 2001,（1）
• 所属期刊栏目: 论文与报告
• 页码范围: 27-32
• 页数: 6页
• 分类号: TP391
• 字数: 5700字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-6059.2001.01.006

摘要

记忆学习方法(Memory-Based Learning(MBL))将存储的训练数据作为获取的知识来使用,并通过相似性比较来完成分类任务,克服了词语一级自然语言处理中知识表示不足给机器学习知识获取带来的障碍.但自然语言的灵活性使MBL方法基于属性逻辑(attribute logic)的表示方法面临着较为严重的数据稀疏问题(data sparse problem),这已经成为MBL方法应用于自然语言处理的主要瓶颈.本文正是针对这一问题,提出一种通过可信距离的判别机制将信息提取领域里文档表示方法的tf.idf词语权重计算引入到MBL中的改进方法.实验证明,我们提出的方法在保持原有训练集规模的情况下使正确率得到了较大的改进.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	白硕	中国科学院计算技术研究所	50	2124	21.0	46.0
2	孙红梅	中国科学院计算技术研究所	7	167	5.0	7.0
3	鲁松	中国科学院计算技术研究所	8	383	6.0	8.0