基于条件随机场与信息熵的特定领域概念发现

• 作者: 万静 付瑶 邢立栋
• 来源期刊: 计算机应用研究
• 关键词: 概念识别 新概念发现 条件随机场 信息熵 特定领域
• 年，卷（期）: 2020,（3）
• 所属期刊栏目: 算法研究探讨
• 页码范围: 708-711,730
• 页数: 5页
• 分类号: TP301.6
• 语种: 中文
• DOI: 10.19734/j.issn.1001-3695.2018.08.0623

摘要

针对特定领域内自动化识别既有概念和发现新概念的问题,提出一种基于条件随机场和信息熵的抽取方法.通过使用条件随机场对文本中的概念词进行边界预测,与词典中的概念对比,筛选出新概念的候选项并找出其大概位置,然后由互信息和左右熵分别判断概念窗口内的概念内部结合度和概念边界自由度,从而发现新的专业概念.实验表明,使用该方法进行概念发现比单独使用条件随机场的方法有更好的效果,基于字和词的模型概念发现的准确率分别提升了20.06％和46.54％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	万静	北京化工大学信息科学与技术学院	23	66	4.0	7.0
2	付瑶	北京化工大学信息科学与技术学院	6	18	2.0	4.0
3	邢立栋	中国科学院自动化研究所	1	0	0.0	0.0