基于延迟决策和斜率的新词识别方法

• 作者: 于中华 周伟 熊伟 郭伟 陈蓉
• 来源期刊: 四川大学学报（自然科学版）
• 学科: 工学
• 关键词: 索引 新词识别 加速度 斜率 中文分词 互信息
• 年，卷（期）: 2007,（3）
• 所属期刊栏目: 研究论文
• 页码范围: 517-520
• 页数: 4页
• 分类号: TP14
• 字数: 2871字
• 语种: 中文
• DOI: 10.3969/j.issn.0490-6756.2007.03.014

摘要

采用词典分词时会遇到未登录词的识别问题.本文提出一种新的中文新词识别方法,用于全文信息检索系统索引的建立.在索引切分过程中遇到无法切分字串时,暂存为未切分串,并生成统计信息.待未切分串达到一定数量时,再利用生成的统计信息结合斜率(加速度)的方法来切分暂存的未切分串.切分的结果可以进入索引,对于出现频率高的切分片段可以提取加入词典.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	周伟	四川大学计算机学院	117	1030	16.0	27.0
2	郭伟	四川大学计算机学院	7	9	2.0	3.0
3	于中华	四川大学计算机学院	46	444	9.0	18.0
4	陈蓉	四川大学计算机学院	23	208	8.0	14.0
5	熊伟	四川大学计算机学院	15	174	6.0	13.0