一种字母词语自动标注算法

• 作者: 郑泽芝
• 来源期刊: 厦门大学学报（自然科学版）
• 学科: 工学
• 关键词: 字母词语 搭配系数 自动标注
• 年，卷（期）: 2007,（5）
• 所属期刊栏目: 研究论文
• 页码范围: 630-634
• 页数: 5页
• 分类号: TP391.1
• 字数: 5470字
• 语种: 中文
• DOI: 10.3321/j.issn:0438-0479.2007.05.009

摘要

自动分词是中文信息处理的基础,而未登录词识别是影响分词系统准确率的最主要的因素.字母词语作为中文信息处理中的一类未登录词语,现有的分词软件仍不能有效识别.为此设计了一个规则+统计的自动标注算法,该算法首先对原文本进行扫描,依据字母串正则表达式取得合法的字母串;再以字母串为锚点,往两边扫描,依次调用前后界规则、汉字组成成分规则、例外校正规则,结合搭配概率矩阵对字母词语进行识别和标注.实验结果表明:该算法的召回率为100%,准确率约为92%.该算法不仅对中文自动分词有益,而且所开发的软件可用于建设字母词语知识库和对字母词语语言现象的考察研究.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郑泽芝	厦门大学中国语言文学系	14	49	3.0	6.0