吕苏语口语标注语料的自动分词方法研究

• 作者: 于重重 尹蔚彬 张泽宇 操镭 郑雅
• 来源期刊: 计算机应用研究
• 关键词: 吕苏语 汉语标注语料 自动分词 改进结巴算法
• 年，卷（期）: 2017,（5）
• 所属期刊栏目: 算法研究探讨
• 页码范围: 1325-1328
• 页数: 4页
• 分类号: TP391.1
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2017.05.010

摘要

濒危语言典藏以抢救和长久保存濒危语言口语中所包含的声学、语言学以及文学、历史、传统文化等内涵的全部信息为目的,吕苏语作为一种无文字文献记录的濒危语言,对其口语语料典藏意义重大.吕苏语口语的汉语标注语料自动分词是后续建立高质量的吕苏语口语语料库和吕苏语典藏系统的基础性工作.目前对于吕苏语标注语料分词的研究几乎为零,对吕苏语特点进行了分析,同时将中文自动分词结巴方法应用到吕苏语汉语标注语料中;并针对结巴分词算法对吕苏语标注语料分词存在的误分词问题,提出了改进结巴算法.经过实验对比,改进结巴的分词方法准确率更高,提高了吕苏语汉语标注语料的分词效果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	于重重	北京工商大学计算机与信息工程学院	99	762	14.0	23.0
2	操镭	北京工商大学计算机与信息工程学院	2	29	2.0	2.0
3	尹蔚彬	中国社会科学院民族学与人类学研究所	17	43	3.0	6.0
4	郑雅	北京工商大学计算机与信息工程学院	4	41	3.0	4.0
5	张泽宇	北京工商大学计算机与信息工程学院	3	43	2.0	3.0