一种基于层叠CRF的古文断句与句读标记方法

• 作者: 周卫东 张合 杨建宇 王晓东
• 来源期刊: 计算机应用研究
• 关键词: 古汉语 层叠条件随机场 数据稀疏 断句 句读标注
• 年，卷（期）: 2009,（9）
• 所属期刊栏目: 算法研究探讨
• 页码范围: 3326-3329
• 页数: 4页
• 分类号: TP391
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2009.09.036

摘要

针对利用自然语言理解技术进行古汉语断句及句读标注的主要挑战是数据稀疏问题,设计了一种六字位标记集,提出了一种基于层叠式CRF模型的古文断句与句读标记方法.基于六字位标集,低层模型用观察序列确定句子边界,高层模型同时使用观察序列和低层的句子边界信息进行句读标记.实验在5M混合古文语料上分别进行了封闭测试和开放测试,封闭测试断句与句读标注的F值分别达到96.48%和91.35%,开放测试断句与句读标注的F值分别达到71.42%和67.67%.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王晓东	河南师范大学计算机与信息技术学院	58	405	11.0	17.0
2	张合	河南师范大学计算机与信息技术学院	9	52	3.0	7.0
3	杨建宇		1	7	1.0	1.0
4	周卫东	北京交通大学信息所	4	45	3.0	4.0