基于笔画中文字向量模型设计与研究

• 作者: 俞敬松 林杰 赵浩新
• 来源期刊: 中文信息学报
• 学科: 工学
• 关键词: 字向量 笔画 连续词袋模型
• 年，卷（期）: 2019,（5）
• 所属期刊栏目: 语言分析与计算
• 页码范围: 17-23
• 页数: 7页
• 分类号: TP391
• 字数: 4680字
• 语种: 中文

摘要

中文汉字在横向、纵向展开具有二维的复杂结构.现有的中文词向量研究大都止步于汉字字符,没有利用中文笔画序列生成字向量,且受限于统计模型本质,无法为低频、未登录字词生成高质量向量表示.为此,该文提出了一种依靠中文笔画序列生成字向量的模型Stroke2Vec,扩展Word2Vec模型CBOW结构,使用卷积神经网络替换上下文信息矩阵、词向量矩阵,引入注意力机制,旨在模拟笔画构造汉字的规律,通过笔画直接生成字向量.将Stroke2Vec模型与Word2Vec、GloVe模型在命名实体识别任务上进行评测对比.实验结果显示,Stroke2Vec模型F1值达到81.49％,优于Word2Vec 1.21％,略优于GloVe模型0.21％,而Stroke2Vec产生的字向量结合Word2Vec模型结果,在NER上F1值为81.55％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	林杰	中国人民大学信息学院	14	29	4.0	5.0
2	俞敬松	北京大学软件与微电子学院	14	43	3.0	6.0
3	赵浩新	北京大学软件与微电子学院	1	4	1.0	1.0