基于并行计算的词共现衰减因子模型实现及评价

• 作者: 何丕廉 王中 郑小慎 郭兰申
• 来源期刊: 河北工业大学学报
• 学科: 工学
• 关键词: 词共现 衰减因子模型 并行计算 MPI
• 年，卷（期）: 2004,（1）
• 页码范围: 22-26
• 页数: 5页
• 分类号: TP391.1
• 字数: 3766字
• 语种: 中文
• DOI: 10.3969/j.issn.1007-2373.2004.01.005

摘要

提出并实现了一种带衰减因子的词共现模型,可以自动生成包含词与词相关性信息的资源.由于该模型考虑了词与词之间距离的概念,同普通的词共现模型相比,该模型更能准确地描述词与词之间的相关性信息.但因该模型在大规模语料处理中的计算量非常巨大而难以在传统的串行环境下实现.克服这一困难的有效方法是建立并行计算环境下的词共现模型计算模式,通过MPI并行群集环境下成功地实现了该模型的计算,取得了理想的加速比和并行效率,为中文信息处理基础资源的建设迈出了实质性的一步.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	何丕廉	天津大学电子信息学院	107	1570	21.0	35.0
2	郭兰申	河北工业大学机械工程学院	26	147	6.0	11.0
3	郑小慎	天津大学电子信息学院	4	161	4.0	4.0
4	王中	天津大学电子信息学院	2	23	2.0	2.0