基于MapReduce的多文档自动文摘的设计与实现

• 作者: 胡琪 邹细勇
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 多文档自动文摘 MapReduce 并行计算
• 年，卷（期）: 2011,（35）
• 所属期刊栏目: 研发、设计、测试
• 页码范围: 67-70
• 分类号: TP311
• 字数: 3770字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.2011.35.020

摘要

多文档文摘是将同一主题下的多个文本描述的主要的信息按压缩比提炼为一个文本的自然语言处理技术,它可以从全局的角度对网络信息进行挖掘.在面对飞速增长的网络资源时,如何准确、高效地从海量数据源内进行自动文摘处理,是多文档自动文摘面临的主要难题之一.MapReduce是Google提出的一种分布式并行计算方法,它可以部署在任意一个普通商用计算机组成的集群上,能够有效地协调集群内各计算机的计算任务,充分利用计算机集群的处理能力,能够对海量数据进行有效的分析处理.提出了一个有效的实验模型,将MapReduce分布式并行框架应用在多文档自动文摘技术中.实验结果表明,MapReduce在保证文摘质量的前提下,能够有效地提高文摘抽取过程的处理性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	邹细勇	中国计量学院光学与电子科技学院	11	78	3.0	8.0
2	胡琪	中国计量学院光学与电子科技学院	2	13	2.0	2.0