基于MapReduce的网络舆情分析系统的设计与实现

• 作者: 李戴维 黄蔚
• 来源期刊: 信息技术
• 学科: 工学
• 关键词: Hadoop 舆情分析 MapReduce 中文分词
• 年，卷（期）: 2014,（7）
• 所属期刊栏目: 应用技术
• 页码范围: 149-153
• 页数: 5页
• 分类号: TP391.1
• 字数: 3906字
• 语种: 中文

摘要

设计并实现了一个基于MapReduce的网络舆情分析系统.系统采用HDFS和HBase双存储机制存储数据.通过实验分析与效果比对,选用MMSeg4j为系统进行中文分词.改进了Canopy-Kmeans算法实现文本自动聚类,提高了系统的聚类准确度及效率.目前,该系统已应用于某部队舆情分析系统中,能够实时发现热点话题、准确把握舆情趋势,为应对舆论危机、制定舆论政策提供了科学系统的信息支持.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	李戴维	华北计算技术研究所信息技术应用系统部	4	80	4.0	4.0
2	黄蔚	华北计算技术研究所信息技术应用系统部	13	47	4.0	6.0