一种基于RabbitMQ的论坛舆情爬取方案及实现

• 作者: 冯扬
• 来源期刊: 网络安全技术与应用
• 关键词: RabbitMQ 网络舆情 分布式爬虫 多线程 爬虫策略 消息确认 心跳检测 队列管理
• 年，卷（期）: 2018,（10）
• 所属期刊栏目: 安全模型、算法与编程
• 页码范围: 47-48
• 页数: 2页
• 字数: 1967字
• 语种: 中文
• DOI: 10.3969/j.issn.1009-6833.2018.10.028

摘要

随着互联技术的普及和应用,网民在互联网上进行意见表达的需求日益增多,而各大网络论坛也早已成为资讯传播与意见讨论的公共平台.对于各种社会事件的发酵与舆情传播,网络论坛早已是不可或缺的媒体工具之一.本系统基于对网络论坛舆情监控的需求,基于RabbitMQ队列管理服务,实现了一种高并发,高鲁棒性的系统后台爬虫方案,有针对性的对舆情信息进行爬取搜集,为后续分析系统提供可靠的第一手数据.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	冯扬		1	0	0.0	0.0