面向网络论坛的文本数据获取与存储方法研究

• 作者: 曹惠茹 成海秀 连松耀 王毅
• 来源期刊: 现代信息科技
• 关键词: 网络论坛 文本数据 数据获取 数据存储
• 年，卷（期）: 2021,（1）
• 所属期刊栏目: 信息技术|Information Technology
• 页码范围: 7-12
• 页数: 6页
• 分类号: TP391.1
• 语种: 中文
• DOI: 10.19850/j.cnki.2096-4706.2021.01.002

摘要

针对网络论坛文本数据的特点与网络论坛的结构,提出了一种网络论坛文本数据获取与存储方法.先采用Browser/Server架构云构建网络论坛数据系统框架,再依托网络爬虫技术实现对网络论坛数据的收集,然后基于Bi-LSTM网络搭建主题相关性文本数据过滤系统,最后采用MySQL和MongoDB数据库,构建数据存储方案.系统设计表明所提出的方法可行,为网络论坛舆情的研究与引导提供了依据.