基于Python的网页数据分析及可视化应用

• 作者: 李传科 肖自乾
• 来源期刊: 信息记录材料
• 学科: 工学
• 关键词: Python 网络爬虫 数据分析 jieba分词 可视化
• 年，卷（期）: 2021,（9）
• 所属期刊栏目: 记录:数据与存储
• 页码范围: 203-205
• 页数: 3页
• 分类号: TP311
• 语种: 中文

摘要

随着互联网平台的大量应用,各种网络数据呈现出多、杂、乱等现象,如何高效地获取有效网络数据问题显得尤为突出.本文基于Python语言,使用Scrapy网络爬虫框架实现网页信息的抓取,进而针对数据进行Pandas数据处理和jieba分词统计分析出有效数据,并使用Matplotlib和Pyecharts可视化工具展现出分析数据,便于人们快速掌握网络信息中的有效数据.