基于Python的豆瓣网站数据爬取与分析

• 作者: 杨明昕 汪心瀛 简悦
• 来源期刊: 电脑知识与技术:学术版
• 学科: 教育
• 关键词: PYTHON 网络爬虫 数据采集 数据分析 可视化
• 年，卷（期）: 2020,（32）
• 页码范围: 51-53
• 页数: 3页
• 分类号: G642

摘要

大数据时代,随着社交网络的发展,社会媒体数据量呈现指数级增长。通过基于Python的网络爬虫程序爬取豆瓣网站的有关数据,使用非关系型数据库MongoDB存储数据,并利用Matplotlib和PyEcharts对爬取结果进行了可视化分析。对豆瓣电影和图书Top250排行榜的数据进行可视化分析,可以了解作品排名、评分、年份、地区和导演及作家的分布情况,从而分析得出数据之间的相关性和文化产业的发展趋势。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杨明昕	大连外国语大学软件学院	5	0	0.0	0.0
2	简悦	大连外国语大学软件学院	4	0	0.0	0.0
3	汪心瀛	大连外国语大学软件学院	2	0	0.0	0.0