社区网络爬虫的设计与实现

• 作者: 郭涛 黄铭钧
• 来源期刊: 智能计算机与应用
• 学科: 工学
• 关键词: 社区互联网 智能爬虫 数据挖掘
• 年，卷（期）: 2012,（4）
• 页码范围: 65-67
• 分类号: TP31
• 字数: 3318字
• 语种: 中文
• DOI: 10.3969/j.issn.2095-2163.2012.04.017

摘要

社区互联网是以用户创造内容为主的新型互联网,具有很高的统计价值,由于权限和数据更新频繁等限制,传统的网络爬虫很难获取这一部分数据,设计并实现了一种可以自动登录并可以根据更新频率快慢智能抓取数据的爬虫,不同于以往爬虫以页面为粒度,该爬虫以人为最小粒度,并以人与人之间的关系为抓取依据,在获取这类数据上有很好的性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郭涛	哈尔滨工业大学计算机科学与技术学院	14	39	4.0	5.0
2	黄铭钧	哈尔滨工业大学计算机科学与技术学院	1	10	1.0	1.0