网络爬虫的专题机构数据空间信息采集方法

• 作者: 孙亚琴 杨宇 闫志刚
• 来源期刊: 测绘科学
• 学科: 工学
• 关键词: 泛在网络 空间信息采集 网络爬虫 矩阵算法 决策树
• 年，卷（期）: 2019,（7）
• 所属期刊栏目: 技术创新
• 页码范围: 122-127,140
• 页数: 7页
• 分类号: TP391
• 语种: 中文
• DOI: 10.16251/j.cnki.1009-2307.2019.07.019

摘要

针对海量专题机构数据空间信息和属性信息缺失的问题,该文使用专题机构信息网站作为信息源,以深度优先策略网络爬虫作为信息获取方法,提出了一种基于网络爬虫框架的专题机构数据空间信息采集方法.在网络爬虫方法关键功能模块中,设计了一种基于词元的字符串相似度矩阵算法来提高机构检索列表匹配准确度,并提出了一种基于决策树模式的行政区划信息识别和抽取算法用以实现地址字符串中行政区划的准确识别和提取.通过具体实现和实验测试,证明该方法能有效地实现专题机构数据空间信息和属性信息的采集,并具有较高的时间效率和准确率,可作为机构数据空间信息采集的一种有效方法.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	闫志刚	中国矿业大学环境与测绘学院	38	439	12.0	20.0
2	杨宇	中国矿业大学环境与测绘学院	21	321	9.0	17.0
3	孙亚琴	中国矿业大学环境与测绘学院	13	92	6.0	9.0