基于网络爬虫的水利信息检索系统的设计与实现

• 作者: 周逸徉 巫义锐 黄多辉
• 来源期刊: 水利信息化
• 学科: 工学
• 关键词: 水利信息化 信息检索 网络爬虫 主题爬虫
• 年，卷（期）: 2017,（4）
• 所属期刊栏目: 水利大数据
• 页码范围: 36-41
• 页数: 6页
• 分类号: TP391|TV21
• 字数: 4919字
• 语种: 中文
• DOI: 10.19364/j.1674-9405.2017.04.007

摘要

随着水利信息化进程的快速发展,与水利信息相关的互联网资源不断增多,面对如此巨量和复杂形式的水利信息数据,依靠人工检索、分析的方式已难以满足行业应用的需求.随着大数据信息技术的逐步深入研究,设计与实现可应用于水利信息获取的网络爬虫,成为解决水利信息检索与分析问题的基础.设计应用主题网络爬虫技术的水利信息检索系统,通过水利主题信息爬取,数据格式转化与整理,规范化写入数据库等步骤,实现网络水利数据到格式化数据库数据的自动转化.该系统的实现为多数据源信息的交叉验证与网络应急数据的获取,提供新的思路与可行方案.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	黄多辉	河海大学计算机与信息学院	2	3	1.0	1.0
2	巫义锐	河海大学计算机与信息学院	2	3	1.0	1.0
6	周逸徉	南京大学计算机软件新技术国家重点实验室	1	3	1.0	1.0