基于网络爬虫和改进的LCS算法的网站更新监测

• 作者: 周孝锞 郭克华
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: 网络爬虫 网页去噪 网站订阅 文本对比 更新监测
• 年，卷（期）: 2017,（1）
• 所属期刊栏目: 算法
• 页码范围: 222-229
• 页数: 8页
• 分类号: TP391
• 字数: 6021字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2017.01.041

摘要

互联网时代,信息爆炸式增长,用户需要方便及时地获取自己所需的信息.传统的搜索引擎和以RSS为代表的订阅具有一些缺陷,难以满足用户高质量需求.在此基础上,利用网络爬虫和文本对比,提出一种新型网站更新监测与订阅的通用方法.该方法将先后抓取的网页内容分析处理后,进行文本对比,检测更新内容,将结果以结构化形式返回给用户查看.实验表明,该方法解决了RSS订阅受订阅源限制的缺点,实现了用户添加任意网站,在高校、企业、新闻、电影、博客、论坛等网站的监测方面具有较好的效果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郭克华	中南大学信息科学与工程学院	22	96	6.0	8.0
3	周孝锞	中南大学信息科学与工程学院	1	3	1.0	1.0