基于自动化测试的定向网络爬虫的设计与实现

• 作者: 吴锦晶 朱丽英
• 来源期刊: 微型电脑应用
• 学科: 工学
• 关键词: 网络爬虫 自动化测试 Selenium 车辆品牌
• 年，卷（期）: 2019,（10）
• 所属期刊栏目: 基金项目
• 页码范围: 8-10
• 页数: 3页
• 分类号: TP311
• 字数: 2294字
• 语种: 中文

摘要

为了快速地获取精准的车辆品牌对应图片数据,提出了一种基于自动化测试的定向网络爬虫程序设计方法.通过自动化测试技术模拟人浏览网页的方式,自动采集指定网页的车辆品牌外观图片,按品牌、款系、年代分类别存储,引入了增量更新爬虫策略,提高了爬行效率.利用该爬虫对汽车之家产品库进行车辆品牌图片爬取,取得了较好的效果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	朱丽英	公安部第三研究所物联网技术研发中心	3	20	2.0	3.0
2	吴锦晶	公安部第三研究所物联网技术研发中心	3	2	1.0	1.0