基于Scrapy的番茄病虫害数据收集

• 作者: 徐郑琴
• 来源期刊: 电脑知识与技术
• 学科: 工学
• 关键词: 番茄病虫害 计算机技术 Scrapy Django 结构化存储
• 年，卷（期）: 2019,（3）
• 所属期刊栏目: 数据库与信息管理
• 页码范围: 24-25,28
• 页数: 3页
• 分类号: TP311
• 字数: 2258字
• 语种: 中文

摘要

在番茄病虫害防治中常常出现因资料分散而导致的信息获取不全或是利用效率低等问题,为此提出利用计算机技术设计一套针对开放网络上的多方数据进行收集与整理的方法.该方法基于Scrapy框架依次确定爬取对象、设计爬取流程、分析原始网页、存储相关数据,最后依托Django框架搭建可视化界面用于前端与后台的数据交互.由此实现了对各类数据的有效收集和按规则的结构化存储,为在番茄病虫害领域搭建系统、专业的知识库提供数据依据.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	徐郑琴	同济大学电子与信息工程学院	2	2	1.0	1.0