基于Scrapy的异构平台数据抓取与分析

• 作者: 周坤
• 来源期刊: 百科论坛电子杂志
• 关键词: 异构数据 爬虫 主成分分析
• 年，卷（期）: 2020,（16）
• 所属期刊栏目: 技术创新
• 页码范围: 86
• 页数: 1页
• 语种: 中文
• DOI: 10.12253/j.issn.2096-3661.2020.16.137

摘要

本文分析了当前疫情环境下的教学模式转变,并就其在线教学部分中针对课程质量和教学评价方面的困难与不足进行了深入探讨,通过成熟的Scrapy网络爬虫框架,解决了在线教学过程分析与课程评价中"多课程多平台"的异构数据采集的难题,利用主成分分析法,提取出最影响学生学习成果的几个学习因素,为教师和学生提供直观的学习情况和教学情况分析结果.