基于大数据的IT人才需求信息爬取方法与实现

• 作者: 金华
• 来源期刊: 信息与电脑
• 关键词: IT培训需求 大数据 Python方法
• 年，卷（期）: 2021,（4）
• 所属期刊栏目: 信息化教育
• 页码范围: 238-241
• 页数: 4页
• 分类号: TP393.092
• 语种: 中文
• DOI: 10.3969/j.issn.1003-9767.2021.04.081

摘要

随着IT技术的快速发展,企业对IT人才提出了更高的要求.为了向广大企业提供更好的培训服务,笔者介绍了基于Python语言的IT人才需求信息爬取和可视化分析系统.该系统基于Scrapy框架,精准地从各大招聘网站上获取大量的人才招聘信息,采用Numpy、Pandas、Matplotlib和分词技术,以大数据可视化的方式形象地从多个维度展示了广大企业对IT人才的需求特征.上海浦东软件园在编制IT培训教材时,参考了该系统的数据分析结果,得到广大企业和培训学生的一致好评.