Spark平台下基于聚类挖掘的影视资源智能推荐

• 作者: 张敏 程鹏翔
• 来源期刊: 信息技术
• 关键词: 智能推荐 邻近传播聚类 Spark架构 分布式数据集 相似性度量
• 年，卷（期）: 2021,（9）
• 所属期刊栏目: 基金项目|FUND PROJECT
• 页码范围: 30-33,38
• 页数: 5页
• 分类号: TP391
• 语种: 中文
• DOI: 10.13274/j.cnki.hdzj.2021.09.006

摘要

为了从海量的网络影视资源中快速准确地向用户推荐其感兴趣的视频,提出了一种Spark平台下基于邻近传播(AP)聚类的智能推荐方案.数据存储采用了分布式文件系统,并在弹性分布式数据集中采用AP聚类进行资源实时推荐,加快聚类速度.此外,将明可夫斯基(Minkowski)相似性度量引入到AP聚类中,替换原有的欧氏距离度量来构建相似度,以提高其聚类精度.在常用电影数据集MovieLens上进行实验验证.结果表明,Spark平台有效提升了聚类计算的效率.同时,相比于AP聚类和K-均值聚类算法,改进AP聚类的推荐准确率更高.