基于数据流和点对点网络的分布式推荐算法

• 作者: 丛义昊 于艳华
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 在线矩阵分解 流计算 分布式协同过滤 点对点网络
• 年，卷（期）: 2019,（1）
• 所属期刊栏目: 大数据与云计算
• 页码范围: 64-69,148
• 页数: 7页
• 分类号: TP301.6
• 字数: 6565字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1710-0160

摘要

推荐算法是数据挖掘中应用最广泛的算法之一,目前的推荐算法主要是针对静态数据的,缺乏对动态数据的适应性,基于数据流的推荐算法是解决这一问题的方法.针对目前在分布式平台中采用参数服务器控制模型训练存在的滞后梯度和掉队者问题,提出了一种新的使用点对点参数交换网络代替参数服务器的方法,并在训练过程中引入遗忘策略和异常评分检测能力.在新的分布式流计算框架Flink上进行设计实现,并在经典的MovieLens-1m数据集上进行了实验.实验结果表明,该算法能够在保证推荐准确率的同时,降低一半通讯开销.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	于艳华	北京邮电大学计算机学院	10	127	6.0	10.0
2	丛义昊	北京邮电大学计算机学院	1	2	1.0	1.0