一种分布式用户浏览点击模型算法

• 作者: 张士波 张浩盛伦 李翀 柯勇
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 点击日志 点击模型 用户浏览点击模型算法 搜索引擎 Spark平台
• 年，卷（期）: 2019,（3）
• 所属期刊栏目: 云计算与大数据专题
• 页码范围: 1-6
• 页数: 6页
• 分类号: TP391
• 字数: 3912字
• 语种: 中文
• DOI: 10.19678/j.issn.1000-3428.0050119

摘要

为从海量搜索点击日志中快速挖掘用户行为, 提出一种分布式用户浏览点击模型 (UBM) 算法.原始UBM算法求出的检验度参数E只与搜索结果文档所在排序位置以及上一文档的点击位置有关, 且非常稳定, 基于此特性, 将EM迭代求解转换为抽样估计检验度以求解吸引度的分布式UBM算法.在Spark数据平台上进行仿真, 结果表明, 与原始UBM算法相比, 该算法能够解决点击日志中存在的严重数据倾斜问题, 且运行效率较高.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	李翀	中国科学院计算机网络信息中心	31	119	6.0	8.0
2	柯勇	中国科学院计算机网络信息中心	2	9	2.0	2.0
3	张士波	中国科学院计算机网络信息中心	3	24	2.0	3.0
4	张浩盛伦	中国科学院计算机网络信息中心	1	4	1.0	1.0