LDA算法在Mahout下的高效实现

• 作者: 程晋 胡宁 许伯熹 陈文斌 高卫国
• 来源期刊: 华东师范大学学报（自然科学版）
• 学科: 数学
• 关键词: Latent Dirichlet Allocation Gibbs采样 Mahout 分布式并行计算 MapReduce计算框架
• 年，卷（期）: 2013,（3）
• 所属期刊栏目: 计算广告技术
• 页码范围: 118-130
• 页数: 13页
• 分类号: O211
• 字数: 2523字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-5641.2013.03.013

摘要

通过对运用Gibbs采样的Latent Dirichlet Allocation (LDA)算法和MapReduce计算框架的细致研究,实现了LDA算法在Mahout下的分布式并行计算.详细地考察了该分布式并行计算程序的计算性能,并深入地探讨了一些影响计算性能的关键问题.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陈文斌	复旦大学数学科学学院	24	87	4.0	8.0
2	高卫国	复旦大学数学科学学院	10	48	3.0	6.0
3	许伯熹	复旦大学数学科学学院	2	11	2.0	2.0
4	胡宁		1	8	1.0	1.0
5	程晋	复旦大学数学科学学院	13	39	3.0	6.0