大数据处理平台性能优化探究

• 作者: 李天卓 杨新凯 杨超 魏宾宾
• 来源期刊: 电信快报
• 关键词: 大数据 Spark Hadoop Kylin 性能优化
• 年，卷（期）: 2018,（10）
• 所属期刊栏目: 论文选粹
• 页码范围: 22-27
• 页数: 6页
• 字数: 4451字
• 语种: 中文
• DOI: 10.3969/j.issn.1006-1339.2018.10.006

摘要

大数据平台的运用为通信行业带来了快速、高效的数据处理解决方案,可以提高公司内部相关资源的复用性.对这些数据进行有效的分析处理,可以促进相关产品的研发、维护,对产品不断进行完善,提高工作效率,增加公司收益.结合某运营商实际基站数据,对Hive、Spark及Kylin几个海量数据处理平台进行基准性能测试,总结出这几个海量数据处理平台的特点和差异,进而得出几个数据处理平台所适应的业务情景,并探讨对查询性能有影响的因素.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	杨超		7	85	3.0	7.0
2	杨新凯		16	40	3.0	6.0
3	李天卓		3	1	1.0	1.0
4	魏宾宾		1	1	1.0	1.0