基于Hadoop的陶瓷行业信息聚合平台设计

• 作者: 罗新
• 来源期刊: 软件导刊
• 学科: 工学
• 关键词: Hadoop Apriori 陶瓷信息系统
• 年，卷（期）: 2017,（12）
• 所属期刊栏目: 软件设计与开发
• 页码范围: 128-130,133
• 页数: 4页
• 分类号: TP319
• 字数: 1768字
• 语种: 中文
• DOI: 10.11907/rjdk.173070

摘要

在陶瓷行业信息聚合网站的基础上,通过Web日志分析可以获取网站用户的访问情况,但是随着Web服务器上日志的剧增,在单机上运行日志分析或挖掘程序变得越来越不可行.采用Hadoop并行计算平台对日志进行预处理,然后对页面访问量、用户访问量、网站流量等指标进行统计,还应用Apriori算法对日志进行挖掘,对群集在不同节点数、不同数据集以及不同最小支持度的情形下的性能进行比较.实验结果表明,在Hadoop平台上,随着集群节点的增加,大数据集处理性能会得到较大提升.应用Hadoop平台构建的日志分析平台可以为陶瓷行业信息聚合平台的管理者提供各种有价值的信息.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	罗新	韩山师范学院计算机与信息工程学院	23	46	3.0	5.0