基本信息来源于合作网站,原文需代理用户跳转至来源网站获取       
摘要:
基于ELK在智慧运维大数据分析平台实现海量数据分析,对ELK的部署结构进行优化,并在日志采集和日志处理中间增加Kafka消息处理队列,减轻Logstash压力,增加集群高可用性.通过Logstash的Filter插件利用正则表达式实现日志数据拆分,将拆分后的字段在Elasticsearch中存储,最终利用Kibana对日志数据进行搜索、绘图和展示.使用基于ELK的智慧运维大数据平台解决了运维过程中日志采集、日志处理、日志可视化问题,同时在数据处理上实现了接近1s的延迟搜索.
推荐文章
基于大数据分析技术的旅游智慧平台设计
旅游智慧平台
平台设计
大数据分析
信息挖掘
路线推荐
对比实验
基于大数据分析技术的智慧教育平台设计
教育平台设计
智慧教育
课程管理
大数据分析
在线学习
教育资源存储
智慧电梯大数据平台研究
智慧电梯
大数据平台
物联网
GIS网格化
网关
电梯运维
基于大数据的教育智慧平台的设计与实现
大数据
教育智慧平台
自主学习
多特征融合
关联分析技术
学生成绩预警
内容分析
关键词云
关键词热度
相关文献总数  
(/次)
(/年)
文献信息
篇名 基于ELK+Kafka的智慧运维大数据分析平台研究与实现
来源期刊 软件导刊 学科 工学
关键词 ELK Kafka 日志分析 大数据 流式数据
年,卷(期) 2020,(6) 所属期刊栏目 软件设计、开发与应用
研究方向 页码范围 150-154
页数 5页 分类号 TP319
字数 4127字 语种 中文
DOI 10.11907/rjdk.192248
五维指标
作者信息
序号 姓名 单位 发文数 被引次数 H指数 G指数
1 阮晓龙 河南中医药大学信息技术学院 46 77 5.0 6.0
2 贺路路 1 0 0.0 0.0
传播情况
(/次)
(/年)
引文网络
引文网络
二级参考文献  (82)
共引文献  (35)
参考文献  (18)
节点文献
引证文献  (0)
同被引文献  (0)
二级引证文献  (0)
2000(1)
  • 参考文献(0)
  • 二级参考文献(1)
2001(1)
  • 参考文献(0)
  • 二级参考文献(1)
2003(2)
  • 参考文献(0)
  • 二级参考文献(2)
2004(1)
  • 参考文献(0)
  • 二级参考文献(1)
2005(1)
  • 参考文献(0)
  • 二级参考文献(1)
2007(1)
  • 参考文献(0)
  • 二级参考文献(1)
2008(3)
  • 参考文献(0)
  • 二级参考文献(3)
2009(1)
  • 参考文献(0)
  • 二级参考文献(1)
2010(2)
  • 参考文献(0)
  • 二级参考文献(2)
2011(2)
  • 参考文献(0)
  • 二级参考文献(2)
2012(1)
  • 参考文献(0)
  • 二级参考文献(1)
2013(7)
  • 参考文献(0)
  • 二级参考文献(7)
2014(8)
  • 参考文献(0)
  • 二级参考文献(8)
2015(11)
  • 参考文献(1)
  • 二级参考文献(10)
2016(15)
  • 参考文献(3)
  • 二级参考文献(12)
2017(20)
  • 参考文献(2)
  • 二级参考文献(18)
2018(19)
  • 参考文献(9)
  • 二级参考文献(10)
2019(4)
  • 参考文献(3)
  • 二级参考文献(1)
2020(0)
  • 参考文献(0)
  • 二级参考文献(0)
  • 引证文献(0)
  • 二级引证文献(0)
研究主题发展历程
节点文献
ELK
Kafka
日志分析
大数据
流式数据
研究起点
研究来源
研究分支
研究去脉
引文网络交叉学科
相关学者/机构
期刊影响力
软件导刊
月刊
1672-7800
42-1671/TP
16开
湖北省武汉市
38-431
2002
chi
出版文献量(篇)
9809
总下载数(次)
57
论文1v1指导