检索结果-南通市图书馆

电子设计工程 2017年第19期25卷 50-55页

作者：周德永王瑞刚梁小江西安邮电大学陕西西安710061 陕西省信息化工程研究院陕西西安710061

针对Docker容器集群中日志的收集和集中处理的问题。本文采用Docker Swarm和Etcd实现容器的管理、服务发现以及调度,并为分布式系统提供支撑。使用主流的开源日志收集系统elk,并结合分布式消息队列redis部署实时消息自动化系统,能够快... 详细信息

针对Docker容器集群中日志的收集和集中处理的问题。本文采用Docker Swarm和Etcd实现容器的管理、服务发现以及调度,并为分布式系统提供支撑。使用主流的开源日志收集系统elk,并结合分布式消息队列redis部署实时消息自动化系统,能够快速、实时地收集应用日志,提高运维人员的工作效率。详细介绍了Docker、elk、Docker Swarm和Etcd的功能及原理,最后通过使用容器编排工具docker-compose,一键式构建基于Docker容器的elk日志收集系统的实验环境,证明了本系统收集Docker容器日志的实时性、稳定性和高可用性。

关键词： Docker集群 Docker Swain Etcd elk 自动化分布式

在线全文

学校读者我要写书评

暂无评论

一种用于集群系统的改进elk日志分析方法

中国新通信 2019年第15期21卷 57-59页

作者：陈成中国电信上海公司互联网部

随着互联网的不断发展,大量Web服务运行在公网上,业务的运行质量、服务能力直接关系到用户体验和公司发展,而安全方面更是与企业乃至国家的形象息息相关。本文阐述了日志分析对于系统运行安全的重要性及存在的困难,并提出了基于elk架构... 详细信息

随着互联网的不断发展,大量Web服务运行在公网上,业务的运行质量、服务能力直接关系到用户体验和公司发展,而安全方面更是与企业乃至国家的形象息息相关。本文阐述了日志分析对于系统运行安全的重要性及存在的困难,并提出了基于elk架构日志分析系统的搭建思路与实践方案,对该日志系统进行功能测试和性能测试,结果表明新增的日志收集模块和日志分析与告警模块提高了整体系统的性能,并证明了该系统在处理海量日志方面具有一定的优势。

关键词：日志分析 elk Web

一种基于elk的安全防护日志管理系统设计与实现

在线全文

学校读者我要写书评

暂无评论

机电信息 2019年第29期 123-125页

作者：张延盛中国移动通信集团江苏有限公司

随着网络安全设备的不断增加和业务的快速发展,安全防护日志已成为一类海量数据,对安全日志进行统一存储和分析已成为电信运营商亟需解决的问题。现设计并实现了一种基于elk的安全防护日志管理系统,通过合理设计系统架构,完成了整个分... 详细信息

随着网络安全设备的不断增加和业务的快速发展,安全防护日志已成为一类海量数据,对安全日志进行统一存储和分析已成为电信运营商亟需解决的问题。现设计并实现了一种基于elk的安全防护日志管理系统,通过合理设计系统架构,完成了整个分布式处理分析系统的搭建,实现了安全日志的统一管理和数据挖掘分析。该系统可有效提高运维效率,降低维护管理成本,能较好支撑安全事件主动预警、网络安全感知等工作。

关键词：安全防护 elk 日志采集日志分析

在线全文

学校读者我要写书评

暂无评论

基于elk的日志管理与分析平台实践

金融科技时代 2022年第1期30卷 59-62页

作者：珠海华润银行日志管理与分析平台课题组杨京健不详

信息系统包含众多软硬件设备,这些设备每时每刻都在产生大量的日志。作为最重要的数据系统之一,当前日志IT系统通过传统的日志检索手段已经无法满足低成本、高效率的运维需求。基于此,本文介绍了基于elk的日志管理与分析平台。实践证明,... 详细信息

信息系统包含众多软硬件设备,这些设备每时每刻都在产生大量的日志。作为最重要的数据系统之一,当前日志IT系统通过传统的日志检索手段已经无法满足低成本、高效率的运维需求。基于此,本文介绍了基于elk的日志管理与分析平台。实践证明,以elk组件为架构中心搭建一个高效的统一日志管理平台,可以帮助企业缩短IT软硬件故障发现和定位的时间,提升系统可用率和安全性,提高业务连续性能力。

关键词：日志管理 elk 批处理大数据业务连续性

基于elk+Kafka的智慧运维大数据分析平台研究与实现

在线全文

学校读者我要写书评

暂无评论

软件导刊 2020年第6期19卷 150-154页

作者：阮晓龙贺路路河南中医药大学信息技术学院河南郑州450046 郑州祺石信息技术有限公司河南郑州450001

基于elk在智慧运维大数据分析平台实现海量数据分析,对elk的部署结构进行优化,并在日志采集和日志处理中间增加Kafka消息处理队列,减轻Logstash压力,增加集群高可用性。通过Logstash的Filter插件利用正则表达式实现日志数据拆分,将拆分... 详细信息

基于elk在智慧运维大数据分析平台实现海量数据分析,对elk的部署结构进行优化,并在日志采集和日志处理中间增加Kafka消息处理队列,减轻Logstash压力,增加集群高可用性。通过Logstash的Filter插件利用正则表达式实现日志数据拆分,将拆分后的字段在Elasticsearch中存储,最终利用Kibana对日志数据进行搜索、绘图和展示。使用基于elk的智慧运维大数据平台解决了运维过程中日志采集、日志处理、日志可视化问题,同时在数据处理上实现了接近1s的延迟搜索。

关键词： elk Kafka 日志分析大数据流式数据

基于elk组件的日志系统在地震行业中的应用

在线全文

学校读者我要写书评

暂无评论

地震科学进展 2023年第12期53卷 576-580页

作者：边鹏飞郝丽河北省地震局河北石家庄050021

网络设备、网络安全设备以及业务应用系统的日志在网络运维中是排除设备系统故障的一个重要数据资源。然而大量日志数据分散存储在不同的设备中,不便于查看和使用,难以满足网络运维中快速发现问题、定位问题和解决问题的要求。因此,为... 详细信息

网络设备、网络安全设备以及业务应用系统的日志在网络运维中是排除设备系统故障的一个重要数据资源。然而大量日志数据分散存储在不同的设备中,不便于查看和使用,难以满足网络运维中快速发现问题、定位问题和解决问题的要求。因此,为了提高业务人员的网络运维能力,建设一个统一的日志收集、存储、处理系统很有必要。本文介绍了一套以elk开源组件搭建的日志系统,并在地震行业网中进行了实际应用,实现了地震行业网内业务系统、安全设备、网络设备等日志的实时收集、存储、处理和展示功能。对实现细节进行了详细阐述,为该架构的推广应用提供了典型示范。

关键词：网络运维 elk 日志系统地震

维普期刊数据库博看期刊

Wonderware工厂智能化解决方案增强elk的工厂运作的管理水平

在线全文

学校读者我要写书评

暂无评论

可编程控制器与工厂自动化（PLC FA） 2004年第7期 19-20页

维普期刊数据库评论

在线全文

维普期刊数据库

学校读者我要写书评

暂无评论

基于elk的用户访问行为分析技术

气象科技进展 2018年第1期8卷 181-185页

作者：陈楠陈东辉邓莉国家气象信息中心北京100081

针对国家气象业务内网用户访问行为记录,基于elk(Elasticsearch日志检索+Logstash日志收集+Kibana查询展示)流量日志处理技术,建立了气象业务内网日志采集和智能分析系统,实现了对访问用户的行为跟踪和针对不同类别用户的访问热点分析... 详细信息

针对国家气象业务内网用户访问行为记录,基于elk(Elasticsearch日志检索+Logstash日志收集+Kibana查询展示)流量日志处理技术,建立了气象业务内网日志采集和智能分析系统,实现了对访问用户的行为跟踪和针对不同类别用户的访问热点分析、趋势分析和对比分析,通过对单个页面停留时间、点击流、相关点击量等指标结合关联、聚类分析等数据挖掘算法实现对网站流量日志的深度分析,为建设更加专业和有针对性的气象大数据服务平台提供参考。通过在国家气象业务内网建设中的应用,证明该系统有助于发掘共享用户的真正需求,对全面提升精细化、专业化气象数据服务能力有积极的作用。

关键词：网站分析 elk 用户行为分析气象服务

系统日志故障预测中的elk与LSTM应用与实践

在线全文

学校读者我要写书评

暂无评论

计算机系统应用 2020年第7期29卷 264-267页

作者：徐志斌叶晗王晗郜义浩北京市首都公路发展集团有限公司北京100161 北京云星宇交通科技股份有限公司北京100078

随着业务系统规模不断扩大,系统结构也变得十分复杂,常规基于规则的方法已经很难判断多个系统相互作用下的复合型故障,也难以对潜在故障进行预测.本文在多业务系统的复杂场景下,使用elk平台对日志进行集中化管理,梳理出复杂系统环境下... 详细信息

随着业务系统规模不断扩大,系统结构也变得十分复杂,常规基于规则的方法已经很难判断多个系统相互作用下的复合型故障,也难以对潜在故障进行预测.本文在多业务系统的复杂场景下,使用elk平台对日志进行集中化管理,梳理出复杂系统环境下日志与各业务系统、主机、进程之间的关系,筛选出系统中直接与故障相关的日志文件,进而在深度学习框架TensorFlow中使用这些海量数据对LSTM算法模型进行训练,从而实现对系统的实时故障预测.

关键词： elk LSTM 故障预测深度学习 TensorFlow