基于Flume的分布式日志聚合系统的研究
作者机构:湖北工业大学湖北武汉430068
出 版 物:《科技视界》 (Science & Technology Vision)
年 卷 期:2017年第11期
页 面:77-77,114页
学科分类:08[工学] 081201[工学-计算机系统结构] 0812[工学-计算机科学与技术(可授工学、理学学位)]
主 题:日志采集 Flume Elasticsearch Kibana
摘 要:互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;本文结合使用Flume、Elasticsearch以及Kibana等技术手段提出了一种分布式的日志采集分析系统,从系统设计和架构等方面提出了新的解决思路,并针对Flume的访问日志进行了实时采集和分析及展示。