百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

日志分析平台——ELK安装配置(elk日志解析)

liuian 2025-06-24 15:18 4 浏览

简介:ELK是(Elasticsearch、Logstash、Kibana)三个软件的集合简称。那么这三个软件分别扮演着一个什么样的角色呢?

Elasticsearch:搜索引擎,主要任务是将日志索引并进行存储。

Logstash:通俗来讲就是一个中间者,负责将日志进行收集、过滤并转发,转发给谁呢?在没有特殊配置的情况下转发给Elasticsearch进行处理。

Kibana:可视化展示工具,我们通过web界面可以查看到它将es的数据很美观的展示给客户。

开始部署:

一、安装jdk1.8

下载好jdk包后上传到目录下,我这里是直接上传到/usr/java下解压即可。

如果没有目录,执行命令新建目录:mkdir /usr/java -p

执行如下命令让环境变量生效:source /etc/profile

执行如下命令查看java版本信息:java -version

二、下载ELK安装包

wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.3.0.tar.gz
wget https://artifacts.elastic.co/downloads/logstash/logstash-5.3.0.tar.gz
wget https://artifacts.elastic.co/downloads/kibana/kibana-5.3.0-linux-x86_64.tar.gz

下载后如下图所示:

(一)安装elasticsearch

1、首先解压es安装包,然后将其mv到/usr/local/elasticsearch/下命令如下:

tar -xzf elasticsearch-5.3.0.tar.gz
mv elasticsearch-5.3.0 /usr/local/elasticsearch/

2、修改elasticsearch.yml配置文件,设置监听地址为network.hosts:0.0.0.0

3、创建elk用户,并赋予权限,用elk用户启动es,命令如下:

useradd elk ##创建用户
chown -R elk:elk /usr/local/elasticsearch/ ##赋予elk属主属组权
su – elk ##切换用户
/usr/local/elasticsearch/bin/elasticsearch –d ##后台启动es

可以查看日志或者ps进程是否启动成功,如下图所示:

(二)安装Elasticsearch插件

1、首先安装ES HEAD插件,命令如下:

下载head

git clone git://github.com/mobz/elasticsearch-head.git

由于head是基于nodejs的所以我们还需要安装nodejs

获取nodejs 资源

curl --silent --location https://rpm.nodesource.com/setup_5.x | bash -
yum -y install nodejs npm

配置registry代理,不然下面的操作会卡住不动。

npm config set registry https://registry.npm.taobao.org
npm install grunt-cli
npm install grunt

(三)安装配置Kibana

同上,先解压。

tar -xzf kibana-5.3.0-linux-x86_64.tar.gz

mv kibana-5.3.0-linux-x86_64 /usr/local/kibana/

修改kibana配置文件信息,设置ES地址:

vim /usr/local/kibana/config/kibana.yml

(四)安装配置Logstash

同上,先解压。

tar xzf logstash-5.3.0.tar.gz
mv logstash-5.3.0 /usr/local/logstash/

创建配置文件:vim logstash.conf,如下图所示:

启动logstash,命令如下:

/usr/local/logstash/bin/logstash  -f   /usr/local/logstash/config/etc/logstash.conf
  

浏览器输入:ip地址+9200端口即可访问

接来下就是配置如何去拿日志了及画图了,后续继续分享!

相关推荐

谷歌Gemini 2.5全线爆发!勇战濒死恐慌,却被宝可梦吓到当场宕机

编辑:定慧桃子【新智元导读】今天,谷歌旗舰Gemini2.5三箭齐发,首次亮相轻量版2.5Flash-Lite。最新70页技术报告中,爆料了Gemini2.5在玩宝可梦濒死时,惊现类人的恐慌,...

Claude 4系列模型正式发布,号称“世界上最好的”AI编程模型

当地时间5月22日,Anthropic在其首次开发者大会上,正式发布了其下一代Claude模型系列:ClaudeOpus4和ClaudeSonnet4。该公司在公告中高调宣称,...

p5.js 中文入门教程(p5js和js怎么转换)

本文简介点赞+关注+收藏=学会了本文的目标是和各位工友一起有序的快速上手p5.js,会讲解p5.js的基础用法。本文会涉及到的内容包括:项目搭建p5.js基础2D图形文字图形样式...

ElasticSearch中文分词插件(IK)安装

坚持原创,共同进步!请关注我,后续分享更精彩!!!前言ElasticSearch默认的分词插件对中文支持很不友好。一段话按规则会以每个中文字符来拆解,再分别建立倒排索引。如"中华人民共和国国歌...

ELK 教程 - 发现、分析和可视化你的数据

【注】本文译自:ELKStackTutorial-GettingStartedWithELKStack|Edureka随着越来越多的IT基础设施转身云计算,对公共云安全工具...

网络安全事件技术排查(网络安全事件排查有哪些因素)

1.文件分析a)文件日期与异常文件检测文件时间检查:Windows:通过文件属性查看创建/修改时间,但需注意攻击者可能伪造时间(如使用工具修改文件时间戳)。Linux:使用ls-l或sta...

日志文件转运工具Filebeat笔记(日志文件生成原理)

一、概述与简介Filebeat是一个日志文件转运工具,在服务器上以轻量级代理的形式安装客户端后,Filebeat会监控日志目录或者指定的日志文件,追踪读取这些文件(追踪文件的变化,不停的读),并将来自...

Spring Boot 分布式系统中的日志打印设计:实战指南

在分布式系统中,日志是排查问题、监控系统状态和进行事后分析的“生命线”。然而,随着微服务架构的普及,日志的管理和检索变得愈发复杂。尤其是在生产环境中,当问题发生时,如何快速定位相关日志成为了一个关键挑...

Loki日志系统取代ELK?(日志系统 elk)

一、Loki是什么?Loki是由GrafanaLabs开源的一个水平可扩展、高可用性,多租户的日志聚合系统的日志聚合系统。它的设计初衷是为了解决在大规模分布式系统中,处理海量日志的问题。Loki采用...

20 个最热门的 MCP Server,收藏备用!

1.GitHubMCPServer功能:代码仓库管理、自动化代码审查、处理拉取请求(PR)、Issue跟踪。项目地址:https://docs.github.com/en/rest核心架构:基于...

ElasticSearch实现数据模糊搜索(el-select模糊搜索)

关注我的微信公众号:后端技术漫谈不定期推送关于后端开发、爬虫、算法题、数据结构方面的原创技术文章,以及生活中的逸闻趣事。我目前是一名后端开发工程师。主要关注后端开发,数据安全,网络爬虫,物联网,边缘计...

Linux 日志系统维护的实战示例(linux 日志文件系统)

Linux日志系统维护的实战示例,涵盖常见场景和工具:1.日志轮转与清理(Logrotate)问题:系统/var/log空间不足,需定期切割和清理旧日志。实战步骤:检查默认配置Logrotat...

日志分析平台——ELK安装配置(elk日志解析)

简介:ELK是(Elasticsearch、Logstash、Kibana)三个软件的集合简称。那么这三个软件分别扮演着一个什么样的角色呢?Elasticsearch:搜索引擎,主要任务是将日志索引并...

Docker上使用Elasticsearch,Logstash,Kibana

在对一个项目做性能测试时我需要处理我们web服务器的访问日志来分析当前用户的访问情况。因此,我想这是试用ELK的一个好机会。ELK栈首先要注意的是使用它是非常简单的。从决定使用ELK到在本机上搭一个...

.NET Core 性能监控(.net core性能对比)

一、.NETCore性能监控的重要性随着.NETCore应用程序的广泛应用,性能监控成为了保障应用稳定运行的关键环节。性能监控可以帮助开发者实时掌握应用状态,快速定位问题所在,并采取相应的...