日志分析 第2页
Logstash入门实战:部署、Filebeat联动、GeoIP与Nginx日志解析-AI运维探索者

Logstash入门实战:部署、Filebeat联动、GeoIP与Nginx日志解析

一、logstash部署 **说明:此时环境是已经完成前面ES部署,本身存在JDK环境** 1.1 基于rpm方式安装logstash 1、下载软件包 下载链接: 2、在elk123主机上安装logstas
头像5年前
04012
Linux四剑客之首:grep命令基础与实战技巧-AI运维探索者

Linux四剑客之首:grep命令基础与实战技巧

一、**概述与选项** | **grep选项** | **说明** | | ------------ | -------------------------------- | | -n | line-number 显示行号 | | -v | 排除,取反 | | -i | ignore-case 过滤的时候忽...
头像5年前
03911
Filebeat与Loki日志收集方案分析-AI运维探索者

Filebeat与Loki日志收集方案分析

一、Filebeat 在早期的ELK架构中,日志收集均以Logstash为主,Logstash负责收集和解析日志,它对内存、CPU、IO资源的消耗比较高,但是Filebeat所占系统的CPU和内存几乎可以忽略不计。 由于Fileb...
头像3年前
03111
Filebeat实战:采集容器内日志与环境清理-AI运维探索者

Filebeat实战:采集容器内日志与环境清理

一、使用Filebeat收集容器内的日志 有些程序在设计时,并没有符合云原生设计,也就是把程序的日志直接输出到了本地文件,此时如果也需要收集日志,可以在程序的 Pod 内,启动一个 Filebeat 的容...
头像3年前
03411
Nginx日志配置指南:error_log、access_log 与 log_format-AI运维探索者

Nginx日志配置指南:error_log、access_log 与 log_format

一、为什么 Nginx 日志很重要 这里将 Nginx 日志分成了两类: | 日志类型 | 主要用途 | | --- | --- | | 错误日志 | 出现 4xx、5xx 或配置故障时排查问题 | | 访问日志 | 记录访问时间、页面、...
头像5年前
05011
Loki 场景实践:虚机日志、Java 应用日志与生产优化-AI运维探索者

Loki 场景实践:虚机日志、Java 应用日志与生产优化

- 一、背景 - 非K8S集群节点,单独部署某个特殊应用或Job的虚机; - 各个应用间的日志数据非同一目录; - 当前K8S环境中已经部署了Loki日志管理系统; 一、非K8S集群虚机日志收集 1.1 安装和配...
头像3年前
03010
Filebeat实战:按标签采集Kubernetes日志-AI运维探索者

Filebeat实战:按标签采集Kubernetes日志

一、使用Filebeat根据标签收集日志 除了逐个配置 Namespace,也可以根据 Namespace 的标签进行过滤,更加方便。 比如只收集 Namespace 具有 filebeat=true 标签的空间日志: 1、备份配置文件 2...
头像3年前
05010
Filebeat实战:采集指定文件日志-AI运维探索者

Filebeat实战:采集指定文件日志

一、使用Filebeat收集指定文件日志 如果想要收集某个文件的日志,可以直接添加 log 类型日志配置即可: 1、备份配置文件 2、修改filebeat配置文件 添加内容 完整配置文件 3、重新应用filebeat配...
头像3年前
03510
Filebeat实战:在Kubernetes中收集和查询集群日志-AI运维探索者

Filebeat实战:在Kubernetes中收集和查询集群日志

一、使用Filebeat收集K8s日志 1.1 在K8s中一键部署Filebeat 参考链接:https://www.elastic.co/docs/deploy-manage/deploy/cloud-on-k8s/quickstart-beats 1.1 部署Filebeat 1、创建一个定义 Fi...
头像3年前
0268
多种日志收集方案:应用日志、Pod 日志与 Sidecar 实践-AI运维探索者

多种日志收集方案:应用日志、Pod 日志与 Sidecar 实践

一、前言 集群级/应用日志通过将日志数据从容器或节点中解耦,并将其发送到集中的日志存储或处理系统,使日志数据在整个集群中可见。 **优势**:即使容器或节点发生故障,仍然可以访问日志数据...
头像3年前
0277