一、非云原生应用日志收集方案 1.1 Filebeat收集非云原生应用日志架构图 1.1 Filebeat收集非云原生应用日志架构图解析 1、**应用与日志生成** - **非云原生应用（Application）** 以容器形式运...

一、EFK vs LPG **架构和组件：** - Loki：Loki 是一个开源的水平可扩展日志聚合系统，由 Promtail、Loki 和 Grafana 组成。 - EFK：EFK 是一个集成的解决方案，由 Elasticsearch、Fluentd 和 K...

一、在K8s中从零落地日志收集平台 官方文档：https://www.elastic.co/docs/deploy-manage/deploy/cloud-on-k8s 1.1 ECK安装 参考链接：https://www.elastic.co/docs/deploy-manage/deploy/cloud...

一、前言 Fluentd 是一个开源的日志收集和传输工具，用于可靠地收集、传输和处理各种类型的 日志数据。它被设计成具有灵活性和可扩展性，可以在复杂的日志处理场景中进行配置和定制。 以下是 Fl...

一、前言 集群级/应用日志通过将日志数据从容器或节点中解耦，并将其发送到集中的日志存储或处理系统，使日志数据在整个集群中可见。 **优势**：即使容器或节点发生故障，仍然可以访问日志数据...

一、ECK核心资源Beat配置详解 ECK核心资源Beat配置示例： 1.1 FileBeat配置详解 1.1 FileBeat基于k8s自动发现配置 ECK核心资源FileBeat配置示例： 1.1 FileBeat基于inputs配置 ECK核心资源FileB...

一、案例分享 1.1 场景一 - 将 /root/my.txt文件中的日志数据按照指定的格式解析后，通过HTTP POST方法 发送到http://localhost:9090/地址。 - 发送的数据格式为JSON，每3秒发送一次。 fluentd...

一、日志规范 在K8S架构中，为了统一和标准化日志格式，可以使用以下几种常见的日志规范： 1、日志格式规范： - 结构化日志：使用结构化日志格式，如JSON、XML 或 Key-Value Pair（键值 对）格...

一、数据背景 在海量数据场景下，日志管理和分析是一项重要任务。为了解决这个问题，EFK 架构 （Elasticsearch + Fluentd + Kibana）已经成为流行的选择。 然而，随着数据规模的增加，传统的 EF...

一、配置文件 在 Fluentd 的配置文件中，有几个常用的关键字和组件，包括 source 、 match 、filter 、 system 、 label 和 @include 。 * 1.source ：用于定义 Fluentd 接收数据的来源 * 2.mat...