云原生日志Loki

于 2024-08-13 20:42:52 发布
阅读量1.1k 收藏 18
点赞数 27
文章标签： 日志收集 Loki 云原生日志
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_72583321/article/details/141173322
版权

1. Loki简介

1.1 Loki介绍

  • Loki是 Grafana Labs 团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。它的设计非常经济高效且易于操作，因为它不会为日志内容编制索引，而是为每个日志流编制一组标签。项目受 Prometheus 启发，官方的介绍就是：Like Prometheus, but for logs，类似于 Prometheus 的日志系统。

image-20240615172128856

1.2 Loki 的主要特点

  • 水平可扩展性：Loki 能够通过增加更多的节点来扩展其处理能力，以应对不断增长的数据量。

  • 高可用性：设计上保证了系统的稳定性和可靠性，即使在部分组件发生故障时也能继续运行。

  • 多租户支持：Loki 支持在同一个实例中为不同的用户提供隔离的日志数据存储和查询服务。

  • 经济高效：与传统的日志系统相比，Loki 不会对日志内容进行全文索引，而是通过为每个日志流创建一组标签来组织数据，这大大减少了存储需求和提高了查询效率。

  • 易于操作：Loki 的设计理念是简单易用，使得用户可以快速上手并有效地管理日志数据。

2. Loki部署

主机名作用系统IPV4
master采集端CentOS 7.9192.168.110.21/24
node-01被采集端CentOS 7.9192.168.110.22/24
node-02被采集端CentOS 7.9192.168.110.23/24

2.1 Loki主要组件

Loki 作为日志聚合系统的设计理念确实非常先进和实用，它通过以下三个主要组件来实现高效的日志管理：

  • Promtail

    • Promtail 是 Loki 的日志收集器，它运行在每个主机上，负责从本地文件中收集日志数据。

    • 它使用类似于 Prometheus 的服务发现机制来动态地发现日志文件。

    • Promtail 将日志作为流发送到 Loki 服务器，这些流由一组标签定义，而不是通过全文索引。

  • Loki

    • Loki 本身是一个高效的日志存储系统，它接收来自 Promtail 的日志数据，并将其存储在后端数据库中，如 BoltDB 或 Cassandra。

    • Loki 提供了一个 RESTful API，允许用户查询和聚合日志数据。

    • 它的设计允许快速查询和聚合，因为查询是基于标签的，而不是基于文本的全文搜索。

  • Grafana

    • Grafana 是一个流行的开源数据可视化和监控平台，它与 Loki 紧密集成。

    • 用户可以通过 Grafana 来创建仪表板，实时监控和分析 Loki 中的日志数据。

    • Grafana 提供了丰富的图表和可视化选项，帮助用户更直观地理解日志数据。

image-20240615172706011

2.2 Loki主要特性

Loki 与其他日志聚合系统相比确实具有一些独特的特性，这些特性使得 Loki 成为处理大规模日志数据的理想选择，特别是在云原生和容器化环境中。它的简单性、效率和成本效益使其在日志聚合领域中独树一帜。

  • 不进行全文索引：

    • Loki 不对日志内容进行全文索引，而是存储压缩的非结构化日志数据，并仅索引元数据。这种方法简化了操作，减少了存储和计算资源的需求，从而降低了成本。

  • 使用标签记录流：

    • Loki 采用了与 Prometheus 类似的标签系统，通过标签来索引和分组日志流。这种方法提高了日志数据的扩展性和操作效率，使得用户可以快速地查询和聚合具有特定标签的日志。

  • 适合存储 Kubernetes Pod 日志：

    • Loki 特别适合于存储和处理 Kubernetes 环境中的 Pod 日志。在 Kubernetes 中，Pod 是短暂的，而 Loki 的设计允许它高效地处理这些短暂生命周期的日志源。

    • Kubernetes Pod 的标签等元数据可以自动被 Loki 索引，这使得用户能够利用这些标签来查询特定 Pod 或命名空间的日志。

  • 水平可扩展性：

    • Loki 设计为易于水平扩展，可以通过增加更多的节点来处理更多的日志数据，这使得它能够适应不断增长的数据量。

  • 多租户支持：

    • Loki 支持多租户部署，允许多个团队或项目在同一个 Loki 实例上独立地存储和查询日志，而不会相互干扰。

  • 与 Grafana 的集成：

    • Loki 与 Grafana 的紧密集成提供了强大的可视化和监控能力，使得用户可以轻松地创建仪表板和警报。

  • 成本效益：

    • 由于 Loki 的设计减少了对存储和计算资源的需求，它提供了一种成本效益更高的日志聚合解决方案，特别是在处理大规模日志数据时。

  • 各日志收集组件简单对比

名称安装的组件优点
ELK/EFKElasticsearch, Logstash支持自定义grok正则解析复杂日志内容- Dashboard支持丰富的可视化展示
Kibana, Filebeat, Kafka/Redis
LokiGrafana, Loki, Promtail占用资源小- Grafana原生支持- 查询速度快

2.3 安装Loki

  • Grafana Loki 是一个日志聚合工具，它是功能齐全的日志堆栈的核心。

  • Loki 是一个为有效保存日志数据而优化的数据存储。日志数据的高效索引将 Loki 与其他日志系统区分开来，

  • 与其他日志系统不同，Loki 索引是根据标签构建的，原始日志消息未编入索引。

 [root@master ~]# wget -c https://github.com/grafana/loki/releases/download/v2.9.8/loki-2.9.8.x86_64.rpm
 [root@master ~]# yum install loki-2.9.8.x86_64.rpm -y
 [root@master ~]# sed -i 's/127.0.0.1/192.168.110.21/' /etc/loki/config.yml  # 修改IP
 [root@master ~]# systemctl enable loki --now
 [root@master ~]# systemctl is-active loki.service 
 active
 [root@master ~]# ss -lnupt | egrep '3100|9096'
 tcp    LISTEN     0      128    [::]:9096               [::]:*                   users:(("loki",pid=11871,fd=9))
 tcp    LISTEN     0      128    [::]:3100               [::]:*                   users:(("loki",pid=11871,fd=8))

  • 文件介绍

 [root@master ~]# rpm -ql loki
 /etc/loki/config.yml               # 配置文件
 /etc/systemd/system/loki.service   # 系统服务文件
 /usr/bin/loki                      # 二进制文件
 ​
 [root@master ~]# cat /etc/loki/config.yml 
 auth_enabled: false     # 是否启用鉴权
 ​
 server:
   http_listen_port: 3100  # http访问端口
   grpc_listen_port: 9096  # rpc访问端口
 ​
 common:
   instance_addr: 127.0.0.1  # 修改为自己的IP或localhost
   path_prefix: /tmp/loki
   storage:
     filesystem:
       chunks_directory: /tmp/loki/chunks # 记录块存储目录，默认chunks块上的日志数量或到期后，将chunks数据打标签后存储
       rules_directory: /tmp/loki/rules
   replication_factor: 1
   ring:
     kvstore:
       store: inmemory
 ​
 query_range:            # 查询规则
   results_cache:
     cache:
       embedded_cache:
         enabled: true
         max_size_mb: 100
 ​
 schema_config:
   configs:
     - from: 2020-10-24
       store: boltdb-shipper
       object_store: filesystem
       schema: v11
       index:
         prefix: index_
         period: 24h
 ​
 ruler:
   alertmanager_url: http://localhost:9093   # 告警通知url，修改为自己的IP
   
 # By default, Loki will send anonymous, but uniquely-identifiable usage and configuration
 # analytics to Grafana Labs. These statistics are sent to https://stats.grafana.org/
 #
 # Statistics help us better understand how Loki is used, and they show us performance
 # levels for most users. This helps us prioritize features and documentation.
 # For more information on what's sent, look at
 # https://github.com/grafana/loki/blob/main/pkg/usagestats/stats.go
 # Refer to the buildReport method to see what goes into a report.
 #
 # If you would like to disable reporting, uncomment the following lines:
 #analytics:
 #  reporting_enabled: false

2.4 安装Promtail

 [root@master ~]# wget -c https://github.com/grafana/loki/releases/download/v2.9.8/promtail-2.9.8.x86_64.rpm
 [root@master ~]# yum install promtail-2.9.8.x86_64.rpm -y
 [root@master ~]# setfacl -m u:promtail:r /var/log/messages  # 注意默认是没有读权限
 [root@master ~]# systemctl enable promtail --now
 [root@master ~]# systemctl is-active promtail
 active

image-20240615181646630

 [root@master ~]# cat /tmp/positions.yaml 
 positions:
   /var/log/messages: "1008852"

  • 配置文件详解

 [root@master ~]# cat /etc/promtail/config.yml
 # This minimal config scrape only single log file.
 # Primarily used in rpm/deb packaging where promtail service can be started during system init process.
 # And too much scraping during init process can overload the complete system.
 # https://github.com/grafana/loki/issues/11398
 ​
 server:
   http_listen_port: 9080
   grpc_listen_port: 0
 ​
 positions:
   filename: /tmp/positions.yaml # 用于记录每次读取日志文件的索引行数，如：promtail重启后从该配置中恢复日志文件的读取位置
 ​
 clients:
 - url: http://localhost:3100/loki/api/v1/push  # 推送日志流到Loki中的api
 ​
 scrape_configs:     # 发现日志文件的位置并从中提取标签
 - job_name: system  # 任务名称
   static_configs:   # 目录配置
   - targets:        # 标签
       - localhost
     labels:
       job: varlogs  # 子任务名称，通常以项目命令
       #NOTE: Need to be modified to scrape any additional logs of the system.
       __path__: /var/log/messages  # 收集本地系统日志

2.5 安装命令行工具

 [root@master ~]# wget -c https://github.com/grafana/loki/releases/download/v2.9.8/logcli-2.9.8.x86_64.rpm
 [root@master ~]# yum install logcli-2.9.8.x86_64.rpm -y
 [root@master ~]# logcli --help
 --help：显示帮助信息。
 --version：显示应用程序版本。
 --quiet：抑制查询元数据。
 --stats：显示查询统计信息。
 --output：指定输出模式，可选 default, raw, jsonl。raw 模式会抑制日志标签和时间戳。
 --timezone：指定格式化输出时间戳时使用的时区，默认为本地时区或 UTC。
 --cpuprofile 和 --memprofile：指定 CPU 和内存分析文件的写入位置。
 --stdin：从标准输入读取日志输入。
 --addr：设置 Loki 服务器地址，默认为 http://localhost:3100。
 --username 和 --password：设置 HTTP 基本认证的用户名和密码。
 --ca-cert：设置服务器 CA 证书的路径。
 --tls-skip-verify：跳过 TLS 服务器证书验证。
 --cert 和 --key：设置客户端证书和密钥的路径。
 --org-id：添加 API 请求的租户 ID。
 --query-tags：添加 HTTP 请求头，用于跟踪查询统计。
 --bearer-token 和 --bearer-token-file：设置用于 API 请求的身份验证令牌。
 --retries：设置查询失败时的重试次数。
 --min-backoff 和 --max-backoff：设置重试之间的最小和最大回退时间。
 --auth-header：设置用于 API 请求的身份验证头部。
 --proxy-url：设置 HTTP 或 HTTPS 代理的 URL。

2.6 安装Granafa

 [root@master ~]# wget -c https://dl.grafana.com/enterprise/release/grafana-enterprise-10.0.2-1.x86_64.rpm
 [root@master ~]# yum install grafana-enterprise-10.0.2-1.x86_64.rpm -y
 [root@master ~]# systemctl enable --now grafana-server

image-20240615182851316

  • 添加Loki数据源

Data sources ——> Add new data source ——> Loki

image-20240615183127589

image-20240615183146759

image-20240615183206340

image-20240615183616747

image-20240615183713012

image-20240615183804638

image-20240615183843065

2.7 增加一个标签

 [root@master ~]# vim /etc/promtail/config.yml
 ...
 scrape_configs:
 - job_name: system
   static_configs:
   - targets:
       - localhost
     labels:
       job: varlogs
       #NOTE: Need to be modified to scrape any additional logs of the system.
       __path__: /var/log/messages
   - targets:              # 添加一个targets
       - localhost
     labels:
       job: varlogs-02
       __path__: /var/log/secure
 ​
 [root@master ~]# setfacl -m u:promtail:r /var/log/secure 
 [root@master ~]# systemctl restart promtail.service

image-20240615184435177

  • 添加监控指标

image-20240615184628913

image-20240615184647967

3. LogQL语法

在 Loki 中，查询日志数据时可以使用标签选择器和过滤表达式来精确地定位和检索所需的日志流。

3.1 标签选择器

  • 标签选择器用于指定一组标签，以便从 Loki 中检索匹配特定标签的日志流。

  • 选择器放在 {} 中，多个标签表达式用逗号分隔。

image-20240615185435757

3.1.1 支持的符号

  • =：表示标签的值需要完全相同。

  • !=：表示标签的值需要不平等。

  • =~：表示标签的值需要与正则表达式匹配。

  • !~：表示标签的值不能与正则表达式匹配。

3.1.2 过滤表达式

  • 在选择了日志流之后，可以使用搜索表达式进一步过滤结果。

  • 搜索表达式可以是文本或正则表达式。

3.1.3 示例

  • {job="mysql"} |= "error"：选择 job 标签为 mysql 的日志流，并且日志行包含字符串 "error"。

  • {name="kafka"} |~ "tsdb-ops.*io:2003"：选择 name 标签为 kafka 的日志流，并且日志行匹配正则表达式 "tsdb-ops.*io:2003"。

  • {instance=~"kafka-[23]",name="kafka"} != kafka.server:type=ReplicaManager：选择 instance 标签匹配正则表达式 "kafka-[23]" 并且 name 标签为 kafka 的日志流，排除包含 kafka.server:type=ReplicaManager 的行。

3.1.4 支持的操作符

  • |=：日志行包含指定的字符串。

  • !=：日志行不包含指定的字符串。

  • |~：日志行匹配指定的正则表达式。

  • !~：日志行不匹配指定的正则表达式。

3.1.5 支持多个过滤

  • 可以在同一查询中使用多个过滤条件，例如：

    • {job="mysql"} |= "error" != "timeout"：选择 job 标签为 mysql 的日志流，日志行包含 "error" 但不包含 "timeout"。

4. Loki收集Nginx日志

  • 为了方便grafana dashbord展示，我们把日志格式修改为json

4.1 修改Nginx配置

# 在被监控端上做
[root@node-01~]# vim /etc/nginx/nginx.conf   # 再http模块内添加
http {
...
log_format json escape=json '{'
          '"remote_addr": "$remote_addr", '
          '"request_uri": "$request_uri", '
          '"request_length": "$request_length", '
 		  '"request_time": "$request_time", '
          '"request_method": "$request_method", '
          '"status": "$status", '
          '"body_bytes_sent": "$body_bytes_sent", '
          '"http_referer": "$http_referer", '
          '"http_user_agent": "$http_user_agent", '
          '"http_x_forwarded_for": "$http_x_forwarded_for", '
          '"http_host": "$http_host", '
          '"server_name": "$server_name", '
          '"upstream": "$upstream_addr", '
          '"upstream_response_time": "$upstream_response_time", '
          '"upstream_status": "$upstream_status"'
          # '"geoip_country_code": "$geoip2_data_country_code", '
          # '"geoip_country_name": "$geoip2_data_country_name", '
          # '"geoip_city_name": "$geoip2_data_city_name"'
         '};';
access_log /var/log/nginx/json_access.log json;
}

[root@node-01 ~]# nginx -t
nginx: the configuration file /etc/nginx/nginx.conf syntax is ok
nginx: configuration file /etc/nginx/nginx.conf test is successful
[root@node-01 ~]# systemctl start nginx

  • 访问Nginx

[root@node-01 ~]# tail /var/log/nginx/access.log 
192.168.110.23 - - [15/Jun/2024:19:45:37 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.23 - - [15/Jun/2024:19:45:38 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.23 - - [15/Jun/2024:19:45:38 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.21 - - [15/Jun/2024:19:45:42 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.21 - - [15/Jun/2024:19:45:42 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.21 - - [15/Jun/2024:19:45:44 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.21 - - [15/Jun/2024:19:45:44 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.21 - - [15/Jun/2024:19:45:44 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.21 - - [15/Jun/2024:19:45:45 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"
192.168.110.21 - - [15/Jun/2024:19:45:45 +0800] "GET / HTTP/1.1" 200 615 "-" "curl/7.29.0" "-"

4.2 安装Promtail

4.2.1 安装

[root@node-01 ~]# yum install promtail-2.9.8.x86_64.rpm -y

4.2.2 修改targets

[root@node-01 ~]# vim /etc/promtail/config.yml 
# This minimal config scrape only single log file.
# Primarily used in rpm/deb packaging where promtail service can be started during system init process.
# And too much scraping during init process can overload the complete system.
# https://github.com/grafana/loki/issues/11398

server:
  http_listen_port: 9080
  grpc_listen_port: 0

positions:
  filename: /tmp/positions.yaml

clients:
- url: http://192.168.110.21:3100/loki/api/v1/push    # 指定收集端

scrape_configs:
- job_name: system
  static_configs:
  - targets:
      - localhost
    labels:
      job: nginxlogs     # 修改标签
      host: 192.168.110.22
      #NOTE: Need to be modified to scrape any additional logs of the system.
      __path__: /var/log/nginx/*.log     # 采集的日志

4.2.3 授权启动

[root@node-01 ~]# setfacl -m u:promtail:r /var/log/nginx/*.log
[root@node-01 ~]# systemctl restart promtail

image-20240615195155911

4.3 Granafa采集数据

image-20240615200353449

4.4 添加Doshbarod

ID:16101

image-20240615200559256

image-20240615200631165

image-20240615200644312

image-20240615200719362

幸存者 · KXY
关注
2024年云原生学习路线
H4ppyD0g的博客
05-25 1362
2024年云原生学习路线
日志之Loki详细讲解
上善若泪
01-30 2535
下、创建的端口号是3100，就需要填写为http://loki:3100，这里为什么不写IP地址而写成服务的名字，是因为在k8s集群里面有个dns服务器会自动解析这个地址。另外也可以用上面提到的其他日志收集工具来收取，这篇文章在结尾处会附上其他工具的配置方式。改为1，是因为这个设置不正确造成的。收集起来的日志信息对于业务来说是至关重要的，因此需要在容器重启的时候日志能够保留下来。如果是裸机部署的情况下，需要对上面的配置文件做一下稍微的改动，更改。从上面的图中我们可以看到，它在解析日志的时候是以。
使用Loki收集网络设备日志
NewTyun的博客
12-29 2283
新钛云服已累计为您分享716篇技术干货前言Loki是Grafana Labs团队的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统，它的设计非常简洁易于操作。受Prometheus启发的，可以水平扩展、高可用以及支持多租户的日志聚合系统，使用了和Prometheus相同的服务发现机制，将标签添加到日志流中而不是构建全文索引，从promtail接收到的日志和应用的Metrics指标就有相同...
Java—Loki日志收集
ClancyLv的博客
04-30 1019
Loki 是一个受 Prometheus 启发的水平可扩展、高度可用的多租户日志聚合系统。它的设计非常具有成本效益且易于操作。它不索引日志的内容，而是为每个日志流编制一组标签。。
Loki —— 分布式系统轻量级日志收集器
Genius only means hard-working all one's life.
06-21 479
promtail安装（作为日志上报组件运行在应用节点上，每个需要收集日志的节点都要配置）grafana配置loki。
Loki 日志收集系统
yaohong
05-27 2604
一.系统架构 二.组成部分 Loki 的日志堆栈由 3 个组件组成： promtail：用于采集日志、并给每条日志流打标签，每个节点部署，k8s部署模式下使用daemonset管理。 loki：用于存储采集的日志， 并根据标签查询日志流。单节点部署，一般和监控组件部署在同一节点。 Grafana：提供界面，实现日志的可视化查询。安装监控组件会默认部署grafana，与监控组件共用gra...
轻量级日志系统——Loki
wzpny的博客
06-21 2956
Loki是团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。它的设计非常经济高效且易于操作，因为它不会为日志内容编制索引，而是为每个日志流编制一组标签。项目受 Prometheus启发，官方的介绍就是：，类似于Prometheus的日志系统。
云原生监控与日志系统构建教程
kkchenjj的博客
07-11 862
Prometheus是一个开源的系统监控与警报工具包，由SoundCloud开发并开源，现已成为云原生计算基金会（CNCF）的旗舰项目之一。Prometheus的设计目标是为微服务架构提供高效的数据采集和存储，以及灵活的查询语言。它采用拉取（pull）模型来收集数据，这意味着Prometheus服务器会主动从目标系统中拉取指标数据，而不是等待目标系统推送数据。业务相关性：监控指标应与业务紧密相关，能够反映业务的健康状态。可操作性：监控指标应能够指导运维人员进行问题定位和故障恢复。标准化。
云原生技术学习路线图_pro
06-06
该路线图从基础知识开始，逐步深入到高阶知识，涵盖了云原生技术的方方面面，包括容器化、服务网格、服务发现、配置中心、存储、监控、日志、CI/CD、 Serverless、微服务、DevOps 等领域。 云原生技术基础知识 * ...
dagger:Dagger 是一个基于 Loki 的日志查询和管理系统，它是由达闼科技（ CloudMinds ）云团队的`大禹基础设施平台`派生出来的一个项目。Dagger 运行在 Loki 前端，具备日志查询、搜索，保存和下载等特性，适用于云原生场景下的容器日志管理场景
04-21
Dagger 是一个基于 Loki 的日志查询和管理系统，它是由达闼科技（ CloudMinds ）云团队的大禹基础设施平台派生出来的一个项目。Dagger 运行在 Loki 前端，具备日志查询、搜索，保存和下载等特性，适用于云原生场景下...
云原生开发实战项目教程
最新发布
kkchenjj的博客
07-11 631
Spring Cloud是一套基于Spring Boot的微服务开发工具包，它提供了构建微服务架构所需的各种工具，包括服务发现、配置管理、智能路由、断路器、负载均衡、微代理、控制总线、一次性令牌、全局锁、领导选举、分布式会话、集群状态等。Spring Cloud的目标是快速构建分布式系统中的服务，而无需从头开始编写所有基础设施代码。通过上述示例，我们可以看到Spring Cloud如何简化微服务的构建过程。它不仅提供了服务发现和负载均衡的功能，还简化了配置管理、健康检查等基础设施的实现。
Loki日志系统介绍
热门推荐
mahj125的博客
11-04 1万+
Loki日志系统是受Prometheus启发由Grafana Labs团队开源的水平可扩展，高度可用的多租户日志聚合系统。它被设计得非常轻量高效且易于操作，使用标签来作为索引，而不是对全文进行检索，即通过这些标签既可以查询日志的内容也可以查询到监控的数据签，极大地降低了日志索引的存储。 Loki日志系统同ELK在结构上基本一样，也是由三部分组成： Loki：为主服务器，负责日志存储和查询处理； Promtail：为代理，负责收集日志并将其发送给Loki主服务器； ...
轻量级日志系统Loki——安装配置
Python专栏
06-20 953
Loki对标EFK/ELK，由于其轻量的设计，备受欢迎，Loki相比EFK/ELK，它不对原始日志进行索引，只对日志的标签进行索引，而日志通过压缩进行存储，通常是文件系统存储，所以其操作成本更低，数量级效率更高。由于Loki的存储都是基于文件系统的，所以它的日志搜索时基于内容即日志行中的文本，所以它的查询支持LogQL，在搜索窗口中通过过滤标签的方式进行搜索和查询。promtail，类似于tail，它只监听新增日志，不会像filebeat一样，读取日志所有内容，这是和filebeat的一个区别。
Loki日志系统
refire
09-02 830
它旨在帮助用户收集、存储和查询大规模的日志数据，帮助用户更好地理解和监控他们的应用程序和系统。Loki的设计灵感来自于Prometheus，它采用了类似的标签和度量方式来组织和查询日志数据。核心配置文件：loki-config.yaml/promtail-config.yaml/docker-compose.yaml。官网地址：https://grafana.com/docs/loki/v2.8.x/installation/local/2）配置文件：promtail-local-config.yaml。
K8S使用LOKI实现日志收集
咕咕咕daisy！
07-08 5172
Loki 是 Grafana Labs 团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。它的设计非常经济高效且易于操作，因为它不会为日志内容编制索引，而是为每个日志流编制一组标签，专门为 Prometheus 和 Kubernetes 用户做了相关优化。Promtail 作为采集器，类比 filebeatLoki 相当于服务端，类比 esLoki 进程包含四种角色：querier 查询器inester 日志存储器query-frontend 前置查询器distributor 写入分发器
轻量级云原生日志收集方案 Loki
云原生实验室
10-27 1296
❝本文转自掘金，原文：https://juejin.cn/post/7150469420605767717，版权归原作者所有。欢迎投稿，投稿请添加微信好友：cloud-native-yangHi，很高兴能够在掘金开发者的平台上为大家带来一套轻量级的 kubernetes 日志收集方案的相关介绍。我自己也在生产环境中使用过这套方案，令我意想不到的时它占用的 kubernetes 的资源相比与 ELK...
基于loki的日志收集方案
Timmy的博客
06-01 1420
基于loki的日志处理方案
分布式日志采集 Loki 配置及部署详细
写Bug的小白的博客
07-03 1123
这些目标可以独立扩展，让您可以自定义 Loki 部署，以满足日志摄取和日志查询的业务需求，从而使您的基础设施成本更好地匹配 Loki 的使用方式。部署可参考地址：https://grafana.com/docs/loki/latest/get-started/deployment-modes/。最简单的操作模式是单体部署模式。Loki 的简单可扩展部署模式是最简单的部署方式、首选方式。将组件作为单独的微服务运行可提供更大的粒度，让您可以将每个组件扩展为单独的微服务，以更好地匹配您的特定用例。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值