解决银河麒麟v10部暑fluent-bit(arm64)的问题

已于 2023-05-27 13:01:41 修改
阅读量1.7k 收藏
点赞数 3
文章标签： fluent-bit
于 2023-05-26 10:18:32 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010533742/article/details/130881173
版权

一般情况下银河麒麟v10 （aarch64） 下，docker运行fluent-bit会报: Unsupported system page size ，这是因为jmalloc调用pagesize大小问题引起的，很多系统的pagesize是4096，但银河麒麟v10 的pagesize是65536，导致fluent-bit不能正常工作

使用下边命令查看pagesize

getconf PAGESIZE

65536

解决方法：使用官方版本（2.0.5），可解决问题
fluent/fluent-bit:2.0.5

蓝~天~
关注
ubuntu20.04源码交叉编译electron，在arm+centos（银河麒麟v10等）系统中使用，适应pagesize：65535
千里小马哥的博客
02-22 2071
交叉编译electron pagesize65535 centos系列官方electro无法使用问题
在m1芯片的MacBook上安装centos8
热门推荐
zphj1987的博客
07-28 2万+
前言 之前在做m1的虚拟化的时候就提到过，运行centos可能存在问题，这个在Parallels 出测试版本的时候就发现存在问题了 问题分析 问题根源在于pagesize的支持，M1上面的pagesize是16K，而centos的默认内核是使用的64K的pagesize，当然就不支持了，并且ubuntu，fedora都是4K的所以不存在问题 解决问题 重新打包centos，替换内部的内核和安装里面的内核 这里过程太长，暂时不写，直接发布可用的iso 有图有真相 安装里面不要选择GUI那个，选择GUI的地方
redis arm镜像报错Unsupported system page size
qq_40690648的博客
04-18 1701
redis arm镜像报错Unsupported system page size 构建redis 5.0.4版本的arm镜像
华为云麒麟arm架构docker启动redis报错:＜jemalloc＞: Unsupported system page size
一起加油吧
05-05 5527
该参数将限制内核使用交换空间（swap）的程度，并确保分配给 Redis 的内存使用物理内存而不是交换空间。这可能会减少 jemalloc 库页面大小不受支持的可能性。，例如从 Docker Hub 上拉取 arm64v8/redis:5.0.9 镜像。错误，这通常是因为服务器的页面大小不受 jemalloc 库支持所导致的。在 ARM 架构的华为云服务器上，运行 Redis 容器时出现。为了解决这个问题，您可以尝试将 Redis 容器启动命令中添加。
Redis - 适配全国产操作系统的那些坑
小工匠
03-18 2万+
文章目录JEMALLOC JEMALLOC
麒麟操作系统V10默认的大页大小
anzhuangguai的专栏
02-18 1665
默认麒麟大页是512M，不是2M，也不是1024M的。大页的个数是2个。 从x86过来的，习惯性的以为大页是2M的，所以大页个数喜欢配置为1024个。 这会导致整个麒麟系统占用内存巨大，导致system deadlock on memory，或OOM。 解决方法就是将大页个数配置小。例如 10个 ...
arm fluentd 镜像制作 Dockerfile
weixin_39850339的博客
11-15 539
仓库进行fluentd版本查询并选择对应版本 https://hub.docker.com/r/arm64v8/fluentd/tags dockerfile 编写 FROM arm64v8/fluentd:v1.8-debian-1 MAINTAINER wwx #授权root用户 USER root #相关介质安装 RUN mkdir -p /home/icbc/;gem install fluent-plugin-record-modifier -v 1.1.0;gem install fl
华为云arm架构docker启动redis报错:＜jemalloc＞: Unsupported system page size
yinjl123456的博客
06-24 3878
Harbor官方没有提供arm架构的包,需要自己编译,我编译好harbor-1.9.1之后,启动. 依赖的Redis启动失败,一直在重启,解决办法:自己在arm架构机器上构建redis镜像 先安装Docker 华为云arm架构安装Docker 查看redis启动情况 docker ps #一直在重启 Restarting goharbor/redis-photon:v1.9.1 "redis-server /etc/r…" 6 minutes ago Restarting
aarch64/arm64使用docker-compos
linux_yyp的博客
07-13 722
官方不支持改架构，需要手动编译 编译后的包由于无法上传到CSDN，需要的联系微信：yangyuanpeng525，免费获取 lscpu | grep Architecture Architecture: aarch64 docker-compose version docker-compose version 1.29.2, build unknown docker-py version: 5.0.0 CPython version: 3.6.8 OpenSSL version:
fluent-bit-go-loki:[已弃用] Loki的流利位输出插件的前身。 https
03-17
$ fluent-bit -e /path/to/built/out_loki.so -c fluent-bit.conf 或者， $ docker build . -t fluent-bit/loki-plugin 然后，将Url参数指定为环境变量： $ docker run -it -e= " LOKI_URL=http://[YOURHOST]:...
ubuntu16.04x64编译过的Redis desktop manager
11-17
ubuntu16.04x64编译过的Redis desktop manager
fluent-bit-kafka-output-plugin:Kafka FluentBit输出插件
05-09
通过运行以下命令来正确安装和构建Test Fluent-bit，并在您的Fluent-bit构建目录中运行： bin/fluent-bit -i random -o stdout 。 此命令启动Fluent-bit，告诉它对输入插件使用“ random”，对输出插件使用“ ...
fluent-bit-docker-image-dev-build-system:fluent-bit-docker-image，用于在fluent-bit源代码上进行开发-System source code development
03-24
流利的Docker映像-开发人员构建系统 这些东西基于此： : 如果您只想要标准版本，我建议使用上面的项目。 但是，如果您想在流利的位上进行一些开发，则可以使用此版本进行快速重建，同时保持主机干净。...
bitnami-docker-fluent-bit：用于Fluent位的Bitnami Docker映像
02-16
$ docker run --name fluent-bit bitnami/fluent-bit:latest 为什么要使用Bitnami Images？ Bitnami密切跟踪上游源变化，并使用我们的自动化系统及时发布该图像的新版本。 对于Bitnami映像，将尽快提供最新的错误...
fluent-bit-package
04-01
Rancher的Logging v2（使用fluent-bit图像打包。 更新中 将version.json的值更改为新版本。 运行make 。 提交这些更改，然后将其推送/合并到主分支（ master ）中。 标记一个新版本，并推入主分支（ master ）。
arm64 page size的设置
weixin_43834468的博客
02-02 1545
arm64 page size的设置
fluent-bit启动遇到的问题
liyuanjunfrank的博客
03-14 1073
fluent-bit启动时出现问题 显示start request repeated too quickly
Docker 部署Redis基于arm64架构 Jemalloc异常
nickDaDa的博客
11-05 3797
之前使用docker部署redis服务 docker run --name some-redis -d redis:5.0.5 或者docker-compose部署， version: '3' services: redis: container_name: redis image: "redis:5.0.5" ports: - "6379:6379" volume...
fluent-bit
最新发布
03-20
<think>好的，用户想了解Fluent Bit的使用指南、配置和示例。首先，我需要回忆一下Fluent Bit的基本信息，它是一个轻量级的日志收集和转发工具，常用于处理数据管道。接下来，用户可能关注安装步骤，不同操作系统的安装方法。比如在Ubuntu上使用apt，CentOS用yum，或者从源码编译。然后配置部分，要解释配置文件的结构，比如输入、过滤、输出插件的配置，可能需要举例说明，比如收集CPU数据并输出到标准输出的示例。 用户提供的引用中有提到运行示例的命令，应该包含这个例子，比如./bin/fluent-bit -i cpu -o stdout -f 1。另外，配置详解部分需要分输入、过滤、输出三个部分来讲解，每个部分给出具体的配置块，并说明参数的作用。例如，输入插件可以是cpu、mem，输出到stdout或者Elasticsearch等。 还要注意生成相关问题，比如如何监控日志、性能优化方法、与Fluentd的区别，以及Docker中的使用案例。需要确保回答结构清晰，分步骤说明安装、配置、示例，并且引用正确，在适当的位置添加引用标识，比如[^1]和[^2]。 需要检查LaTeX格式是否正确，但用户的问题可能不涉及数学公式，所以可能不需要使用。但根据系统指令，如果有行内公式需要用$...$，独立公式用$$...$$，但Fluent Bit的配置可能不涉及数学，这部分可能用不上，不过要确保其他部分符合要求，比如代码块用反引号包裹，语言标识正确。 最后，确保使用中文回答，引用标记自然添加，比如在提到运行示例时引用，在配置架构部分引用[^2]。可能还需要验证提供的引用链接是否与内容对应，确保示例命令和配置片段正确无误。</think>### Fluent Bit 使用指南与配置示例 #### 一、安装指南 1. **Ubuntu/Debian** ```bash wget https://repos.fluentbit.io/fluentbit.key | sudo apt-key add - echo "deb https://repos.fluentbit.io/ubuntu/$(lsb_release -cs) $(lsb_release -cs) main" | sudo tee /etc/apt/sources.list.d/fluent-bit.list sudo apt update && sudo apt install fluent-bit ``` 2. **CentOS/RHEL** ```bash cat <<EOF | sudo tee /etc/yum.repos.d/fluent-bit.repo [fluent-bit] name=Fluent Bit baseurl=https://repos.fluentbit.io/centos/7/\$basearch/ gpgcheck=1 gpgkey=https://repos.fluentbit.io/fluentbit.key EOF sudo yum install fluent-bit ``` 3. **源码编译** 参考官方文档下载源码并编译。 --- #### 二、核心配置解析 Fluent Bit 配置文件通常包含以下模块： - **输入插件（Input）**：定义数据来源（如日志文件、系统指标）。 - **过滤插件（Filter）**：对数据进行处理（如格式转换、字段提取）。 - **输出插件（Output）**：指定数据目的地（如远程服务器、数据库）。 ##### 示例配置：收集CPU数据并输出到标准输出 ```conf # 输入插件配置（收集CPU指标） [INPUT] Name cpu Tag cpu_metrics Interval_Sec 1 # 输出插件配置（打印到终端） [OUTPUT] Name stdout Match * ``` 运行命令： ```bash ./bin/fluent-bit -i cpu -o stdout -f 1 # 运行示例 ``` --- #### 三、进阶配置示例 1. **日志文件收集与转发到Elasticsearch** ```conf [INPUT] Name tail Path /var/log/app.log Tag app_logs [FILTER] Name parser Match app_logs Parser json # 假设日志为JSON格式 [OUTPUT] Name es Match app_logs Host 192.168.1.100 Port 9200 Index app_logs_index ``` 2. **过滤数据（提取特定字段）** ```conf [FILTER] Name modify Match * Rename level severity # 重命名字段 ``` --- #### 四、调试与验证 - **查看运行状态**： ```bash systemctl status fluent-bit ``` - **日志排查**： Fluent Bit 默认日志路径为`/var/log/fluent-bit/fluent-bit.log`。 --- §§ 1. 如何通过Fluent Bit监控Docker容器日志？ 2. Fluent Bit的性能优化有哪些常见方法？ 3. Fluent Bit与Fluentd的主要区别是什么？ 4. 如何配置Fluent Bit实现日志数据压缩传输？ --- : Fluent Bit 官方示例中通过 `-i cpu -o stdout` 快速验证数据采集流程。 : 配置架构与插件功能详见轻量级日志收集转发系列教程。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值