SpringBoot集成Skywalking日志收集

已于 2024-04-11 15:00:32 修改
阅读量1.5k 收藏 29
点赞数 25
分类专栏： Skywalking 微服务 Spring Boot 文章标签： spring boot skywalking 微服务 日志收集 链路追踪
于 2024-04-09 12:08:40 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/moxiong3212/article/details/137546078
版权

在实际项目中，为了方便线上排查问题，尤其是微服务之间调用链路比较复杂的系统中，通过可视化日志的手段仍然是最直接也很方便的排查定位问题的手段，比如大家熟悉的ELK就是一种比较成熟的可视化日志展现方式，在skywalking UI界面上，在服务菜单栏中有Log一项，该项就是用于服务中集成日志。 并提供相关搜索功能 ，根据TraceId快速定位某一次请求全链路日志信息。

skywalking支持的日志框架有：log4j、log4j2、logback等。

本文采用从skywalking agent收集的方式，日志框架使用springboot中使用默认的的logback。

1. 配置SpringBoot项目Skywalking agent

即在启动jvm参数增加

-javaagent后是skywalking-agent.jar的路径，在apache-skywalking-java-agent-9.0.0.tgz解压后的包中

-Dskywalking.agent.service_name是服务的名称，自定义，一般用spring.application.name

-Dskywalking.collector.backend_service是指skywalking oap服务器的ip和端口号

-javaagent:F:\project\git\agent\skywalking-agent\skywalking-agent.jar
-Dskywalking.agent.service_name=skywalking_demo_test  
-Dskywalking.collector.backend_service=192.168.110.155:11800

详细步骤参考：SpringBoot集成Skywalking链路追踪-CSDN博客

2. 引入POM依赖

<dependency>
            <groupId>org.apache.skywalking</groupId>
            <artifactId>apm-toolkit-logback-1.x</artifactId>
            <version>9.0.0</version>
        </dependency>

3. 修改日志配置

有两种日志展示方式，一种是随机字符型，一种是展示链路上下文的，任选一种即可。注意项日志的路径和文件的名称修改为自己实际的。

3.1 方式一

skywalking使用traceId对调用链路进行标识，traceId的格式为随机字符，如果没有请求链路，则输出日志中的traceId为N/A。

logback.xml文件

<configuration debug="false" scan="false">
    <springProperty scop="context" name="spring.application.name" source="spring.application.name" defaultValue=""/>
    <property name="log.path" value="logs/ceshi"/>

    <!-- 控制台输出  -->
    <appender name="console" class="ch.qos.logback.core.ConsoleAppender">
        <encoder class="ch.qos.logback.core.encoder.LayoutWrappingEncoder">
            <layout class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.mdc.TraceIdMDCPatternLogbackLayout">
                <pattern>%d{yyyy-MM-dd HH:mm:ss.sss} [%X{tid}] [%thread] %-5level %logger{36} -%msg%n</pattern>
            </layout>
        </encoder>
    </appender>

    <!--配置异步输出日志，提升性能-->
    <appender name="ASYNC" class="ch.qos.logback.classic.AsyncAppender">
        <discardingThreshold>0</discardingThreshold>
        <queueSize>1024</queueSize>
        <neverBlock>true</neverBlock>
        <appender-ref ref="console"/>
    </appender>

    <!--skywalking grpc 日志收集-->
    <appender name="grpc" class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.log.GRPCLogClientAppender">
        <encoder class="ch.qos.logback.core.encoder.LayoutWrappingEncoder">
            <layout class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.mdc.TraceIdMDCPatternLogbackLayout">
                <Pattern>%d{yyyy-MM-dd HH:mm:ss.SSS} [%X{tid}] [%thread] %-5level %logger{36} -%msg%n</Pattern>
            </layout>
        </encoder>
    </appender>

    <!--本地info日志保存 ，不需要可以删除-->
    <appender name="info" class="ch.qos.logback.core.rolling.RollingFileAppender">
        <file>${log.path}/system-info.log</file>
        <rollingPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedRollingPolicy">
            <fileNamePattern>${log.path}/%d{yyyy-MM}/info.%d{yyyy-MM-dd}.%i.log.gz</fileNamePattern>
            <maxFileSize>50MB</maxFileSize>
            <maxHistory>30</maxHistory>
        </rollingPolicy>
        <encoder>
            <pattern>%d{yyyy-MM-dd HH:mm:ss.sss} [%X{tid}] [%thread] %-5level %logger{36} -%msg%n</pattern>
        </encoder>
    </appender>

    <!-- 本地error日志保存 ，不需要可以删除 -->
    <appender name="error" class="ch.qos.logback.core.rolling.RollingFileAppender">
        <file>${log.path}/system-error.log</file>
        <rollingPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedRollingPolicy">
            <fileNamePattern>${log.path}/%d{yyyy-MM}/error.%d{yyyy-MM-dd}.%i.log.gz</fileNamePattern>
            <maxFileSize>50MB</maxFileSize>
            <maxHistory>30</maxHistory>
        </rollingPolicy>
        <encoder>
            <pattern>%d{yyyy-MM-dd HH:mm:ss.sss} [%X{tid}] [%thread] %-5level %logger{36} -%msg%n</pattern>
        </encoder>
        <filter class="ch.qos.logback.classic.filter.ThresholdFilter">
            <level>ERROR</level>
        </filter>
    </appender>



    <root level="info">
        <appender-ref ref="console"/>
        <appender-ref ref="info"/>
        <appender-ref ref="error"/>
        <appender-ref ref="grpc"/>
    </root>
</configuration>

3.2 方式二

由于traceId仅表示为随机字符，可读性较差。幸运的是，skywalking也认识到这一点，于是又引入了一个新的概念：链路上下文SW_CTX，所谓链路上下文，其实与traceId的作用相同，但他的好处是可读性强，其格式为SW_CTX：[服务名, 实例名, traceId, traceSegmentId, spanId]。

<configuration debug="false" scan="false">
    <springProperty scop="context" name="spring.application.name" source="spring.application.name" defaultValue=""/>
    <property name="log.path" value="logs/ceshi"/>

    <!-- 控制台输出  -->
    <appender name="console" class="ch.qos.logback.core.ConsoleAppender">
        <encoder class="ch.qos.logback.core.encoder.LayoutWrappingEncoder">
            <layout class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.mdc.TraceIdMDCPatternLogbackLayout">
                <pattern>%d{yyyy-MM-dd HH:mm:ss.sss} [%X{sw_ctx}] [%thread] %-5level %logger{36} -%msg%n</pattern>
            </layout>
        </encoder>
    </appender>

    <!--配置异步输出日志，提升性能-->
    <appender name="ASYNC" class="ch.qos.logback.classic.AsyncAppender">
        <discardingThreshold>0</discardingThreshold>
        <queueSize>1024</queueSize>
        <neverBlock>true</neverBlock>
        <appender-ref ref="console"/>
    </appender>

    <!--skywalking grpc 日志收集-->
    <appender name="grpc" class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.log.GRPCLogClientAppender">
        <encoder class="ch.qos.logback.core.encoder.LayoutWrappingEncoder">
            <layout class="org.apache.skywalking.apm.toolkit.log.logback.v1.x.mdc.TraceIdMDCPatternLogbackLayout">
                <Pattern>%d{yyyy-MM-dd HH:mm:ss.SSS} [%X{sw_ctx}] [%thread] %-5level %logger{36} -%msg%n</Pattern>
            </layout>
        </encoder>
    </appender>

    <!--本地info日志保存 ，不需要可以删除-->
    <appender name="info" class="ch.qos.logback.core.rolling.RollingFileAppender">
        <file>${log.path}/system-info.log</file>
        <rollingPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedRollingPolicy">
            <fileNamePattern>${log.path}/%d{yyyy-MM}/info.%d{yyyy-MM-dd}.%i.log.gz</fileNamePattern>
            <maxFileSize>50MB</maxFileSize>
            <maxHistory>30</maxHistory>
        </rollingPolicy>
        <encoder>
            <pattern>%d{yyyy-MM-dd HH:mm:ss.sss} [%X{sw_ctx}] [%thread] %-5level %logger{36} -%msg%n</pattern>
        </encoder>
    </appender>

    <!-- 本地error日志保存 ，不需要可以删除 -->
    <appender name="error" class="ch.qos.logback.core.rolling.RollingFileAppender">
        <file>${log.path}/system-error.log</file>
        <rollingPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedRollingPolicy">
            <fileNamePattern>${log.path}/%d{yyyy-MM}/error.%d{yyyy-MM-dd}.%i.log.gz</fileNamePattern>
            <maxFileSize>50MB</maxFileSize>
            <maxHistory>30</maxHistory>
        </rollingPolicy>
        <encoder>
            <pattern>%d{yyyy-MM-dd HH:mm:ss.sss} [%X{sw_ctx}] [%thread] %-5level %logger{36} -%msg%n</pattern>
        </encoder>
        <filter class="ch.qos.logback.classic.filter.ThresholdFilter">
            <level>ERROR</level>
        </filter>
    </appender>



    <root level="info">
        <appender-ref ref="console"/>
        <appender-ref ref="info"/>
        <appender-ref ref="error"/>
        <appender-ref ref="grpc"/>
    </root>
</configuration>

4. 启动SpringBoot项目

4.1. 启动springboot项目

没有请求链路的系统日志,比如项目启动时的

4.2. 发送一个http请求

4.3. 查看控制台或文件日志

按照3.1方式配置的日志

按照3.2方式配置的日志

从输出的日志可以看到，该请求的调用链上有了TraceId,可以根据这个TraceId在Skywalking日志里面搜索

5. 在Skywalking控制台查看链路日志

访问Skywalking控制台

如 http://192.168.110.155:8080

点击Log选项卡

如下图所示，可以看到TraceId

查看某一个链路日志

复制TraceId，搜索即可以看到某次http请求的所有日志信息

爪哇岛煮咖啡
关注
  • 25
    点赞
  • 踩
  • 29
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Spring Cloud alibaba 集成 SkyWalking 日志 以及告警邮件
12-15
使用邮件请在gateway模块配置文件中配置自己的邮箱信息 跟着课件学习的，启动服务可能需要关联启动：nacos sentinel seata skywalking其中某些中间件 配合博客https://blog.csdn.net/qq_42017523/article/details/121908588 集成的比较乱，有什么问题可以私信我，学完了，开心~
SpringBoot+Logback实现一个简单的链路追踪功能
08-25
Spring Boot默认使用LogBack日志系统，并且已经引入了相关的jar包，所以我们无需任何配置便可以使用LogBack打印日志。这篇文章主要介绍了SpringBoot+Logback实现一个简单的链路追踪功能,需要的朋友可以参考下
log4j2(MDC)+Skywalking全局链路日志实现
chy_want的博客
08-20 6241
1.问题 目前：当线上出现问题需上kibana上去查询es上收集的log4j2日志。 缺陷： 在多个服务相互调用下，若出现Error级别日志时，无法快速准确定位到由哪个服务引起，只能根据日志时间模糊去定位。 log4j2没有配置传入参数，无法准确的复现错误。 改进： 优化： 引入skywalking的traceId，能够显示出完整的链路调用。 收集 请求ip、请求参数、请求路径、返回状态码(属于业务状态码，并不是http状态码，例如Result类中的code)，返回数据等信息。定义log规范，在es上
sky walking日志采集以及注意事项
最新发布
qq_48959845的博客
05-25 1091
在介绍Sky walking日志采集功能之前，最好在系统学习一遍日志框架，这里推荐楠哥的日志框架在实际项目中我们需要将项目中的日志采集到sky walking中以便于我们能够快速排查问题，sky walking本身提供了logback，log4j，log4j2日志采集功能。可以直接进入官网学习和配置因为现在企业基本上使用logback和log4j2两个日志框架所以我们就只演示这两个日志框架的收集。
详解Skywalking 采集springboot 应用日志的方法（内附源码）
liwenxiang629的博客
02-01 1326
大家都知道Skywalking 的链路追踪功能非常强大，可以帮助用户深入了解应用程序中各个组件之间的依赖关系。在实际应用中，往往需要将链路追踪数据与日志数据结合起来进行综合分析。Skywalking 提供了 Trace Log 结合插件，可以帮助用户快速定位问题。Skywalking 支持多种日志采集方式，包括 Log4j、SLF4J、Logback 等常见的 Java 日志框架。此外，还支持通过 TCP、UDP、HTTP 等协议传输日志数据。用户可以根据实际需求选择合适的采集方式和传输协议。本文以Skyw
skywaking 日志, 通过log4j2+grpc
我引源,你思考
07-21 849
【代码】skywaking 日志, 通过log4j2+grpc。
SpringBoot 整合 SkyWalking 8.X (包含 Logback 日志采集)
李虹柏的博客
11-02 6131
SpringBoot 整合 SkyWalking 8.X (包含 Logback 日志采集)
log4j2配置(包含压缩、写数据库)
W_Q_Q_的博客
12-25 2309
<dependency> <groupId>commons-dbcp</groupId> <artifactId>commons-dbcp</artifactId> <version>1.4</version> </dependency> @Component publi...
docker部署Skywalking，Springboot并引入日志收集
asdfghjkl1112223的博客
02-02 1141
Docker部署Skywaking实现对微服务的链路追踪和日志收集 ，服务器部署SKywalking更轻松。
springboot集成skywalking 实现分布式链路追踪 日志采集 性能分析
索南杰夕的专栏
02-10 3130
目录 springboot使用docker方式集成skywalking 实现分布式链路追踪 日志采集 性能分析 ES ​ docker run --name elasticsearch -d -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" docker.elastic.co/elasticsearch/elasticsearch:7.11.2 skywalking-oap-server Docker Hub docker.
Spring boot结合SkyWalking-Trace工具类实现日志打印请求链路traceid
幽幽之心的博客
04-28 4855
随着业务的复杂化、解耦化，运维人员和开发人员需要对请求链路跟踪来快速发现和定位问题，基于应用已经集成了SkyWalking的前提下，如何通过获取SkyWalking生成的统一traceId并加入打印日志中，方便开发人员能够根据链路ID快速搜索单个请求的全链路日志呢？机制，将请求的 trace-id 放入到MDC中，在日志打印时，通过 MDC 中的 trace-id 将同一个请求的每一条日志串联起来。(1) 自定义拦截器LoggerInterceptor。一种轻量级的实现，通过。
springboot对接skywalking详解
12-31
springboot对接skywalking详解，从skywalking的安装部署，到基本使用，包括如何将springboot接入skywalking，dubbo微服务如何接入skywalking都有详细的案例，拿到代码看看而已直接运行
springboot集成cloud
04-23
springboot集成cmybaits-freemark项目基本结构demo，集成Eureka微服务的注册发现与消费服务demo，集成Ribbon负载均衡及应用demo,集成hystrix等断路由（雪崩效应）demo......
springcloud集成skywalking实现全链路追踪的完整代码
01-07
springcloud集成skywalking实现全链路追踪的完整代码，源码下载后简单修改下连接参数之后即可运行
skywalking_springboot.jar
08-04
skywalking spring jar包,随着分布式系统和微服务架构的出现，一次用户的请求会经过多个系统，不同服务之间的调用关系十分 复杂，任何一个系统出错都可能影响整个请求的处理结果。以往的监控系统往往只能知道单个...
skywalking（一）skywalking部署及集成Springboot进行简单入门
bacawa的博客
08-18 6244
skywalking 使用docker-compose进行部署，以及使用Springboot进行简单集成，完成日志同步，链路追踪等功能
SkyWalking集成Logback的使用
TOP丶Chen
05-04 1724
将微服务的日志框架去集成SkyWalking，我们希望在我们微服务中日志中，能够记录当前调用链路的id，然后我们再根据这个id去SkyWalking的前端界面中进行搜索找到对应的调用链路记录。-Dskywalking.agent.service_name：在Skywalking中的服务名称，默认值为Your_ApplicationName。刚开始服务启动时，没有调用接口，也就肯定没有链路追踪id，然后调用接口后就会在日志中有显示了。如果在本地起的Skywalking-oap服务，则没必要配置此参数。
分享一个基于log42+skywalking+springboot的日志模板配置
迪八戈的博客
01-02 1021
分享一个基于log42+skywalking+springboot的日志模板配置
Skywalking8.8日志采集(使用springboot默认日志logback)
xiao-啸
10-28 1316
skywalking8.8日志采集
springboot 集成skywalking
11-11
以下是SpringBoot集成SkyWalking的步骤： 1.在pom.xml文件中添加SkyWalking的依赖： ```xml <dependency> <groupId>org.apache.skywalking</groupId> <artifactId>apm-toolkit-trace</artifactId> <version>6.6.0</version> </dependency> ``` 2.在application.properties文件中添加SkyWalking的配置： ```properties # SkyWalking skywalking.agent.application_code=your-application-name skywalking.agent.sample_n_per_3_secs=10 skywalking.agent.namespace=default skywalking.collector.backend_service=localhost:11800 ``` 3.启动SkyWalking OAP Server： ```bash ./bin/oapService.sh start ``` 4.启动SpringBoot应用程序： ```bash java -javaagent:/path/to/skywalking-agent.jar -jar your-application.jar ``` 其中，`/path/to/skywalking-agent.jar`是SkyWalking Agent的路径，`your-application.jar`是你的SpringBoot应用程序的路径。 5.访问SkyWalking控制台： 在浏览器中输入`http://localhost:8080`，即可访问SkyWalking控制台。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值