Debezium系列之：将Debezium的info日志、warn日志、error日志拆分到不同文件中

最新推荐文章于 2023-07-11 15:48:20 发布
最新推荐文章于 2023-07-11 15:48:20 发布
阅读量533 收藏 1
点赞数 1
分类专栏： debezium 文章标签： Debezium系列 info日志 warn日志 error日志 拆分到不同文件中
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/126604559
版权

Debezium系列之：将Debezium的info日志、warn日志、error日志拆分到不同文件中

一、需求描述

如下图所示：

在这里插入图片描述

  • 将Debezium的info日志、warn日志、error日志拆分到不同文件中
  • Debezium的info日志对应debezium.log文件，Debezium的warn日志对应debezium-warn.log文件，Debezium的error日志对应debezium-error.log文件
  • 确保debezium.log文件中只有info日志，debezium-warn.log文件中只有warn日志，debezium-error.log文件中只有error日志
  • 拆分Debezium日志方便排查问题，长时间保留warn日志、error日志

二、设置Debezium输出日志用到的Log4j相关知识点详解

参考博主下面这篇博客文章，详细了解Log4j相关知识点：

三、基于时间输出Debezium日志

日志输出样式如下所示：
在这里插入图片描述


                

                
                
        

        

    




        

            

                

                

                了解本专栏
                
                
                  
                订阅专栏 解锁全文
                 
            

        

    

      

        

            

              
                
                  最笨的羊羊
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                    1
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    1
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
                
  • 
                  
                    打赏
                    
                  
                  
    打赏
    
                
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                    0
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      

            

                专栏目录
          

                

                        订阅专栏
                










                



	

		

			

				
					
Debezium同步之Debezium日志记录

				
			

			

				

					Auspicious航的博客
				

				

					07-11
					
					593
					
				

			

		

		

			
				
目录 前言  日志记录概念记录器日志级别附加器   了解默认日志记录配置    配置日志记录通过配置记录器设置日志记录级别使用 Kafka Connect REST API 动态设置日志记录级别   使用映射的诊断上下文设置日志记录级别   在Debezium 容器镜像中配置日志级别Debezium 在其连接器中内置了广泛的日志记录，您可以更改日志记录配置以控制这些日志语句中的哪些出现在日志中以及这些日志的发送位置。Debezium（以及 Kafka、Kafka Connect 和 Zookeeper）使用

			
		

	



                

              
                



	

		

			

				
					
Log4j按级别输出日志到不同文件的实现方法

				
			

			

				

					09-01
				

			

		

		

			
				
在本文中，我们将详细介绍如何配置Log4j以按级别将日志输出到不同的文件。  首先，我们要明白Log4j的核心配置文件是`log4j.properties`或`log4j.xml`，在这里定义了日志的行为。以下是一个基于文本配置（`log4j....

			
		

	



                


  
              

                


	

		

			

				
					
Debezium系列之：Debezium logging

				
			

			

				

					zhengzaifeidelushang的博客
				

				

					06-27
					
					608
					
				

			

		

		

			
				
Debezium 在其连接器中内置了广泛的日志记录，可以更改日志记录配置来控制哪些日志语句出现在日志中以及这些日志的发送位置。Debezium（以及 Kafka、Kafka Connect 和 Zookeeper）使用 Java 的 Log4j 日志框架。默认情况下，连接器在启动时会生成大量有用信息，但当连接器与源数据库保持同步时，会生成很少的日志。当连接器正常运行时，这通常是足够的，但当连接器表现异常时，这可能不够。

			
		

	





	

		

			

				
					
kafka debezium mysql 日志订阅

				
			

			

				

					dk18stone的专栏
				

				

					07-19
					
					596
					
				

			

		

		

			
				
大数据 ，kafka connnect mysql 订阅日志

			
		

	



		

			
		



	

		

			

				
					
Spring Boot配置 Logback 实现Info ,Error日志分别记录到文件

				
			

			

				

					阿锦的博客
				

				

					06-01
					
					2106
					
				

			

		

		

			
				
目录1. 关于 Logback2. 具体配置代码
1. 关于 Logback
logback是spring boot的默认集成好的日志框架,因此我们不需要引入依赖, 直接在 resources 文件下面直接建立 日志配置文件 logback- spring.xml

2. 具体配置代码
<?xml version="1.0" encoding="UTF-8"?>
<configuration>
    <!-- 定义日志保存的路径变量,logs是spring boot 配置文件

			
		

	





	

		

			

				
					
Log4j格式化符号说明

				
			

			

				

					
				

				

					12-28
					
					432
					
				

			

		

		

			
				
格式化符号说明：  %p：输出日志信息的优先级，即DEBUG，INFO，WARN，ERROR，FATAL。 %d：输出日志时间点的日期或时间，默认格式为ISO8601，也可以在其后指定格式，如：%d{yyyy/MM/dd HH:mm:ss,SSS}。 %r：输出自应用程序启动到输出该log信息...

			
		

	





	

		

			

				
					
JAVA 日志级别

				
			

			

				

					xie__jin__cheng的博客
				

				

					12-02
					
					1308
					
				

			

		

		

			
				
log4j定义了8个级别的log（除去OFF和ALL，可以说分为6个级别）

优先级从高到低依次为：OFF、FATAL、ERROR、WARN、INFO、DEBUG、TRACE、 ALL

级别
			名称
			说明
		
			ALL
			最低等级的，用于打开所有日志记录。
		
			TRACE
			designates finer-grained informational events than the DEBUG.Since:1.2.12，很低的日志级别，一般不会使用。
		
			DE...

			
		

	





	

		

			

				
					
日志文件配置，logback

					
最新发布

				
			

			

				

					01-01
				

			

		

		

			
				
它提供了灵活且高效的日志记录解决方案，支持多种日志级别，如DEBUG、INFO、WARN、ERROR和FATAL，以及自定义级别。Logback 提供了三个核心组件：logback-core、logback-classic 和 logback-access，分别用于基础功能...

			
		

	





	

		

			

				
					
Qt+日志类+输出到文件当中

				
			

			

				

					10-24
				

			

		

		

			
				
类中定义了几个公共方法，如`setLogFile`用于设置日志文件名，以及`debug`、`info`、`warn`和`error`分别对应不同级别的日志输出。`m_file`和`m_textStream`是私有成员变量，用于打开和写入日志文件。  接下来，我们...

			
		

	





	

		

			

				
					
超大日志文件查看搜索工具

				
			

			

				

					07-25
				

			

		

		

			
				
日志文件通常由一系列按照时间顺序排列的条目组成，每条条目可能包括时间戳、日志级别（如DEBUG、INFO、WARN、ERROR）、来源组件以及具体的事件信息。不同的应用或系统可能使用自定义的格式来记录日志，因此，一个好...

			
		

	





	

		

			

				
					
Spring Boot系列教程之日志配置

				
			

			

				

					08-26
				

			

		

		

			
				
通过本文，我们学习了如何在 Spring Boot 中配置日志，包括如何在项目中打印日志、如何将日志信息存储到文件中、如何设置日志级别等。这些知识点将帮助我们更好地掌握 Spring Boot 的日志配置。

			
		

	





	

		

			

				
					
日志级别和打印日志调优

				
			

			

				

					山雨的博客
				

				

					07-20
					
					2980
					
				

			

		

		

			
				
日志级别和打印日志调优

			
		

	





	

		

			

				
					
shell监控warn日志

				
			

			

				

					laijijun的博客
				

				

					11-19
					
					686
					
				

			

		

		

			
				
程序每天都会产生warn,我们不能及时的监控到问题，下面我来写一个shell脚本监控warn日志，如果有warn日志就发送邮件通知

首先我们定义一个配置文件：vi config.ini

在配置文件中配置一些参数


#收件人(只能有一个)
recipient=email@vinmacro.com.cn
#抄送(可以有多个，以逗号分隔)
cc=email@vinmacro.com.cn

#包含...

			
		

	





	

		

			

				
					
日志规范说明

				
			

			

				

					michaelcc00的专栏
				

				

					10-09
					
					704
					
				

			

		

		

			
				
日志规范

			
		

	





	

		

			

				
					
log4j的8个日志级别

				
			

			

				

					glj233的专栏
				

				

					03-10
					
					2499
					
				

			

		

		

			
				
log4j定义了8个级别的log（除去OFF和ALL，可以说分为6个级别），优先级从高到低依次为：OFF、FATAL、ERROR、WARN、INFO、DEBUG、TRACE、 ALL。

ALL 最低等级的，用于打开所有日志记录。

TRACE designates finer-grained informational events than the DEBUG.Since:1.2.12，很低的...

			
		

	





	

		

			

				
					
日志级别的选择：Debug、Info、Warn、Error还是Fatal

				
			

			

				

					weixin_41540084的博客
				

				

					09-18
					
					3110
					
				

			

		

		

			
				
日志信息分类
1.等级由低到高：debug<info<warn<Error<Fatal
2.区别：
debug ：
级别最低，可以随意的使用于任何觉得有利于在调试时更详细的了解系统运行状态的东东；
info：
重要，输出信息：用来反馈系统的当前状态给最终用户的；
后三个，警告、错误、严重错误，这三者应该都在系统运行时检测到了一个不正常的状态。
warn：
警告，可修复，系统...

			
		

	





	

		

			

				
					
slf4j的log.warn()的参数问题研究

				
			

			

				

					明明如月的技术博客
				

				

					06-28
					
					8375
					
				

			

		

		

			
				
一、背景

今天我们探讨一下@Slf4j的log.warn()的参数问题。

二、上源码

我先给出下面的几个测试用例，大家想想分别会输出什么？


import com.alibaba.fastjson.JSON;
import lombok.extern.slf4j.Slf4j;
import org.apache.commons.lang3.exception.ExceptionUtils;...

			
		

	





	

		

			

				
					
写写常用的日志级别以及含义

				
			

			

				

					qq_44370158的博客
				

				

					07-11
					
					2609
					
				

			

		

		

			
				
需要根据具体的需求和应用场景选择合适的日志级别，以便于及时发现和解决问题。一般来说，日志级别越低，输出的日志信息就越详细，但也会造成日志文件过大和性能影响等问题，因此需要根据实际情况进行平衡。在日志系统中，通常会定义多个不同的日志级别，用来表示不同的日志信息重要程度和详细程度。

			
		

	





	

		

			

				
					
linux的日志管理

				
			

			

				

					Melgards的博客
				

				

					08-23
					
					408
					
				

			

		

		

			
				
linux日志管理

			
		

	





	

		

			

				
					
理解Log4j：Appender配置与日志系统解析

				
			

			

				

					
				

			

		

		

			
				
日志级别包括DEBUG、INFO、WARN、ERROR和FATAL，允许开发者控制哪些级别的日志信息会被记录，从而过滤掉不必要的信息，提高性能。  Layout组件则负责格式化Appender输出的日志信息，常见的Layout有PatternLayout，...

			
		

	



              



  
“相关推荐”对你有帮助么？

  

      
    
          
  • 
              
    
                  
                  
              
    
              
    非常没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    一般
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    有帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    非常有帮助
    
          
    • 
      

      

      

          
          提交
      

      

  




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  





	
打赏作者

	

		

		
			
		
		

		

			
最笨的羊羊

			
你的鼓励将是我创作的最大动力

		

	

	

			

	

	

    ¥1
    ¥2
    ¥4
    ¥6
    ¥10
    ¥20
	

	

		

			

				

					扫码支付：¥1
				

				

					

					
					获取中
					

				

				

					
					
					扫码支付
				

			

		

		

			
您的余额不足，请更换扫码支付或充值

			
打赏作者

		

	



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值