_stat64获取错误_Log4j，Stat4j，SMTPAppender集成–汇总错误日志以发送过多电子邮件...

最新推荐文章于 2023-06-25 18:25:44 发布
最新推荐文章于 2023-06-25 18:25:44 发布
阅读量403 收藏
点赞数
文章标签： java 大数据 spring log4j 数据库
原文链接：https://www.javacodegeeks.com/2011/10/log4j-stat4j-smtpappender-integration.html
版权

_stat64获取错误

我们的开发团队希望在生产系统出现问题时尽快得到通知，这是一个每天为成千上万的客户提供服务的关键Java Web应用程序。 想法是让它在出现太多错误时向我们发送电子邮件，这些错误通常表示数据库，外部Web服务有问题，或者应用程序本身确实存在问题。

在本文中，我想介绍一个简单的解决方案，我们已经使用基于Stats4j和SMTPAppender的自定义Log4J Appender实现了（这比您预期的配置和故障排除更加困难）。

挑战

我们在日志方面面临以下挑战：

  • 不幸的是，有一定数量的例外情况是正常的（客户选择没有结果的搜索条件，外部服务的暂时性，不重要的中断等），因此我们当然不希望被发送垃圾邮件。 因此，解决方案必须具有可配置的阈值，并且仅在超出阈值时发送警报。
  • 故障率应在可配置的时间内进行计算（由于几分钟的中断而导致的故障时间足够长，不会触发警报，而在发生严重事件时，也要足够短的时间使团队尽快得到通知）。
  • 发送警报后，一段时间内（最好在解决原始问题之前）不应再发送其他警报，我们不想因为已经知道的问题而被发送垃圾邮件。

解决方案

我们基于Lara D'Abreo的Stat4J解决方案，该解决方案提供了一个自定义Log4J附加程序，该附加程序使用日志来计算可配置的度量，并在超出警告或严重阈值时触发警报。 它有几年历史了，具有alpha质量（关于通用性和灵活性）的开源库，幸运的是，它足够简单，可以轻松修改以适应自己的需求。

因此，我们对Stat4J进行了调整，以在警报数量超过阈值时生成警报，此后保持安静，然后将其与Log4J SMTPAppender结合使用， 后者侦听警报并将其通过电子邮件发送给团队。

Stat4J调整

Stat4J的关键组件包括用于Log4J的Stat4jAppender，用于汇总单个日志的计算器（度量）（例如，通过对它们进行计数或从中提取一些数字），用于定义要通过正则表达式考虑的日志以及如何处理它们的统计信息。引用计算器，并最终在统计信息的值超出其限制时发出警报并记录警告。 您可以在介绍Stat4J的文章中了解更多信息 。

我们已经实现了一个自定义的度量计算器， RunningRate （以计算最近N分钟内的失败数），并修改了Stat4J，如下所示：

  • 我们增强了Alert，以支持新属性quietperiod，以便一旦触发，随后的警报将在该持续时间内被忽略（除非以前的警报只是警告，而新警报是关键警报）
  • 我们修改了附加器， 将日志的Throwable与日志消息一起包含，然后将其传递给各个统计计算器，以便我们可以更精确地过滤要计数的内容
  • 最后，我们修改了Alert，将警报记录为错误而不是警告，以使SMTPAppender不会忽略它们

从GitHub （我们的源代码或编译的jar ）中获取我们修改后的Stat4j 。 免责声明：这是一天的工作，我对代码并不感到骄傲。

Stat4J配置

以stat4j.properties为例 ，将其放在类路径中。 它已经配置了正确的计算器，统计信息和警报。 看到这一部分： 

### JAKUB HOLY - MY CONFIG
calculator.minuteRate.classname=net.sourceforge.stat4j.calculators.RunningRate
# Period is in [ms] 1000 * 60 * 10 = 10 min:
calculator.minuteRate.period=600000

statistic.RunningErrorRate.description=Errors per 10 minutes
statistic.RunningErrorRate.calculator=minuteRate
# Regular expression to match "<throwable.toString> <- <original log message>"
statistic.RunningErrorRate.first.match=.*Exception.*

# Error Rate
alert.TooManyErrorsRecently.description=Too many errors in the log
alert.TooManyErrorsRecently.statistic=RunningErrorRate
alert.TooManyErrorsRecently.warn= >=3
alert.TooManyErrorsRecently.critical= >=10
alert.TooManyErrorsRecently.category=alerts
# Ignore following warnings (or criticals, after the first critical) for the given amount of time:
# 1000 * 60 * 100 = 100 min
alert.TooManyErrorsRecently.quietperiod=6000000

重要的配置参数是

  • Calculator.minuteRate.period （以毫秒为单位）–在此期间计算错误，在其结束时重置计数； 合理的值可能是10分钟
  • alert.TooManyErrorsRecently.warn和alert.TooManyErrorsRecently.critical –在此期间遇到太多错误时触发警报； 合理的值取决于您的应用程序的正常错误率
  • alert.TooManyErrorsRecently.quietperiod （以毫秒为单位）–在此期间，在持续失败的情况下，请勿发送进一步的警报以防止垃圾邮件； 合理的值取决于您通常解决问题的速度，对我来说1个小时似乎还可以

Log4J配置

现在，我们需要告诉Log4J使用Stat4j附加程序来计算错误发生次数并通过电子邮件发送警报： 

log4j.rootCategory=DEBUG, Console, FileAppender, Stat4jAppender
...
### Stat4jAppender & EmailAlertsAppender ###
# Collects statistics about logs and sends alerts when there
# were too many failures in cooperation with the EmailAlertsAppender

## Stat4jAppender
log4j.appender.Stat4jAppender=net.sourceforge.stat4j.log4j.Stat4jAppender
log4j.appender.Stat4jAppender.Threshold=ERROR
# For configuration see stat4j.properties

## EmailAlertsAppender
# BEWARE: SMTPAppender ignores its Thresholds and only evers sends ERROR or higher messages
log4j.category.alerts=ERROR, EmailAlertsAppender
log4j.appender.EmailAlertsAppender=org.apache.log4j.net.SMTPAppender
log4j.appender.EmailAlertsAppender.To=dummy@example.com
# BEWARE: The address below must have a valid domain or some receivers will reject it (e.g. GMail)
log4j.appender.EmailAlertsAppender.From=noreply-stat4j@google.no
log4j.appender.EmailAlertsAppender.SMTPHost=172.20.20.70
log4j.appender.EmailAlertsAppender.BufferSize=1
log4j.appender.EmailAlertsAppender.Subject=[Stat4j] Too many exceptions in log
log4j.appender.EmailAlertsAppender.layout=org.apache.log4j.PatternLayout
log4j.appender.EmailAlertsAppender.layout.ConversionPattern=%d{ISO8601} %-5p %X{clientIdentifier} %c %x - %m%n

注释

  • ＃8指定Stat4J附加程序
  • ＃9仅向Stat4J发送ERROR，我们对不太严重的异常不感兴趣
  • ＃14“警报”是Stat4jAppender用于记录警报的日志类别（与您通过Logger.getLogger（“ alerts”）创建的类别）相同； 如前所述，SMTPAppender将不考虑配置而仅处理错误和更高级别的错误

SMTPAppender的问题

使SMTPAppender工作非常棘手。 一些陷阱：

  • SMTPAppender忽略所有非ERROR或更高级别的日志，而不考虑您如何设置阈值
  • 如果您指定不存在的“发件人”域，则某些收件人的邮件服务器可以将其删除为垃圾邮件（例如GMail）
  • 要发送电子邮件，您当然需要mail.jar（对于较早的JVM，还需要activation.jar），这是Tomcat的说明。

还有一个100美元的提示：要对其进行调试，请在调试模式下运行您的应用程序，并在javax.mail.Transport＃send（不需要源代码）上设置方法断点，然后在该位置将this.session.debug设置为如果为true，则会在服务器日志中获得以下SMTP通信的非常详细的日志。

边注

本文基于Log4J的事实并不意味着我会亲自选择它，而是随项目一起提供的。 我至少会考虑使用更新的和闪亮的Logback代替:-)。

结论

Stat4j + SMTPAppender是基于日志和电子邮件的相当灵活的自行执行警报系统的良好基础。 您可以使用Hyperic HQ plus开箱即用地实现相同的功能。

参考： 当错误日志太多时，聚集错误日志以发送警告电子邮件–来自The Holy Java Blog的 JCG合作伙伴 JakubHolý的 Log4j，Stat4j，SMTPAppender 。

相关文章 ：

翻译自: https://www.javacodegeeks.com/2011/10/log4j-stat4j-smtpappender-integration.html

_stat64获取错误

dnc8371
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
glibc源码分析之stat64系列函数
pk_20140716的专栏
08-15 3160
前文介绍了stat系列函数的源码实现，本文将向大家介绍stat64系列函数的源码实现。 stat64系列函数包括stat64,fstat64,lstat64。由于stat系列函数只能获取32位长度的文件的属性，所以glibc又提供了stat64系列函数，用于获取64位长度的文件的属性。 stat64的源码如下：#undef stat64 int attribute_hidden stat64 (
调用stat64系列函数
pk_20140716的专栏
08-15 7624
前文是对stat64系列函数的源码分析。下面将介绍如何在实际情况下调用stat64系列函数。#include <sys/types.h> #include <sys/stat.h> #include <unistd.h>int main(int argc,char **argv) { struct stat64 st64; stat64("/home",&st64);
Linux超大文件操作
HappyDoor的专栏
09-15 1230
1、包含所有头文件以前，先定义这些宏： 第一种： #ifndef __USE_FILE_OFFSET64 #define __USE_FILE_OFFSET64 #endif #ifndef __USE_LARGEFILE64 #define __USE_LARG
linux __xstat64
xiaozhi
06-25 902
linux __xstat64
获取文件信息函数：_stat, _stat64, _stati64, _wstat, _wstat64, _wstati64
程序猿的快乐
08-02 9753
Get status information on a file. int _stat( const char *path, struct _stat *buffer ); int _stat64( const char *path, struct __stat64 *buffer ); int _stati64( con
BCB6.rar_C笔记本摄像头_bcb stat.h下载_bcb 打开摄像头
09-14
标题中的“BCB6.rar”指的是Borland C++ Builder 6的一个压缩文件，这是一款集成开发环境（IDE），主要用于C++编程。"C笔记本摄像头"标签表明我们要讨论的是关于在C++环境下处理笔记本内置摄像头的程序。"bcb_stat.h...
stat_vss.rar_stat_vss
09-23
标题中的"stat_vss.rar_stat_vss"表明这是一个与VSS（Visual SourceSafe）相关的统计工具，主要用于分析和记录每个开发人员在版本控制系统中的编码活动。VSS是Microsoft推出的一款早期的源代码版本管理工具，它允许...
stat_test.rar_stat_test
09-24
标题“stat_test.rar_stat_test”和描述中提到的“基于opnet的自编统计量测试代码，对使用opnet中的API函数的统计量函数”暗示了这是一个关于使用OPNET Modeler进行统计测试的项目。OPNET Modeler是一款强大的网络...
stat_num_local.rar_log
09-22
标题“stat_num_local.rar_log”暗示我们关注的是一个与统计Apache和DHCP日志相关的任务。这个任务可能涉及从日志文件中提取特定数据、分析这些数据并生成报告。Apache是一个广泛使用的Web服务器，而DHCP是动态主机...
PMS7-13.rar_ColorText_Stat_管理系统_系统管理
09-14
《PMS7-13.rar：ColorText与Stat在人事管理系统中的应用》 在现代企业运营中，人力资源的管理是至关重要的环节。"PMS7-13.rar" 是一个专为人事管理设计的系统，它整合了"ColorText"和"Stat"两大功能模块，以提升...
Log4j，Stat4j，SMTPAppender集成–汇总错误日志以发送太多电子邮件
最佳 Java 编程
05-06 432
我们的开发团队希望在生产系统出现问题时尽快得到通知，这是一个每天为成千上万的客户提供服务的关键Java Web应用程序。 这个想法是让它在出现太多错误时向我们发送电子邮件，这些错误通常表明数据库，外部Web服务存在问题，或者应用程序本身确实存在问题。 在本文中，我想介绍一个简单的解决方案，我们已经使用基于Stats4j和SMTPAppender的自定义Log4J Appender实现了（这...
windows c++获取文件信息——_stat函数的使用
phymat.nico的专栏
10-30 1509
struct _stat64 state; int res = _stat64("420.yuv", &state); //file size more than 2G if (res < 0) { switch (errno) { case ENOENT: printf("File %s not found.\n", "420.yuv"); break; ...
c++获取文件信息——_stat函数的使用
热门推荐
frank_liuxing的专栏
01-21 4万+
c++获取文件信息——_stat函数的使用 _stat函数的功能 _stat函数用来获取指定路径的文件或者文件夹的信息。 函数声明 int _stat( const char *path, struct _stat *buffer ); 参数： path——文件或者文件夹的路径 buffer——获取的信息保存在内存中 返回值： 正确——返回0 错误——
stat(linux),_stat, _wstat, _stati64, _wstati64 获取文件信息
justtodo的专栏
05-30 6995
 Get status information on a file.int _stat( const char *path, struct _stat *buffer );__int64 _stati64( const char *path, struct _stat *buffer );int _wstat( const wchar_t *path, struct _stat
SpringBoot数据库连接池Druid的配置及log4j:WARN的解决
静水流深，沧笙踏歌
04-14 4078
目录 前言 一、导入相关依赖 二、在配置文件中对Druid数据源进行配置 三、自定义Druid数据源配置 四、进行监控 五、遇到的问题 前言 常见的数据库连接池有c3p0，druid，hikari，DBCP等。Hikari是一款非常强大，高效，并且号称“史上最快连接池”。并且在springboot2.0之后，采用的默认数据库连接池就是Hikari。Druid 是阿里巴巴开源平台上一个数据库连接池实现，结合了 C3P0、DBCP 等 数据库连接池的优点，同时加入了日志监控。 一、导入..
Mingw64编译跨平台程序时，_stat函数对于Windows中文路径不支持
小蝈蝈的博客
08-17 867
通过Mingw64交叉编译Windows程序时，会经常为了适配使用到一些C库的函数，但是Windows平台相较于Linux平台对于C库的函数支持性有一定的差距！ 在做文件系统时，当获取文件、目录的详细信息时，会使用的stat函数，该函数再Linux环境下没有什么使用的问题，但是再Window环境下，对于 char*字符串中带的中文路径支持度不够，适配跨平台时，需要使用_wstat64宽字节函数对应！解决该问题！ char u8str[] = u8"D://你好你好"; WCHAR uni_buf[MAX
stat函数遇到的错误
supenman_mwg的专栏
10-25 2258
今天调试代码遇到了一个比较鸡巴的错误； 就是在我把文件用fopen打开之后，在调用stat(）函数，就显示文件大为0， 在用VIM打开文件，文件变为空；
Linux stat函数获取文件属性（文件大小，创建时间等，判断普通文件或者目录等）
烟花易冷
01-01 1万+
struct stat64 s; memset(&s, 0, sizeof(struct stat64)); nRet = stat64(pchFilename, &s); if (nRet) { SK_ERROR(("stat %s failed! error_code: %s", pchFilename, strerror(errno))); return SK_FAILE
但是通过cv2.CC_STAT_AREA的方式可能会出现面积计算错误，如何修改
最新发布
07-10
如果使用cv2.CC_STAT_AREA来计算连通域的面积时出现错误，可能是因为该函数返回的面积值不准确。可以尝试使用其他方法来计算连通域的面积，例如使用cv2.contourArea函数或者通过计算连通域中非零像素的数量来估计面积。 下面是一个修改后的代码示例，使用cv2.contourArea函数来计算连通域的面积： ```python import cv2 import numpy as np def get_largest_connected_component_points(mask): # 连通域标记 _, labels, stats, _ = cv2.connectedComponentsWithStats(mask, connectivity=8) # 查找最大面积的连通域 max_area = -1 max_label = -1 for label in range(1, np.max(labels) + 1): contour_mask = np.uint8(labels == label) area = cv2.contourArea(contour_mask) if area > max_area: max_area = area max_label = label # 提取最大面积连通域的坐标点 points = np.argwhere(labels == max_label) return points ``` 这个修改后的代码使用cv2.contourArea函数来计算每个连通域的面积，并找到最大面积的连通域。然后，通过np.argwhere函数获取该连通域的所有坐标点。 通过这种方式计算连通域的面积可以更准确地获得结果，因为它使用了轮廓的几何特征来计算面积。记住，在使用cv2.contourArea函数之前，需要先将标签图像转换为二进制掩膜图像，以便计算连通域的轮廓面积。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值