Linux定时清理日志?甭找了,进来!

Ⅰ、明确需求

首先在编写shell脚本之前需要先明确需求,就是你需要这个脚本能为你做什么,达到什么效果,然后按需求进行shell脚本编写。因为实际工作环境中,一些配置因各种原因无法在代码里实现,或是改动代码不方便,这就需要shell脚本来辅助达到所需效果了。

本次我的需求是解决rocketmq客户端日志清理问题,想要的效果就是定时的检查/root/logs/rocketmqlogs下的rocketmq_client.log日志,用过rocketmq的都知道这个日志的输出规则。就是日志滚动策略,当该日志达到1GB的时候会打个包留存,最多保存10个包,也就是10GB。

我想要的效果是让该日志滚动策略只保存5个包。设置定时删除/root/logs/roketmqlogs目录下名为rocketmq_client.log.10、rocketmq_client.log.9、rocketmq_client.log.8、rocketmq_client.log.7、rocketmq_client.log.6的文件。要求每隔5小时执行一次这个脚本。并把这个脚本执行的结果输出到/root/logs/roketmqlogs下名为delete_rocketmq_logs.log的文件里。执行结果为:本次执行脚本有没有进行删除操作,有的话删除了哪些东西。

Ⅱ、如何实现需求

# 来到你想处理的日志目录下,创建个定时清理脚本
cd /root/logs//rocketmqlogs
vim delete_rocketmq_logs.sh

# 编写以下内容(#!/bin/bash必须编写进去,意思是说明此文件是脚本文件)
#!/bin/bash
# 设置日志目录路径
logs_dir="/root/logs/roketmqlogs"
# 设置日志文件路径
log_file="/root/logs/roketmqlogs/delete_rocketmq_logs.log"
# 获取当前时间
current_time=$(date "+%Y-%m-%d %H:%M:%S")
# 初始化已删除文件列表为空字符串
deleted_files=""
# 删除指定文件
for i in {6..10}; do
  # 构建文件路径
  file="$logs_dir/rocketmq_client.log.$i"
  # 检查文件是否存在
  if [ -f "$file" ]; then
    # 删除文件
    rm "$file"
    # 将已删除文件列表添加到变量中
    deleted_files+="rocketmq_client.log.$i "
  fi
done

# 输出执行结果到日志文件
echo "[$current_time] Deleted files: $deleted_files" >> "$log_file"

# 给它添加可执行文件权限
chmod +x delete_rocketmq_logs.sh

# 然后,使用命令编辑系统用户的 crontab 文件
crontab -e

# 打开crontab文件后编写以下内容
0 */5 * * * /root/logs/rocketmqlogs/delete_rocketmq_logs.sh >> /root/logs/rocketmqlogs/delete_rocketmq_logs.log 2>&1
# 编写保存之后次脚本就已经是在运行状态了,测试的时候可以改成每分钟执行一次  */1 * * * *  更直观查看效果。

这样,每隔5小时,脚本将检查并删除 /root/logs/roketmqlogs 目录下的指定文件,并将执行结果记录在 /root/logs/roketmqlogs/delete_rocketmq_logs.log 文件中。

当然这个时间都是可控的,这个 0 */5 * * * 叫cron表达式,改成你想要的时间就可以了。
如何编辑文件内容:

像本次输入vim delete_rocketmq_logs.sh命令、crontab -e命令之后,都会进入一个新页面,新页面就是文件的编辑页面。
按“i”键进入编辑状态,然后可以编写内容了;
按“ESC”键退出编辑状态;
同时按“shift”和英文的“:”再输入保存指令“wq”;
按回车退出编辑页面回到原系统页面,就算编辑好了

以下为操作过程:

[root@localhost rocketmqlogs]# cd /root/logs//rocketmqlogs
[root@localhost rocketmqlogs]# vim delete_rocketmq_logs.sh
[root@localhost rocketmqlogs]# chmod +x delete_rocketmq_logs.sh
[root@localhost rocketmqlogs]# crontab -e

Ⅲ、解析语法参数

1、#!/bin/bash:这是脚本文件的 shebang 行,指定该脚本使用 bash 解释器来执行。
2、logs_dir="/root/logs/roketmqlogs":定义 logs_dir 变量并设置为 /root/logs/roketmqlogs 目录的路径。
3、log_file="/root/logs/roketmqlogs/delete_rocketmq_logs.log":定义 log_file 变量并设置为 /root/logs/roketmqlogs/delete_rocketmq_logs.log 文件的路径。
4、current_time=$(date "+%Y-%m-%d %H:%M:%S"):使用 date 命令获取当前时间,并将其格式化为 %Y-%m-%d %H:%M:%S 的字符串格式,保存到 current_time 变量中。
5、deleted_files="":定义 deleted_files 变量并设置为空字符串。
6、for i in {6..10}; do:开始一个 for 循环,循环变量 i 的值从 6 取到 10(包含 6 和 10)。
7、file="$logs_dir/rocketmq_client.log.$i":定义 file 变量并设置为 $logs_dir/rocketmq_client.log.$i 文件的路径。
8、if [ -f "$file" ]; then:如果文件 $file 存在,则执行以下操作。
9、rm "$file":删除文件 $file。
10、deleted_files+="rocketmq_client.log.$i ":将 rocketmq_client.log.$i 添加到 deleted_files 变量中。
11、fi:结束 if 语句。
12、done:结束 for 循环。
13、echo "[$current_time] Deleted files: $deleted_files" >> "$log_file":将当前时间、已删除的文件列表输出到 $log_file 文件中。>> 表示将输出附加到文件的末尾,而不是覆盖文件的内容。

ps:
shell作为计算机脚本语言,也有自己的一套逻辑,以上作为本次解决问题的过程分享,想达到其他各种效果,可通过改写代码或参数的方式实现,万变不离其宗,它没有你想象的那么难。

  • 9
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 在Linux中,可以使用crontab命令来定时清理日志文件。具体步骤如下: 1. 打开终端,输入以下命令来编辑crontab文件: ``` crontab -e ``` 2. 在打开的编辑器中添加如下内容,表示每天凌晨2点清理日志文件: ``` 0 2 * * * rm /path/to/log/files/*.log ``` 其中,`/path/to/log/files`是日志文件的路径,`*.log`表示删除该路径下所有以`.log`为后缀的文件。 3. 保存并退出编辑器。现在,crontab将在每天凌晨2点定时执行这个清理操作,从而自动删除指定目录下的日志文件。 ### 回答2: 在Linux系统中,日志文件是必不可少的组成部分,它可以记录系统运行过程中发生的各种事件和错误,并对问题排查、优化性能等方面提供支持。但是,由于日志文件会占据大量磁盘空间,如果不及时清理可能会导致磁盘空间不足的问题,从而影响系统运行。因此,定时清理日志文件是很有必要的。 以下是在Linux系统上定时清理日志文件的一些方法: 1. 使用logrotate logrotate是一款Linux系统中用于专门管理日志文件的工具,它支持各种日志文件的定期滚动、压缩和删除等操作。logrotate的配置文件在/etc目录下,可以设置生效时间、日志保存数量、压缩、提醒等属性。例如,执行以下命令可以每周清理/var/log目录下的所有日志文件: ``` 0 0 * * 0 /usr/sbin/logrotate /etc/logrotate.conf ``` 2. 使用Cron Job Cron是一款在Linux系统中定时执行任务的工具,可以用来定时清理日志文件。可以使用Cron Job来清理Linux系统中的日志文件,比如将所有日志文件压缩归档,只保留30天以上的文件,然后将压缩的日志文件上传到远程机器备份。例如,执行以下命令可以每月清理/var/log目录下的所有日志文件: ``` 0 0 1 * * /usr/bin/find /var/log -name "*.log" -mtime +30 -exec tar -cvzf /tmp/mylog.tar.gz {} \; && scp /tmp/mylog.tar.gz user@example.com:/backup/ ``` 3. 使用系统自带工具 Linux系统还自带一些其他工具可以清理日志文件,例如,使用find命令和xargs命令。 find命令可以查特定的文件,xargs命令可以对查的文件进行操作。例如,执行以下命令可以每天清理/var/log目录下7天前的所有日志文件: ``` 0 0 * * * find /var/log -mtime +7 -name "*.log" -type f -print0 | xargs -0 rm -f ``` 总之,定时清理日志文件是Linux系统管理的必要操作,它可以节省磁盘空间并提高系统的稳定性和性能。根据实际情况和需要,可以选择不同的工具和方法来实现这个目的。 ### 回答3: Linux系统中,有很多日志文件会随着时间的推移不断地增加,从而占据磁盘空间,并使磁盘使用效率降低。为了避免这种情况的出现,我们可以使用定时清理日志文件的方法。 Linux定时清理日志文件有很多种方式,这里我将介绍两种常用的方法。 1. 使用logrotate命令 logrotate命令是Linux系统中一个用于管理日志文件的实用工具,它可以根据规则自动地旋转、清理和压缩日志文件,从而避免日志文件过多占用磁盘空间。使用logrotate的步骤如下: (1)编辑配置文件。 在/etc/logrotate.d目录下创建一个新的文件,命名为需要清理日志文件名。例如,如果要清理nginx服务器的访问日志,可以创建一个文件/etc/logrotate.d/nginx,将下列配置内容复制至该文件中: /var/log/nginx/access.log { daily rotate 7 compress delaycompress missingok notifempty create 0644 root root } 其中,daily表示每天执行一次清理操作,rotate 7表示保留7个备份文件,compress表示压缩备份文件,missingok表示如果日志文件不存在,则跳过不做处理,notifempty表示如果日志文件为空,则跳过不做处理,create 0644 root root表示创建新日志文件的权限和属主。 (2)测试logrotate配置。 使用以下命令可以测试logrotate配置是否正确: logrotate -d /etc/logrotate.d/nginx 该命令会列出logrotate将要执行的操作,如果显示正确,则可以执行下一步。 (3)添加日志清理任务。 使用以下命令将任务添加到cron表中: 0 0 * * * /usr/sbin/logrotate /etc/logrotate.d/nginx >/dev/null 2>&1 该命令表示每天午夜12点执行一次logrotate命令,/dev/null是输出到空设备,2>&1是将错误信息输出到标准输出(即/dev/null) 2. 使用systemd-tmpfiles 使用systemd-tmpfiles也可以清理日志文件,它是systemd工具的一部分,可以用于管理临时文件和目录。使用systemd-tmpfiles的步骤如下: (1)编辑配置文件。 在/etc/tmpfiles.d目录下创建一个新的文件,命名为需要清理日志文件名。例如,如果要清理/var/log/nginx/access.log文件,可以创建一个文件/etc/tmpfiles.d/nginx.conf,将下列配置内容复制至该文件中: #Type Path Mode Age Argument r /var/log/nginx/access.log 0644 7d - 其中,r表示删除目标文件,/var/log/nginx/access.log是目标文件的路径,0644是创建新日志文件的权限和属主,7d表示删除7天以前的文件,-表示没有额外的参数。 (2)添加日志清理任务。 使用以下命令将任务添加到cron表中: 0 0 * * * /usr/bin/systemd-tmpfiles --clean >/dev/null 2>&1 该命令表示每天午夜12点执行一次systemd-tmpfiles命令,--clean选项用于清理临时文件和目录,/dev/null是输出到空设备,2>&1是将错误信息输出到标准输出(即/dev/null)。 综上所述,以上两种方法都可以使Linux系统自动清理日志文件,避免磁盘空间不足的情况。如果需要清理其他类型的日志文件,也可以根据需要修改以上方法的配置文件。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值