Linux 使用 crontab 定时拆分日志、清理过期文件


前言

请各大网友尊重本人原创知识分享,谨记本人博客:南国以南i


提示:以下是本篇文章正文内容,下面案例可供参考

简介

在Linux中可以使用crontab来定时执行脚本。crontab是一个用于管理定时任务的工具,可以让在特定的时间间隔内自动运行脚本或命令。

需求: 在Linux中每分钟写入一条信息到指定文件中,使用cron来定期执行一个写入命令或脚本

在Linux中,定时执行脚本具有多种作用和用途,包括但不限于以下几个方面:

  1. 自动化任务:定时执行脚本可用于自动化重复性的任务。例如,定时备份数据、定时清理临时文件、定时运行系统维护任务等。通过将这些任务脚本定期执行,可以减轻管理员的工作负担,并确保任务按计划执行,提高系统的可靠性和稳定性。
  2. 监控和报告:定时执行脚本可用于监控系统状态、资源使用情况和日志文件,并生成相应的报告。例如,定时检查服务器的CPU使用率、磁盘空间占用情况、网络连接状态等,并将报告发送给管理员或其他相关人员。这样可以帮助及时发现问题并采取适当的措施。
  3. 数据处理和分析:定时执行脚本可用于处理和分析数据。例如,定期从外部数据源获取数据,并将其导入到数据库中进行进一步处理和分析。这对于数据采集、数据清洗、数据转换和数据分析等任务非常有用。
  4. 定时提醒和通知:定时执行脚本可用于生成提醒和通知。例如,定时发送电子邮件或短信提醒,以及生成日程安排或事件提醒。这对于个人、团队或组织来管理任务、安排会议或发送重要通知非常有帮助。
  5. 自定义批处理任务:定时执行脚本可用于运行自定义的批处理任务。根据特定的需求和工作流程,你可以编写脚本来执行一系列操作,如文件处理、数据转换、编译构建等。通过定时运行这些脚本,可以简化复杂的工作流程并提高工作效率。

总之,定时执行脚本在Linux系统中具有广泛的应用。通过利用定时任务,可以实现自动化、监控、报告、数据处理等各种任务,从而提高系统的可靠性、效率和管理效果

一、准备工作

1.1 创建写入脚本

注意:首先,在home目录下创建一个名为testscript.sh的脚本文件,并添加以下内容:

 #!/bin/bash
echo "This is a log message $(date)" > /home/out.log

在这个示例中,脚本会将一条带有当前日期和时间的日志消息附加到指定的日志文件中。确保将/home/out.log替换为实际的日志文件路径。

保存并关闭文件。

1.2 设置执行权限

注意:在执行脚本之前,确保为其设置执行权限。在终端中运行以下命令:

chmod 755 /home/testscript.sh

1.3 添加定时任务

crontab表的每一行代表一个定时任务,定时任务语法格式如下:

* * * * * command
 
第一个*表示分钟数(0-59)
第二个*表示小时数(0-23)
第三个*表示一个月中的第几天(1-31)
第四个*表示月份(1-12)
第五个*表示一周中的第几天(0-707都表示星期日)
command是要执行的命令或脚本

例如,要在每天的凌晨12点执行脚本,添加以下行到cron表中:
我们可以在 Crontab 的命令中添加重定向符号 “>>” 将输出重定向到指定的文件中。例如:

crontab -l # 查看当前是否存在任务
crontab -e # 编辑 指定执行哪个脚本以及执行时间

# 每日凌晨执行脚本
0 0 * * * /home/testscript.sh >> /home/testscript.log 2>&1     

1.4 配置生效

service crond reload    //重新载入配置  前提是crond已经启动

二、Tomcat日志 按每天分割

2.1 创建一个 sh文件

创建脚本

#创建脚本
vim auto-deal-log.sh

脚本内容:

#! /bin/bash
echo "date is `date +%Y-%m-%d,%H:%M:%S`"
echo "tomcat-sca日志分割"
sca_log_path=/home/admin/sca/tomcat-sca/logs
cp $sca_log_path/catalina.out $sca_log_path/catalina.`date +%Y-%m-%d`.log

# 清空tomcat默认日志输出文件
echo "" > $sca_log_path/catalina.out

echo "nginx日志分割"
nginx_log_path=/home/admin/mid/nginx/logs
cp $nginx_log_path/access.log $nginx_log_path/access.`date +%Y-%m-%d`.log
cp $nginx_log_path/error.log $nginx_log_path/error.`date +%Y-%m-%d`.log
echo "" > $nginx_log_path/access.log
echo "" > $nginx_log_path/error.log


# 查找并清理不需要的文件
echo "清理tomcat*,保留30天"
find /home/admin/sca/tomcat*/logs/ -mtime +30 -name "*" -exec rm -rf {} \;
echo "清理batch日志,保留30天"
find /home/admin/sca/log/batch/ -mtime +30 -name "*" -exec rm -rf {} \;
echo "清理xxl-job日志,保留7天"
find /home/admin/sca/log/xxl-job/ -mtime +7 -name "*" -exec rm -rf {} \;
echo "清理auto-split-deal-log日志,保留7天"
find /home/admin/sca/log/auto-split-deal-log/ -mtime +7 -name "*" -exec rm -rf {} \;
echo "清理视频文件,保留5天"
find /home/admin/sca/ccrecord/ -mtime +5 -name "*.wev" -exec rm -rf {} \;
echo "日志分割及清理完毕"

2.2 设置执行权限

chmod +x auto-deal-log.sh

2.3 设置crontab指令,指定每日定时任务

# 每日凌晨执行分割日志脚本
0 0 * * * /opt/sh/auto-deal-log.sh  >> /path/to/auto-deal-log.log 2>&1   

2.4 配置生效

service crond reload    //重新载入配置  前提是crond已经启动

总结

我是南国以南i记录点滴每天成长一点点,学习是永无止境的!转载请附原文链接!!!

参考链接参考链接参考链接

  • 48
    点赞
  • 32
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 使用crontab可以在Linux定时执行任务。crontab是一个定时任务工具,可以让用户在指定时间执行一些预先定义好的命令。其基本原理是在Linux系统中运行一个称为cron的守护进程,它会根据用户设定的时间表来定期地运行一些命令。用户可以使用crontab命令来添加、修改和移除这些任务,以此来实现定时执行一些特定的操作。 ### 回答2: Linux是一种开源的操作系统,它提供了许多强大的特性和工具来管理系统资源和服务。其中一个重要的特性是crontab定时任务。crontab是由Unix操作系统引入的一种工具,用于预定和运行在指定时间执行的命令或脚本。 简而言之,crontab是一个基于时间的任务调度器,可以让您在指定的时间自动地运行命令。它非常适合那些需要定期执行重复任务的系统管理员。 crontab定时任务的格式是由若干个时间字段和一个命令组成。时间字段指明了任务应该在何时运行,而命令字段指明了应该运行的命令或脚本。时间字段的格式如下: ``` * * * * * command - - - - - | | | | | | | | | ----- Day of the week (0 - 7) (Sunday is both 0 and 7) | | | ------- Month (1 - 12) | | --------- Day of the month (1 - 31) | ----------- Hour (0 - 23) ------------- Minute (0 - 59) ``` 该格式表示有五个字段,分别表示分钟、小时、日期、月份和星期几。如果想要让任务每分钟都执行,所有字段都使用*即可。如果想要在周五晚上10点执行任务,格式为`0 22 * * 5 command`。如果想要在每月的第一天执行任务,格式为`0 0 1 * * command`。 要使用crontab定时任务,您需要打开终端并输入`crontab -e`。这将打开一个文本编辑器,允许您编辑当前用户的crontab文件。将您要执行的命令或脚本添加到文件中,然后保存并关闭编辑器。 crontab定时任务非常灵活和强大,并为系统管理员和程序员提供了一种方便的方法来自动化和管理系统任务。它可以帮助您节省时间和精力,提高系统效率和可靠性。 ### 回答3: Linux系统中的crontab是一种非常常见的工具,它被用来帮助用户对系统中的任务进行自动化调度。 首先,用户需要使用crontab -e“命令来编辑自己的crontab文件。这个文件中包含了用户想要在系统中进行自动化调度的任务列表。 在编辑文件时,用户需要注意一些事项: 1. 确定想要执行的脚本或命令的路径是否正确。 2. 确定需要执行的时间以及具体日期,如何操作。 在编辑好文件之后,用户需要保存并退出,并且在任务执行前需要使用crontab -l“命令来检查刚刚编辑的任务是否被正确添加到了列表中。 随之,需要知道crontab中的时间格式,它是“分钟 小时 日 月 周”,分别代表需执行的分钟、小时、日、月份和星期,其中通配符“*”表示所有。 此外,在crontab中还有一些其他需要注意的细节: 1. 在脚本执行时,需要确定所需的环境变量。 2. 脚本执行时,需要确定命令的输出位置和日志输出位置。 3. 在执行脚本、命令时,还需考虑安全问题,以保证系统的安全性。 总而言之,crontab是一种非常方便的Linux工具,可以帮助用户自动化调度任务,并使其更加高效、简单。在使用时,需要仔细理解时间格式、熟悉输出和环境变量等相关细节,以确保任务能够被准确无误地执行。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值