Linux定时任务Crontab的理解
一.简述
linux 系统上的定时任务管理器是由 cron (crond) 这个系统服务来控制的,这个系统服务是默认启动的。系统管理员可以通过命令来设置自己的定时任务。基础命令行是 :crontab 命令。
工作项目中,因为需要定时完成一些功能需求,所以使用到了定时任务crontab。例如数据库每日定时备份,数据定时同步第三方接口等等,crontab支持用系统命令调用事先写的php、sh脚本文件。
二.crond简介
crond是linux下用来周期性的执行某种任务或等待处理某些事件的一个守护进程,与windows下的计划任务类似,当安装完成操作系统后,默认会安装此服务工具,并且会自动启动crond进程,crond进程每分钟会定期检查是否有要执行的任务,如果有要执行的任务,则自动执行该任务。
Linux下的任务调度分为两类,系统任务调度和用户任务调度。
系统任务调度:系统周期性所要执行的工作,比如写缓存数据到硬盘、日志清理等。在/etc目录下有一个crontab文件,这个就是系统任务调度的配置文件。
用户任务调度:用户定期要执行的工作,比如用户数据备份、定时邮件提醒等。用户可以使用 crontab 工具来定制自己的计划任务。所有用户定义的crontab 文件都被保存在 /var/spool/cron目录中。其文件名与用户名一致。
三.crond服务安装与配置
安装crontab命令
yum install crontabs
服务操作命令
/sbin/service crond start //启动服务
/sbin/service crond stop //关闭服务
/sbin/service crond restart //重启服务
/sbin/service crond reload //重新载入配置
/sbin/service crond status //启动服务
查看crontab服务是否已设置为开机启动,执行命令
ntsysv
加入开机自动启动命令
chkconfig –level 35 crond on
四.crontab文件的含义
用户所建立的crontab文件中,每一行都代表一项任务,每行的每个字段代表一项设置,它的格式共分为六个字段,前五段是时间设定段,第六段是要执行的命令段,格式如下:
minute hour day month week command
其中:
minute: 表示分钟,可以是从0到59之间的任何整数。
hour:表示小时,可以是从0到23之间的任何整数。
day:表示日期,可以是从1到31之间的任何整数。
month:表示月份,可以是从1到12之间的任何整数。
week:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。
command:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件
。
在以上各个字段中,还可以使用以下特殊字符:
星号(*):代表所有可能的值,例如month字段如果是星号,则表示在满足其它字段的制约条件后每月都执行该命令操作。
逗号(,):可以用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”
中杠(-):可以用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”
正斜线(/):可以用正斜线指定时间的间隔频率,例如“0-23/2”表示每两小时执行一次。同时正斜线可以和星号一起使用,例如*/10,如果用在minute字段,表示每十分钟执行一次。
五.crontab命令详解
1.命令格式
crontab [-u user] file
crontab [-u user] [ -e | -l | -r ]
2.命令参数
-u user:用来设定某个用户的crontab服务,例如,“-u ixdba”表示设定ixdba用户的crontab服务,此参数一般有root用户来运行。
file:file是命令文件的名字,表示将file做为crontab的任务列表文件并载入crontab。如果在命令行中没有指定这个文件,crontab命令将接受标准输入(键盘)上键入的命令,并将它们载入crontab。
-e:编辑某个用户的crontab文件内容。如果不指定用户,则表示编辑当前用户的crontab文件。
-l:显示某个用户的crontab文件内容,如果不指定用户,则表示显示当前用户的crontab文件内容。
-r:从/var/spool/cron目录中删除某个用户的crontab文件,如果不指定用户,则默认删除当前用户的crontab文件。
-i:在删除用户的crontab文件时给确认提示。
3.常用命令
1). 列出crontab文件,执行命令
crontab -l
显示当前用户下的定时任务内容:
*/5 * * * * /usr/sbin/ntpdate ntp.ksyun.cn > /dev/null 2> /dev/null
0 */1 * * * php -f /data/chat/access/sdk/timing_ban_update.php
2). 编辑crontab文件,执行命令
crontab -e
可以像使用vi编辑文件那样修改crontab文件并退出。如果修改了某些条目或添加了新的条目,那么在保存该文件时, crond会对其进行必要的完整性检查,如果其中的某个域出现了超出允许范围的值,它会提示你。
建议在crontab文件的每一项任务之上加入一条注释,这样就可以知道它的功能、运行时间等等信息。
3). 删除crontab文件,执行命令
crontab -r
4). 恢复丢失的crontab文件
建议在home目录中保存一个该文件的副本,如果不小心误删了crontab文件,假设你在自己的home目录下还有一个备份,那么可以将其拷贝到/var/spool/cron/,其中是用户名。如果由于权限问题无法完成拷贝,可以用:
crontab filename
其中,filename是你在home目录中副本的文件名。
六.使用实例
实例1:每1分钟,执行一次command
命令: * * * * * command
实例2:每小时的第3和第15分钟,执行一次command
命令: 3,15 * * * * command
实例3:在上午8点到11点的第3和第15分,执行一次command
命令: 3,15 8-11 * * * command
实例4:每隔两天的上午8点到11点的第3和第15分钟,执行一次command
命令: 3,15 8-11 */2 * * command
实例5:每个星期一的上午8点到11点的第3和第15分钟,执行一次command
命令:3,15 8-11 * * 1 command
实例6:每晚的21:3,执行一次command
命令:30 21 * * * command
实例7:每月1、10、22日的4 : 45,执行一次command
命令:45 4 1,10,22 * * command
实例8:每周六、周日的1 : 10,执行一次command
命令:10 1 * * 6,0 command
实例9:每天18 : 00至23 : 00之间每隔30分钟,执行一次command
命令:0,30 18-23 * * * command
实例10:每星期六的晚上11 : 00 pm,执行一次command
命令:0 23 * * 6 command
实例11:每一小时,执行一次command
命令:0 */1 * * * command
每小时执行一次为 0 */1 * * * 这种写法
很容易粗心写成 * */1 * * * 这种写法,代表每隔一小时每一分钟都执行一次
实例12:晚上11点到早上7点之间,执行一次command
命令:23-7/1 * * * command
实例13:每月的4号与每周一到周三的11点,执行一次command
命令:0 11 4 * mon-wed command
实例14:一月一号的4点,执行一次command
命令:0 4 1 jan * command
实例15:每小时执,执行一次command
命令:01 * * * * command
七.使用注意事项
1.注意环境变量问题
有时我们创建了一个crontab,但是这个任务却无法自动执行,而手动执行这个任务却没有问题,这种情况一般是由于在crontab文件中没有配置环境变量引起的。
在 crontab文件中定义多个调度任务时,需要特别注意的一个问题就是环境变量的设置,因为我们手动执行某个任务时,是在当前shell环境下进行的,程序当然能找到环境变量,而系统自动执行任务调度时,是不会加载任何环境变量的,因此,就需要在crontab文件中指定任务运行所需的所有环境变量,这样,系统执行任务调度时就没有问题了。
不要假定cron知道所需要的特殊环境,它其实并不知道。所以你要保证在shelll脚本中提供所有必要的路径和环境变量,除了一些自动设置的全局变量。
所以注意如下3点:
1).脚本中涉及文件路径时写全局路径;
2).脚本执行要用到java或其他环境变量时,通过source命令引入环境变量,如:
cat start_cbp.sh
#!/bin/sh
source /etc/profile
export RUN_CONF=/home/d139/conf/platform/cbp/cbp_jboss.conf
/usr/local/jboss-4.0.5/bin/run.sh -c mev &
3).当手动执行脚本OK,但是crontab死活不执行时。这时必须大胆怀疑是环境变量惹的祸,并可以尝试在crontab中直接引入环境变量解决问题。如:
0 * * * * . /etc/profile;/bin/sh /var/www/java/audit_no_count/bin/restart_audit.sh
2.注意清理系统用户的邮件日志
每条任务调度执行完毕,系统都会将任务输出信息通过电子邮件的形式发送给当前系统用户,这样日积月累,日志信息会非常大,可能会影响系统的正常运行,因此,将每条任务进行重定向处理非常重要。
例如,可以在crontab文件中设置如下形式,忽略日志输出:
0 */3 * * * /usr/local/apache2/apachectl restart > /dev/null 2>&1
“/dev/null 2>&1”表示先将标准输出重定向到/dev/null,然后将标准错误重定向到标准输出,由于标准输出已经重定向到了/dev/null,因此标准错误也会重定向到/dev/null,这样日志输出问题就解决了。
3.系统级任务调度与用户级任务调度
系统级任务调度主要完成系统的一些维护操作,用户级任务调度主要完成用户自定义的一些任务,可以将用户级任务调度放到系统级任务调度来完成(不建议这么 做),但是反过来却不行,root用户的任务调度操作可以通过crontab –uroot –e来设置,也可以将调度任务直接写入/etc /crontab文件,需要注意的是,如果要定义一个定时重启系统的任务,就必须将任务放到/etc/crontab文件,即使在root用户下创建一个 定时重启系统的任务也是无效的。
4.其他注意事项
1).新创建的cron job,不会马上执行,至少要过2分钟才执行。如果重启cron则马上执行。
2).当crontab突然失效时,可以尝试重启命令/etc/init.d/crond restart解决问题。或者查看日志看某个job有没有执行/报错tail -f /var/log/cron。
3).千万别乱运行crontab -r删除命令。它从Crontab目录(/var/spool/cron)中删除用户的Crontab文件,删除了该用户的所有crontab都没了。
4).在crontab中%是有特殊含义的,表示换行的意思。如果要用的话必须进行转义%,如经常用的date ‘+%Y%m%d’在crontab里是不会执行的,应该换成date ‘+%Y%m%d’。
八.定时备份数据库
定时任务:
30 00 * * * /data/mysql/sqlAutoBak.sh
sqlAutoBak.sh脚本代码:
#!/bin/sh
# Database info
DB_USER="user"
DB_PASS="password"
DB_HOST="127.0.0.1"
DB_NAME="db_name"
# Others vars
BIN_DIR="/usr/bin" #the mysql bin path
BCK_DIR="/data/mysql" #the backup file directory
DATE=`date +%F`
#删除3日前的备份文件
DATE3=`date -d '-3 day' +%F`
# rm /home/mysql/db_name`date -d '-3 day' +%F`.sql
rm -f $BCK_DIR/$DB_NAME$DATE3.sql
# 备份今日的数据库
# /usr/bin/mysqldump --opt -ubatsing -pbatsingpw -hlocalhost timepusher > /home/mysql/db_name`date +%F`.sql
$BIN_DIR/mysqldump --opt -u$DB_USER -p$DB_PASS -h$DB_HOST $DB_NAME > $BCK_DIR/$DB_NAME$DATE.sql
#压缩备份数据库文件
#tar -zcPvf $BCK_DIR/$DB_NAME$DATE.sql.tar.gz $BCK_DIR/$DB_NAME$DATE.sql
#删除导出的sql文件
#rm -f $BCK_DIR/$DB_NAME$DATE.sql;
#还原数据库
#用mysql-front导入前一天的 *.sql 文件即可恢复数据