一、crond简介
crond 是linux下用
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档
文章目录
前言
crond 是linux下用来周期性的执行某种任务或等待处理某些事件的一个守护进程,与windows下的计划任务类似,当安装完成操作系统后,默认会安装此服务 工具,并且会自动启动crond进程,crond进程每分钟会定期检查是否有要执行的任务,如果有要执行的任务,则自动执行该任务。
Linux下的任务调度分为两类,系统任务调度和用户任务调度。
提示:以下是本篇文章正文内容,下面案例可供参考
一、系统任务调度
系统任务调度:系统周期性所要执行的工作,比如写缓存数据到硬盘、日志清理等。在/etc目录下有一个crontab文件,这个就是系统任务调度的配置文件。/etc/crontab文件包括下面几行:
前 四行是用来配置crond任务运行的环境变量,第一行SHELL变量指定了系统要使用哪个shell,这里是bash,第二行PATH变量指定了系统执行 命令的路径,第三行MAILTO变量指定了crond的任务执行信息将通过电子邮件发送给root用户,如果MAILTO变量的值为空,则表示不发送任务 执行信息给用户。第四行 HOME=/ //使用者运行的路径,这里是根目录
# run-parts 注意”run-parts”这个参数了,如果去掉这个参数的话,后面就可以写要运行的某个脚本名,而不是文件夹名了
用户任务调度:用户定期要执行的工作,比如用户数据备份、定时邮件提醒等。用户可以使用 crontab 工具来定制自己的计划任务。所有用户定义的crontab 文件都被保存在 /var/spool/cron目录中。其文件名与用户名一致。
[root@jyzbxx ~]# cat /etc/crontab
SHELL=/bin/bash
PATH=/sbin:/bin:/usr/sbin:/usr/bin
MAILTO=root
# For details see man 4 crontabs
# Example of job definition:
# .---------------- minute (0 - 59)
# | .------------- hour (0 - 23)
# | | .---------- day of month (1 - 31)
# | | | .------- month (1 - 12) OR jan,feb,mar,apr ...
# | | | | .---- day of week (0 - 6) (Sunday=0 or 7) OR sun,mon,tue,wed,thu,fri,sat
# | | | | |
# * * * * * user-name command to be executed
crontab文件的含义:
用户所建立的crontab文件中,每一行都代表一项任务,每行的每个字段代表一项设置,它的格式共分为六个字段,前五段是时间设定段,第六段是要执行的命令段,格式如下:
minute hour day month week command
其中:
minute: 表示分钟,可以是从0到59之间的任何整数。
hour:表示小时,可以是从0到23之间的任何整数。
day:表示日期,可以是从1到31之间的任何整数。
month:表示月份,可以是从1到12之间的任何整数。
week:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。
command:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件。
配上说明图:
在以上各个字段中,还可以使用以下特殊字符:
星号(*):代表所有可能的值,例如month字段如果是星号,则表示在满足其它字段的制约条件后每月都执行该命令操作。
逗号(,):可以用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”
中杠(-):可以用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”
正斜线(/):可以用正斜线指定时间的间隔频率,例如“0-23/2”表示每两小时执行一次。同时正斜线可以和星号一起使用,例如*/10,如果用在minute字段,表示每十分钟执行一次。
二、crond服务
关于定时任务,首先需弄清的概念:
(1).crond是一个daemon类程序,路径为/usr/sbin/crond。默认会以后台方式启动,service或systemctl方式启动crond默认也是后台方式的,两者没发现什么区别。
(2).crondtab是管理crontab file的工具,而crontab file是定义定时任务条目的文件。
(3).crontab file存在于多处,包括系统定时任务文件/etc/crontab和/etc/cron.d/*,还有独属于各用户的任务文件/var/spool/cron/USERNAME。
再就是crontab命令:
1.安装crontab:
yum install crontabs # 安装
systemctl enable crond (设为开机启动)
systemctl start crond (启动crond服务)
systemctl status crond (查看状态)
服务操作说明:
service crond start //启动服务
service crond stop //关闭服务
service crond restart //重启服务
service crond reload //重新载入配置
service crond status // crontab服务状态
设置用户自定义定时任务
vi /etc/crontab
保存生效 加载任务,使之生效:
crontab /etc/crontab
查看任务:
crontab -l
要检查crontab 任务执行情况,可以查看crontab的日志
vi /var/log/cron
常用命令:
-l:列出定时任务条目
-r:删除当前任务列表终端所有任务条目
-i:删除条目时提示是否真的要删除
-e:编辑定时任务文件,实际上编辑的是/var/spool/cron/*文件
-u:操作指定用户的定时任务
2.操作设置
查看python环境变量路径
which python
新增调度任务可用两种方法:设置用户自定义定时任务
vi /etc/crontab
crontab -e
在命令行输入:
crontab -e 然后添加相应的任务,wq存盘退出。
直接编辑
/etc/crontab 文件,即 vi /etc/crontab,添加相应的任务。
(1).新增调度任务 内容 - 任务
0 8,10,13,14,18,20,21 * * * /usr/python /home/py/main.py>>/home/log.log
含义:每天8点10点13点14点18点20点21点执行任务
/usr/python 为python环境变量目录就是之前建连生成的文件
/home/py/main.py 为爬虫主程序路径
>>/home/log.log 在/home路径下生成名为log的爬虫print日志文件
crontab -e
# 如下
* * * * * python /home/test_scan.py -> 每分钟执行一次home 目录下的python程序 test_scan.py
*/30 * * * * python /home/test_scan.py -> 每30分钟执行一次 test_scan.py
5,15 8-12 */2 * * python /home/test_scan.py -> 每隔两天的上午8点到12点的第5和第15分钟执行 test_scan.py
# 记录linux设置定时执行python脚本以及输出到指定文件
crontab -e
*/5 * * * * root python /home/notify.py >> /home/scripts/kobe/logForNotify.log 2>&1
(2).方法二:在cron配置文件中写入多条sleep命令和其他命令。
这种方式很繁琐,但是更精确。如果定义到每秒级别就得写60行cron记录。
由此能看出,秒级的任务本就不是crond所擅长的。实际上能用到秒级的任务也比较少。
vi /etc/crontab
* * * * * ls /tmp
* * * * * sleep 3 && ls /tmp
* * * * * sleep 6 && ls /tmp
* * * * * sleep 9 && ls /tmp
* * * * * sleep 12 && ls /tmp
* * * * * sleep 15 && ls /tmp
* * * * * sleep 18 && ls /tmp
* * * * * sleep 21 && ls /tmp
* * * * * sleep 24 && ls /tmp
* * * * * sleep 27 && ls /tmp
* * * * * sleep 30 && ls /tmp
…
* * * * * sleep 57 && ls /tmp
(3)让Python脚本定时启动
准备好定时启动的脚本auto.py
用root权限编辑以下文件
1 |
|
在文件末尾添加以下命令
1 |
|
以上代码的意思是每隔两分钟执行一次脚本并打印日志。
(4)crontab编写解释
基本格式
1 2 |
|
(5)举例说明
1、每分钟执行一次
1 |
|
2、每隔2小时执行一次
1 |
|
3、每天8:30分执行一次
1 |
|
4、每小时的30和50分各执行一次
1 |
|
4、每个月的3号到6号的8:30执行一次
1 |
|
5、每个星期一的8:30执行一次
1 |
|
操作案例
1. 创建 *.sh 文件
#!/bin/bash
nohup /usr/local/python/bin/python3 /home/py/spiders/zhaobiao/zgcgw.py >/dev/null 2>&1 &
#nohup /usr/local/python/bin/python3 /home/py/spiders/zhaobiao/ggzy.py >/dev/null 2>&1 &
#nohup /usr/local/python/bin/python3 /home/py/spiders/zhaobiao/zycg.py >/dev/null 2>&1 &
2. 编辑 vi /etc/crontab 文件 ,然后指定 *.sh 文件。 当然也可以按上面直接指定 定时任务
提示:
crontab -e 是局部操作 。 vi /etc/crontab 是全局操作
# 每天10和15和19和23点半执行 *.sh 文件
30 10,15,19,23 * * * root /home/py/*.sh
4. 保存生效 加载任务,使之生效:
crontab /etc/crontab
5. 重启 刷新配置 在查看状态
service crond stop //关闭服务
service crond start //启动服务
service crond restart //重启服务
service crond reload //重新载入配置
service crond status // crontab服务状态