1 介绍
最近要在linux机器上做量化策略,目前需要每天爬取一些数据,于是就写了一个python的策略放到机器上定时去运行,这篇文章就详细介绍如何配置。
我们经常使用的是crontab命令是cron table的简写,它是cron的配置文件,也可以叫它作业列表,我们可以在以下文件夹内找到相关配置文件。
2 修改系统时区
我们拿到linux服务器后会发现当前时区和系统时区不一致,这样会对我们定时任务有影响,需要先修改当前系统时区。
- 查看当前日期
date -R
Wed, 16 Nov 2022 02:37:12 +0000
实际上:本地时间是2022/11/16/ 10:41
- 查看系统时区
cd /usr/share/zoneinfo/
ls
3. 输入命令:tzselect,具体展示如下图所示。
4. 根据上图所示选择4)Asia,输入命令:4
5. 选择国家:9)China,输入命令:9
6. 选择时区:1)Beijing Time 输入命令:1
7. 选择yes
8. 完成结果如下
9. 最后执行下面命令
# 选择成功之后,可以执行以下命令,重新登录shell即可生效:
$ sudo cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
# 最后,使用命令date在查看一下当前时间,时区变成了CST(China Standard Time)
$ date
# 重启crontab
sudo /bin/systemctl restart crond.service
# 重启服务器
init 6
3. 设置crontab定时任务
3.1 相关命令
(1)语 法:
crontab [-u <用户名称>][配置文件] 或 crontab { -l | -r | -e }
-u #<用户名称> 是指设定指定<用户名称>的定时任务,这个前提是你必须要有其权限(比如说是 root)才能够指定他人的时程表。如果不使用 -u user 的话,就是表示设定自己的定时任务。
-l #列出该用户的定时任务设置。
-r #删除该用户的定时任务设置。
-e #编辑该用户的定时任务设置。
(2)命令时间格式 :
* * * * * command
分 时 日 月 周 命令
第1列表示分钟1~59 每分钟用*或者 */1表示
第2列表示小时1~23(0表示0点)
第3列表示日期1~31
第4列表示月份1~12
第5列标识号星期0~6(0表示星期天)
第6列要运行的命令
(3)一些Crontab定时任务例子:
30 21 * * * /usr/local/etc/rc.d/lighttpd restart #每晚的21:30 重启apache
45 4 1,10,22 * * /usr/local/etc/rc.d/lighttpd restart #每月1、10、22日的4 : 45重启apache
10 1 * * 6,0 /usr/local/etc/rc.d/lighttpd restart #每周六、周日的1 : 10重启apache
0,30 18-23 * * * /usr/local/etc/rc.d/lighttpd restart #每天18 : 00至23 : 00之间每隔30分钟重启apache
0 23 * * 6 /usr/local/etc/rc.d/lighttpd restart #每星期六的11 : 00 pm重启apache
* 23-7/1 * * * /usr/local/etc/rc.d/lighttpd restart #晚上11点到早上7点之间,每隔一小时重启apache
* */1 * * * /usr/local/etc/rc.d/lighttpd restart #每一小时重启apache
0 11 4 * mon-wed /usr/local/etc/rc.d/lighttpd restart #每月的4号与每周一到周三的11点重启apache
0 4 1 jan * /usr/local/etc/rc.d/lighttpd restart #一月一号的4点重启apache
*/30 * * * * /usr/sbin/ntpdate cn.pool.ntp.org #每半小时同步一下时间
0 */2 * * * /sbin/service httpd restart #每两个小时重启一次apache
50 7 * * * /sbin/service sshd start #每天7:50开启ssh服务
50 22 * * * /sbin/service sshd stop #每天22:50关闭ssh服务
0 0 1,15 * * fsck /home #每月1号和15号检查/home 磁盘
1 * * * * /home/bruce/backup #每小时的第一分执行 /home/bruce/backup这个文件
00 03 * * 1-5 find /home "*.xxx" -mtime +4 -exec rm {} \; #每周一至周五3点钟,在目录/home中,查找文件名为*.xxx的文件,并删除4天前的文件。
30 6 */10 * * ls #每月的1、11、21、31日是的6:30执行一次ls命令
3.2 自动运行shell脚本
- 设置shell脚本
记得更改timer.sh权限
chmod 744 timer.sh
第3行有个小错误,shell语法赋值操作不能有空格
- 添加crontab脚本
crontab -e
SHELL=/bin/bash
# 记得添加python环境变量
PATH=/usr/local/bin:/home/mossloo/miniconda3/envs/vnpy/bin:/bin:/usr/bin
MAILTO=root
# For details see man 4 crontabs
# Example of job definition:
# .---------------- minute (0 - 59)
# | .------------- hour (0 - 23)
# | | .---------- day of month (1 - 31)
# | | | .------- month (1 - 12) OR jan,feb,mar,apr ...
# | | | | .---- day of week (0 - 6) (Sunday=0 or 7) OR sun,mon,tue,wed,thu,fri,sat
# | | | | |
# * * * * * user-name command to be executed
02 14 * * * sh /home/mossloo/myshell/timer.sh
3.3 Crontab命令在线验证工具:
https://tool.lu/crontab
3.4 Crontab日志路径
ll /var/log/cron* #/var/log/cron只会记录是否执行了某些计划的脚本,但是具体执行是否正确以及脚本执行过程中的一些信息则linux会每次都发邮件到该用户下。
sudo cat /var/log/cron