场景
python数据开发过程中,经常需要计算数据。在遇到计算时间长,CPU消耗大的程序时,通常会使用高性能的Linux机器云计算。
本文主要介绍如何在Linux平台上运行python程序。
详细
步骤一:检查机器的CPU及内存使用情况。
nproc #查看CPU数
free -h #查看内存使用情况
top #查看CPU、内存的整体情况
如果脚本运行采用了多进程,可以依据上面的查询信息,设置进程数。
步骤二:运行.py脚本
python test.py
问题:上面的命令为前台运行,运行界面不能关闭。为避免等待,可以采用后台运行。
nohup python test.py > my_log.log &
# 运行test.py并将日志打印到当前文件夹中的my_log.log中
问题:上面的命令如果程序出错,错误日志并没有打印到日志文件中,不方便检查问题。可以将错误日志重定向解决这个问题。
nohup python test.py > my_log.log 2>&1 &
# 2>&1 将标准错误输出重定向到标准输出
问题:如果脚本需要每日定时运行。我们可以配置定时来运行脚本。
crontab -e #编辑当前用户的定时任务列表
每日凌晨一点运行程序
0 1 * * * nohup python test.py > my_log.log 2>&1 &
* * * * * command
- - - - -
| | | | |
| | | | +----- day of the week (0 - 6) (Sunday = 0)
| | | +------- month (1 - 12)
| | +--------- day of the month (1 - 31)
| +----------- hour (0 - 23)
+------------- min (0 - 59)
sudo service crond restart # 重启服务,sudo代表管理员运行
# 其它常用命令
service crond start # 启动服务
service crond stop # 关闭服务
crontab -l # 查看crontab服务列表
crontab -r # 关闭所有crontab服务
步骤三:查看日志文件
tail -f my_log.log # 实时查看日志