Centos配置Python3环境并创建定时任务

Centos7配置Python3环境并创建定时任务

Python3环境配置

1.安装编译环境

yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make

yum install libffi-devel

2.从官网下载python3的源码,具体版本视情况而定

wget https://www.python.org/ftp/python/3.7.5/Python-3.7.5.tar.xz

3.解压源码包(/usr/local/src/为解压路径)

tar xf Python-3.7.5.tar.xz -C /usr/local/src/

4.安装 python3(最后文件名以实际情况为准/usr/local/src目录下叫什么就写什么)[首先要cd到该目录下]

./configure --prefix=/usr/local/src/Python-3.7.5

5.编译

make && make install

6.更新pip版本

/usr/local/src/Python-3.7.5/bin/pip3 install --upgrade pip

7.建立软连接

//具体路径以实际为准 
ln -s /usr/local/src/Python-3.7.5/bin/python3 /usr/bin/python
ln -s /usr/local/src/Python-3.7.5/bin/pip3 /usr/bin/pip3

*建连失败可能因为/usr/bin/目录下已经存在python文件，cd到目录下删除它再执行命令

8.查看 python 版本(显示3.6.8则正常)

python -V

9.修改 yum 配置 （yum 原来是使用 python2 的，改了 python3 之后可能会出错，所以需要重新配置。）

vi /usr/bin/yum
把文件头部的#!/usr/bin/python改成#!/usr/bin/python2.7保存
vi /usr/libexec/urlgrabber-ext-down
第一行改为#!/usr/bin/python2.7

-------完成环境配置

##定时任务 1.将python脚本上传至服务器后安装需要的库(报错则cd到爬虫目录)

python -m pip install requirements.txt

2.运行查看是否正常

python main.py

3.查看python环境变量路径

which python

4.设置定时任务

crontab -e

5.设置任务

0 8,10,13,14,18,20,21 * * * /usr/python /home/py/main.py>>/home/log.log
含义：每天8点10点13点14点18点20点21点执行任务 
/usr/python 为python环境变量目录就是之前建连生成的文件
/home/py/main.py 为爬虫主程序路径
>>/home/log.log 在/home路径下生成名为log的爬虫print日志文件

6.查看定时任务

crontab -l

------OVER