记录一下腾讯云服务器crontab部署scrapy简单流程

1.购买centos+docker镜像的腾讯云服务器（内置Python2，python3.6）

2.简单配置好服务器密码后远程“ ssh 用户名@服务器ip“ 远程链之后提示输入密码后进行连接

3.pip3安装scarpy一直失败（使用了“python3 -m pip install --upgrade pip“ 之后pip3 install scrapy解决报错）

4.使用“scp -r 本地文件路径 用户名@服务器IP：要保存在服务器上的路径地址“ （-r命令是递归上传文件夹）

5. vi test.sh创建shell脚本（

#!/bin/sh
cd /Document_test/crontab_test/crontabProject/crontabProject/spiders
nohup /usr/local/bin/scrapy crawl test >../log_test.log 2>&1 &

）没用Python虚拟环境（之前一直提示nohup没有scrapy命令，所以 创建软连接，使用which scrapy查看scrapy路径添加在shell脚本中解决报错问题）

6.crontab -e查看正在运行的定时任务

7.i命令插入：

43 21 * * * sh /Document_test/crontab_test/crontabProject/crontabProject/spiders/cron.sh

（每天21:43执行脚本）

“：wq“保存并退出