腾讯云搭建爬虫服务器（学习笔记）

系统版本centos7.2（x64），更新时间2019.04.10

创建Github

如何使用git clone " "

# 获取密匙
ssh-keygen -t rsa -C "*@qq.com"

# 创建git
git init /路径
git config --global user.name "lxdaixin128"
git config --global user.email "306111603@qq.com"

额外操作

git pull --rebase git@github.com:aixin128/cloud.git master
git push --set-upstream git@github.com:aixin128/cloud.git master

ssh 操作

# 直接删除
ssh-keygen -R "你要删除的ip"

# 通过文件删除ssh
vim ~/.ssh/known_hosts

获取文件内容用

cat /..

服务器文件传输

# 上传文件到服务器
scp /Users/mr.dong/Desktop/server.sh root@94.191.9.234:/etc/init.d/server.sh

# 下载文件到本地
scp root@94.191.9.234:/etc/init.d/ssdb /Users/mr.dong/Desktop

连接ssdb

可将ssdb-cli配置环境变量

# 内网外网端口相同
/usr/local/ssdb/ssdb-cli -h 127.0.0.1 -p 8888
/usr/local/ssdb/ssdb-cli -h 94.191.9.234 -p 8888

后台运行爬虫代理

cd /usr/local/proxy_pool/Run
nohup python3 -u main.py > proxy.log 2>&1 &

后台自启动

sudo chkconfig --add server
sudo chkconfig server on

Screen方法介绍

screen命令详解