将糗事百科爬虫部署到服务器centos

最新推荐文章于 2024-06-13 10:08:05 发布
最新推荐文章于 2024-06-13 10:08:05 发布
阅读量1.3k 收藏
点赞数
分类专栏： python爬虫 文章标签： redis python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_63272654/article/details/121387446
版权

修改配置文件 部署到 centos

# settings.py
# 增加下面两句内容
# REDIS 配置
REDIS_HOST = '192.168.31.50'  # 127.0.0.1 只能本机使用 如需多台服务器使用, 需要能够连通的主机
REDIS_PORT = 6379

获取redis 服务器ip
在这里插入图片描述

redis配置

# 配置 redis.windows-service.conf
bind 0.0.0.0
protected-mode no

在这里插入图片描述

bind 0.0.0.0 # 监听所有网络
protected-mode no 权限允许
在这里插入图片描述

修改配置后需要重启服务
命令行运行
redis-server redis.windows-service.conf

启动1台虚拟机

在这里插入图片描述

把爬虫项目上传到centos当中

在这里插入图片描述
在这里插入图片描述
放到服务器后进行解压
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

安装服务器上没有的几个库

在这里插入图片描述
在这里插入图片描述

进入到爬虫文件目录

由于服务器存在多个版本py pip安装库并不匹配3.6, 需要卸载py3.6

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
好了
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

CY3761
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
一步一步来 如何将Django项目部署到Centos 7 腾讯云服务器
weixin_50591344的博客
05-01 4775
一步一步来 将Django项目部署到Centos 7 腾讯云服务器部署环境=======================================PYTHON环境=======================================PYTHON虚拟环境0、安装virtualenv的意义1、安装virtualenv2、使用virtualenv================================为虚拟环境安装Django和uwsgi===========================
CentOS 7 部署NTP服务器
junlan的博客
02-17 1万+
一、前言 1、介绍 NTP的官方网站：http://www.pool.ntp.org，在这可以找到离我们城市最近的NTP Server. NTP建议我们为了保障时间的准确性，最少找两个NTP Server；在中国可以选择下面几台服务器： server 1.cn.pool.ntp.org server 0.asia.pool.ntp.org server 2.asia.pool.ntp.org 2、 时间时区概念（CST = UTC+8 = GMT+8） DST：夏令时指在夏天太阳...
部署NodeJs项目到CentOS服务器
晓何的博客
04-18 2473
部署NodeJs项目到CentOS服务器安装工具和搭建服务器环境（64位）本地安装会话管理器（Xshell）安装NodeJs安装phantomJs安装MongoDB开始部署项目将NodeJs项目文件通过sftp传输到服务器上forever运行NodeJs项目 安装工具和搭建服务器环境（64位） Xshell NodeJs PhantomJs MongoDB 本地安装会话管理器（Xshell） ...
Python DrissionPage 爬虫 linux 部署说明 centos
sinat_39327967的博客
08-09 7628
目前 DrissionPage 是装在 linux centos 系统上面的 浏览器用的是115版本最新的chrome 浏览器 DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage DrissionPage
CentOS7部署Apache服务器
gelad_w的博客
10-29 6203
这篇文章讲解如何在CentOS7上部署自己的Apache服务器。 文章目录一、Apache服务器简述二、部署Apache服务器1、安装Apache三、修改Apache默认配置1、查看Apache当前端口2、修改默认端口3、查看修改后的端口四、防火墙配置1、允许 http 服务永久通过防火墙2、允许 81 号端口永久通过防火墙3、重新加载防火墙五、启动Apache1、启动Apache2、添加Apache自启动2、查看Apache状态六、部署网页1、编写HTML文件 一、Apache服务器简述 百度百科：Apa
Centos7.5 服务器搭建Selenium 爬虫详细教程
码王吴彦祖的博客
03-12 1358
Centos7.5 服务器搭建Selenium 爬虫详细教程 测试成功时间2020.03.12 1.安装python 我安装的是python3.6 需要给服务器安装Python环境 最新的EPEL 7仓库提供了Python3（python 3.6）的安装源，如果你使用CentOS7或更新的版本的系统你也可以按照下面的步骤很轻松的从EPEL仓库安装。 安装最新版本的EPEL sudo yum ins...
华为云云耀云服务器L实例评测｜初始化centos镜像到安装nginx部署前端vue、react项目
热门推荐
编程知识分享，主打前端
09-14 3万+
大家好，我是yma16，本文分享关于华为云云耀云服务器L实例评测｜初始化centos镜像到安装nginx部署前端vue、react项目。什么是云服务器华为云发展历史华为云是华为技术有限公司旗下的云计算服务品牌，在国内外均有较高的知名度和市场份额。2011年：华为开始筹备云计算事业部，成立了云计算战略委员会。2012年：华为推出了云计算解决方案，并开始在国内外投放云计算广告。2013年：华为云发布了第一个云计算产品——“华为云计算平台”，并在国内与阿里云、腾讯云等厂商展开了竞争。
将你的Python代码部署到云服务器上
Pythonwill的博客
12-02 5111
CentOS7安装Python环境
[CentOS Python系列] 一.阿里云服务器安装部署及第一个Python爬虫代码实现
杨秀璋的专栏
02-13 2万+
从2014年开始，作者主要写了三个Python系列文章，分别是基础知识、网络爬虫和数据分析。Python基础知识系列：Pythonj基础知识学习与提升Python网络爬虫系列：Python爬虫之Selenium+Phantomjs+CasperJSPython数据分析系列：知识图谱、web数据挖掘及NLP它们都是基于Windows系统下的Python编程，每个系列都从安装过程、基础知识到实际应用三...
将Django项目部署到CentOs服务器中
09-20
今天小编就为大家分享一篇关于将Django项目部署到CentOs服务器中的文章，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧
详解将Django部署到Centos7全攻略
09-20
主要介绍了详解将Django部署到Centos7全攻略，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
centos 7.5 部署varnish缓存服务器功能
09-14
主要介绍了centos 7.5 部署varnish缓存服务器功能，文中给大家介绍了varnish的简介和主要特征,需要的朋友可以参考下
服务器Centos部署MySql并连接Navicat过程详解
09-08
主要介绍了服务器Centos部署MySql并连接Navicat过程详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
Redis的一点入门了解
qq_41680016的博客
06-11 922
泛指非关系型数据库的，随着web2.0互联网的诞生，传统的关系型数据库很难对付web2.0时代，尤其是超大规模的高并发的社区，渐渐暴露出很多难以克服的问题，而NoSQL在当今大数据环境下发展的十分迅速，Redis是发展的最快的，而且是我们当下必须要掌握的一门技术。核心：redis是将所有的数据全部放在内存中，所以说使用单线程去操作效率就是最高的，多线程（CPU上下文切换消耗的时间相对就比较多），对于内存系统来说，如果没有上下文切换，效率就是最高的，多次读写都在一个CPU上，怎能不快呢。
Redis的监控与调优：工具使用和性能提升技巧
哎 你看的博客
06-11 1009
I. 引言 A. 介绍Redis的重要性，以及为什么需要对Redis进行监控和调优 B. 概述本文的主要内容和目的 II. Redis监控工具的使用 A. 介绍Redis自带的监控工具，如INFO命令、MONITOR命令等 B. 介绍第三方的Redis监控工具，如Redisson PRO、Redis Insight等 C. 提供使用各种监控工具的实践示例和解读 III. Redis性能问题的诊断 A. 介绍如何使用监控工具发现Redis的性能问题，如内存泄漏、瓶颈等 B. 提供诊断性能问题的实践示例和解读
基于 Redis 实现分布式缓存
最新发布
快乐的小三菊的博客
06-13 638
RDB全称Redis数据备份文件），也被叫做Redis数据快照。简单来说就是把内存中的所有数据都记录到磁盘中。当Redis实例故障重启后，从磁盘读取快照文件，恢复数据。快照文件称为RDB文件，默认是保存在当前运行目录。执行save命令会阻塞其他的命令，如下图：执行bgsave命令时则会开启子进程执行备份任务，如下图：Redis正常停机时会执行一次RDB，突然断电啥的则不会执行。AOF全称为（追加文件）。Redis处理的每一个写命令都会记录在AOF文件，可以看做是命令日志文件。其中$3。
基于redis的分布式锁
孟斌斌的博客
06-12 374
用脚本的方式执行redisTemplate.execute会出现异常java.lang.UnsupportedOperationException: io.lettuce.core.output.ValueOutput does not support set(long)，好像是返回值无法转换，由于redis版本不匹配，我这边redis版本是5.0.14.1；释放锁时需要确保只有持有锁的客户端才能释放锁，因此需要在释放锁时检查锁的值是否是当前客户端的标识。4.3通过value比对保证解的锁是自己持有的；
redis windos修复版本
清风
06-10 405
【代码】redis windos修复版本。
springboot项目部署到腾讯云服务器centos8
04-30
部署SpringBoot项目到腾讯云服务器CentOS 8上需要经过以下几个步骤： 1. 安装Java 首先需要在服务器安装Java环境，可以使用yum命令进行安装。安装完成后，使用java -version命令检查Java是否正确安装。 2. 安装Nginx Nginx是一款高效的Web服务器，需要在服务器上进行安装。通过yum安装Nginx，并启动Nginx服务。 4. 部署SpringBoot项目 将打包好的SpringBoot项目上传到服务器上，并通过Java命令运行项目。可以使用nohup命令来使项目在后台运行，如：nohup java -jar xxx.jar &。 5. 配置Nginx反向代理 为了让用户能够通过域名访问项目，需要进行Nginx反向代理的配置。通过修改Nginx配置文件，将请求转发到Tomcat服务，从而实现域名访问SpringBoot项目。 以上就是在腾讯云服务器CentOS 8上部署SpringBoot项目的几个步骤。需要注意的是，在进行部署前需要对服务器进行一定的安全加固，如修改默认登录密码、关闭SSH密码登录等。同时，也需要对项目进行一些优化，如开启Gzip压缩等，以提高项目的性能表现。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

CY3761

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值