- 博客(3)
- 收藏
- 关注
原创 scrapy分布式学习笔记(1) nginx+scrapyd+腾讯云服务器远程登录
scrapy分布式学习笔记(1) nginx+scrapyd+腾讯云服务器远程登录 最近在学如何实现scrapy分布式,今天刚搞明白nginx+scrapyd+腾讯云服务器实现远程登录,做下记录。 所需组建安装 scrapyd安装 pip install scrapyd scrapyd启动 scrapyd nginx安装 yum install nginx nginx启动 cd /usr/local/nginx/sbin/ ./nginx 端口开启 由于scrapyd是6800端口,大部分网上教程
2021-12-22 00:35:28 1875
原创 docker+scrapy-splash+代理池的方法
docker+scrapy-splash+代理池的方法 看了很多网站都没有把这种方法说透,自己摸索了一天,终于明白了如何在docker环境下对scrapy-splash搭代理池。 根据scrapy官方文档对挂代理的描述 ,应该在本地创建这样一个文件夹my-proxy-profiles-dir,然后在该文件夹内放上你的代理文件,如果是代理池 那就多个文件。 docker run -p 8050:8050 \ -v <my-proxy-profiles-dir>:/etc/splash/
2021-12-09 23:38:50 1071
原创 MYSQL学习笔记——数据库的基础使用
MYSQL学习笔记一mysql数据库常见操作账户登录创建数据库功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 mysql数据库常见操作 账户登录 -h 指定服务器的主机地址, -P 指定端口号 , -u 指定当前shell用户
2021-09-14 22:48:47 99
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人